Tomcat多实例集群架构 安全优化和性能优化

时间:2023-03-09 03:55:43
Tomcat多实例集群架构 安全优化和性能优化

Tomcat多实例

复制tomcat目录

#将tar解压出来的tomcat复制出两个实例来
cp -a /usr/local/apache-tomcat-8.0. /usr/local/tomcat1
cp -a /usr/local/apache-tomcat-8.0. /usr/local/tomcat2

修改多实例配置文件

#创建多实例的网页根目录
mkdir -p /data/www/www/ROOT
#修改多实例配置文件的以下三行
vim /usr/local/tomcat/conf/server.xml
<Server port="" shutdown="SHUTDOWN"> #管理端口及停止命令
<Connector port="" protocol="HTTP/1.1" #对外提供服务的端口
<Host name="localhost" appBase="webapps" #网站域名及网页根目录路径 第一个实例
<Server port="" shutdown="SHUTDOWN">
<Connector port="" protocol="HTTP/1.1"
<Host name="localhost" appBase="/data/www/www"
第二个实例
<Server port="" shutdown="SHUTDOWN">
<Connector port="" protocol="HTTP/1.1"
<Host name="localhost" appBase="/data/www/www"

启动多实例

/usr/local/tomcat1/bin/startup.sh
/usr/local/tomcat2/bin/startup.sh

Tomcat集群

使用nginx+Tomcat反向代理集群

Tomcat安全优化和性能优化

安全优化

  • 降权启动
  • telnet管理端口保护
  • ajp连接端口保护
  • 禁用管理端

(1)降权启动(同nginx优化部分的监牢模式)

降权的原则就是利用普通用户来启动Tomcat :

(1)将Tomcat程序目录拷贝到普通用户家目录下

(2)修改家目录下程序的配置文件(启动端口,检测端口等),并重新指定网页根目录路径。

(3)递归授权拷贝后的Tomcat程序的属主属组为普通用户。

(4)用su命令切换为普通用户,启动Tomcat进程

(5)此时Tomcat进程的权限为普通用户权限

(6)如果利用/etc/rc.local文件配置普通用户程序的开机启动,那么需要利用su -c临时切换身份启动。具体可参考linux基础教案里的用户管理部分

passwd wk                #创建普通用户wk
cp -a /usr/local/apache-tomcat-8.0./ /home/wk/tomcat    #复制tar解压的tomcat到wk的家目录
vim conf/server.xml                 #修改配置文件 改启动端口 监听端口 网页家目录位置
<Server port="" shutdown="SHUTDOWN">
<Connector port="" protocol="HTTP/1.1"
<Host name="localhost" appBase="/home/wk/tomcat/webapps"
chown -R wk:wk tomcat            #修改权限
su wk            #进入普通影虎
./tomcat/bin/startup.sh    #启动tomcat

(2)telnet管理端口保护

cat /usr/local/tomcat/conf/server.xml
<Server port="" shutdown="SHUTDOWN"> #表示通过8005端口来接受SHUTDOWN,用来停止Tomcat进程。默认的方式是非常危险的。需要进行修改
Tomcat默认通过8005端口来接收SHUTDOWN这个字符串来关闭Tomcat进程,但这是非常危险的,因此需要修改端口号来防护。否则,通过telnet命令即可强行关闭Tomcat进程

#利用Telnet来关闭Tomcat进程
telnet 127.0.0.1 #通过telnet连接本地8005端口
[wk@wk ~]$ telnet 127.0.0.1
Trying 127.0.0.1...
Connected to 127.0.0.1.
Escape character is '^]'.
SHUTDOWN          #输入大写shutdown关闭tomcat
Connection closed by foreign host.

(3)ajp连接端口保护

vim tomcat/conf/server.xml
<Connector port="" protocol="AJP/1.3" redirectPort="" /> #这是AJP协议打开的端口,我们并不需要开启这个端口,因此注释掉本行
<!--Connector port="" protocol="AJP/1.3" redirectPort="" /-->

(4)禁用管理端

Tomcat默认在安装完成后的网页目录里有很多多余的目录,删除所有不需要用到的目录,并清空ROOT网页默认根目录下的所有东西,规避可能的代码漏洞

cd tomcat/webapps/        
mkdir /tmp/webapps.b      
mv * /tmp/webapps.b    
mkdir ROOT    

性能优化

1 屏蔽DNS查询 enableLookups="false"

DNS查询非常消耗时间,如果开启会影响Tomcat性能,因此关闭。

#默认没有,需添加配置文件如下代码段,在Connector标签位置。表示禁止DNS查询
<Connector port="" protocol="HTTP/1.1"
connectionTimeout="" enableLookups="false" acceptCount=""
redirectPort="" />

2 jvm调优

Tomcat最吃内存,只要内存足够,这只猫就跑的很快。 
如果系统资源有限,那就需要进行调优,提高资源使用率。

#优化catalina.sh初始化脚本。在catalina.sh初始化脚本中添加以下代码:
#catalina.sh的路径为:/usr/local/tomcat/bin/catalina.sh
#此行优化代码需要加在脚本的最开始,声明位置。不要放在后边
JAVA_OPTS="-Djava.awt.headless=true -Dfile.encoding=UTF-8 -server -Xms1024m -Xmx1024m -XX:NewSize=512m -XX:MaxNewSize=512m -XX:PermSize=512m -XX:MaxPermSize=512m"
#代码说明:
server:一定要作为第一个参数,在多个CPU时性能佳
-Xms:初始堆内存Heap大小,使用的最小内存,cpu性能高时此值应设的大一些
-Xmx:初始堆内存heap最大值,使用的最大内存
上面两个值是分配JVM的最小和最大内存,取决于硬件物理内存的大小,建议均设为物理内存的一半。
-XX:PermSize:设定内存的永久保存区域
-XX:MaxPermSize:设定最大内存的永久保存区域
-XX:MaxNewSize:
-Xss 这使得JBoss每增加一个线程(thread)就会立即消耗15M内存,而最佳值应该是128K,默认值好像是512k.
+XX:AggressiveHeap 会使得 Xms没有意义。这个参数让jvm忽略Xmx参数,疯狂地吃完一个G物理内存,再吃尽一个G的swap。
-Xss:每个线程的Stack大小
-verbose:gc 现实垃圾收集信息
-Xloggc:gc.log 指定垃圾收集日志文件
-Xmn:young generation的heap大小,一般设置为Xmx的3、4分之一
-XX:+UseParNewGC :缩短minor收集的时间
-XX:+UseConcMarkSweepGC :缩短major收集的时间

JVM的调优比较复杂,如果想要更详细的理解JVM如何调优,那么请参考网友文章:http://www.cnblogs.com/xingzc/p/5756119.html

企业案例:Linux下java/http进程高解决案例

生产环境下某台tomcat7服务器,在刚发布的时候一切都很正常,在运行一段时间后就出现CPU占用很高的问题,基本上是负载一天比一天高。诸如此类问题,请排查!

问题分析:

(1)程序属于CPU密集型,和开发沟通过,排除此类情况 
(2)程序代码有问题,出现死循环,可能性极大

问题解决:

(1)开发那边无法排查代码某个模块有问题,从日志上也无法分析得出 
(2)我们可以尝试通过jstack命令来精确定位出现错误的代码段,从而拿给开发排查

首先查找进程高的PID号(先找到是哪个PID号的进程导致的)

top -H

查看这个进程所有系统调用(再找到是哪个PID号的线程导致的)

strace -p 进程的PID

如果是Web应用,可以继续打印该线程的堆栈信息(找出有问题的代码块)

printf "%x\n" 线程的PID --->#将有问题的线程的PID号转换成16进制格式
jstack 进程的PID | grep 线程PID号的十六进制格式 -A #过滤出有问题的线程的堆栈信息,找出问题代码块

实际操作演示:

 pgrep -l java
java #java进程及对应PID号
java
java
strace -p #查看PID号为2031的java进程的所有线程调用情况
Process attached - interrupt to quit
futex(0x7f4cdd0e79d0, FUTEX_WAIT, , NULL #只有一个线程,线程的PID号为2032
^C <unfinished ...>
Process detached
printf "%x\n" #将线程的PID号2032转换成十六进制格式
7f0
jstack | grep 7f0 -A #追踪进称号为2031的进程的所有线程调用,从里面过滤出16进制为7f0的线程的代码调用情况
"main" # prio= os_prio= tid=0x00007f4cd4008800 nid=0x7f0 runnable [0x00007f4cdd0e5000]
java.lang.Thread.State: RUNNABLE
at java.net.PlainSocketImpl.socketAccept(Native Method)
at java.net.AbstractPlainSocketImpl.accept(AbstractPlainSocketImpl.java:) #圆括号里显示的是(代码类名:具体调用的代码行号)
at java.net.ServerSocket.implAccept(ServerSocket.java:)
at java.net.ServerSocket.accept(ServerSocket.java:)
at org.apache.catalina.core.StandardServer.await(StandardServer.java:)
at org.apache.catalina.startup.Catalina.await(Catalina.java:)
at org.apache.catalina.startup.Catalina.start(Catalina.java:)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:)
at java.lang.reflect.Method.invoke(Method.java:)
at org.apache.catalina.startup.Bootstrap.start(Bootstrap.java:)
at org.apache.catalina.startup.Bootstrap.main(Bootstrap.java:)
"VM Thread" os_prio= tid=0x00007f4cd406d000 nid=0x7f1 runnable
"VM Periodic Task Thread" os_prio= tid=0x00007f4cd40b8800 nid=0x7f8 waiting on condition
JNI global references: