分享

CentOS, 解决服务器存在大量time

 馒头的人生 2018-01-22

近期服务器出现大量time_wait的TCP连接造成服务器连接数过多而最终导致tomcat假死状态。连接服务器查看连接数的时候提示如下。

  1. [root@test apache-tomcat-7.0.53]# netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}'   
  2. TIME_WAIT 14434  
  3. FIN_WAIT2 6  
  4. ESTABLISHED 133  
很明显可以看出是请求太多频繁,主要由于后端服务器之间是通过rest请求相互调用的,而java服务器回收tcp线程速度比较慢,虽然已经有显性的关闭连接了,但是实际在调

用的时候连接回收还是较慢。通过java API解决这个问题的路子就堵死了。

后来去服务器查阅了大量资料,可以考虑通过修改linux内核的方式解决此处问题。解决方法如下:

  1. vi /etc/sysctl.conf  

添加配置信息

  1. #对于一个新建连接,内核要发送多少个 SYN 连接请求才决定放弃,不应该大于255,默认值是5,对应于180秒左右时间  
  2. net.ipv4.tcp_syn_retries=2  
  3. #net.ipv4.tcp_synack_retries=2  
  4.   
  5.   
  6. #表示当keepalive起用的时候,TCP发送keepalive消息的频度。缺省是2小时,改为300秒  
  7. net.ipv4.tcp_keepalive_time=1200  
  8. net.ipv4.tcp_orphan_retries=3  
  9.   
  10.   
  11. #表示SYN队列的长度,默认为1024,加大队列长度为8192,可以容纳更多等待连接的网络连接数。  
  12. net.ipv4.tcp_max_syn_backlog = 4096  
  13.   
  14.   
  15. #表示开启SYN Cookies。当出现SYN等待队列溢出时,启用cookies来处理,可防范少量SYN攻击。默认为0,表示关闭  
  16. net.ipv4.tcp_syncookies = 1  
  17. #表示开启重用tcp连接。允许将TIME-WAIT sockets重新用于新的TCP连接。默认为0,表示关闭  
  18. net.ipv4.tcp_tw_reuse = 1  
  19. #表示开启TCP连接中TIME-WAIT sockets的快速回收。默认为0,表示关闭  
  20. net.ipv4.tcp_tw_recycle = 1  
  21. #表示如果套接字由本端要求关闭,这个参数决定了它保持在FIN-WAIT-2状态的时间  
  22. net.ipv4.tcp_fin_timeout = 30  
  23.   
  24.   
  25. ##减少超时前的探测次数  
  26. net.ipv4.tcp_keepalive_probes=5  
  27. ##优化网络设备接收队列  
  28. net.core.netdev_max_backlog=3000  
让参数配置生效

  1. /sbin/sysctl -p  
返回结果如图:


问题完美解决:

  1. [root@test apache-tomcat-7.0.53]# netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}'   
  2. TIME_WAIT 96  
  3. FIN_WAIT2 3  
  4. ESTABLISHED 141  


    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多