为什么/var/log/messages日志中会出现“Time wait bucket table overflow”错误信息？

问题现象

Linux系统的ECS实例中，/var/log/messages日志中频繁出现“kernel: TCP: time wait bucket table overflow”错误信息。

Feb 18 12:28:38 i-*** kernel: TCP: time wait bucket table overflow
Feb 18 12:28:44 i-*** kernel: printk: 227 messages suppressed.
Feb 18 12:28:44 i-*** kernel: TCP: time wait bucket table overflow
Feb 18 12:28:52 i-*** kernel: printk: 121 messages suppressed.
Feb 18 12:28:52 i-*** kernel: TCP: time wait bucket table overflow
Feb 18 12:28:53 i-*** kernel: printk: 351 messages suppressed.
Feb 18 12:28:53 i-*** kernel: TCP: time wait bucket table overflow
Feb 18 12:28:59 i-*** kernel: printk: 319 messages suppressed.

问题原因

net.ipv4.tcp_max_tw_buckets参数用于调整内核中管理TIME_WAIT状态的数量，当ECS实例中处于TIME_WAIT状态的连接数，加上需要转换为TIME_WAIT状态的连接数之和超过net.ipv4.tcp_max_tw_buckets参数值时，/var/log/messages日志中就会出现“kernel: TCP: time wait bucket table overflow”错误信息，此时，系统内核将会关闭超出参数值的部分TCP连接。

解决方案

您可以根据实际情况适当调高net.ipv4.tcp_max_tw_buckets参数值，同时，建议您从业务层面去改进TCP连接。本文介绍如何修改net.ipv4.tcp_max_tw_buckets参数值。

1. 使用VNC远程连接实例。

   具体操作，请参见通过密码认证登录Linux实例。

2. 执行以下命令，查看TCP连接数。

    

   netstat -antp | awk 'NR>2 {print $6}' | sort | uniq -c

   显示如下，表示处于TIME_WAIT状态的连接数为6300。

    

   6300 TIME_WAIT
    40 LISTEN
    20 ESTABLISHED
    20 CONNECTED

3. 执行如下命令，查看net.ipv4.tcp_max_tw_buckets参数值。

    

   cat /etc/sysctl.conf | grep net.ipv4.tcp_max_tw_buckets

   显示如下所示，表示net.ipv4.tcp_max_tw_buckets参数值为20000。

   

4. 修改net.ipv4.tcp_max_tw_buckets参数值。

1. 执行以下命令，打开/etc/sysctl.conf文件。

    

   vi /etc/sysctl.conf

2. 按i键进入编辑模式。

3. 修改net.ipv4.tcp_max_tw_buckets参数值。

   例如，将net.ipv4.tcp_max_tw_buckets参数值修改为65535。

    

   net.ipv4.tcp_max_tw_buckets = 65535

4. 按Esc键，输入:wq，保存并退出编辑。

5. 执行如下命令，使配置生效。

    

   sysctl -p