MQTT 写入场景下大量 ESTABLISHED / TIME_WAIT 连接导致内存过载、操作超时问题

[SteveYurongSu]

使用 MQTT 协议向 IoTDB 写入一段时间后（通常是几天后），系统出现内存过高（无法GC）、各种请求操作超时问题。

通过以下指令看到

netstat -n | awk '/^tcp/ {++y[$NF]} END {for(w in y) print w, y[w]}'

有大量 ESTABLISHED / TIME_WAIT 连接。

netstat -n | grep {MQTT 端口} | wc -l

可以看到是 MQTT 的连接。

[SteveYurongSu]

可以尝试通过调整内核参数解决：

vim /etc/sysctl.conf

#编辑文件，加入以下内容：
net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
net.ipv4.tcp_fin_timeout = 30

然后执行 /sbin/sysctl -p 让参数生效。

配置说明：

net.ipv4.tcp_syncookies = 1
表示开启SYN Cookies。当出现SYN等待队列溢出时，启用cookies来处理，可防范少量SYN攻击，默认为0，表示关闭；

net.ipv4.tcp_tw_reuse = 1
表示开启重用。允许将TIME-WAIT sockets重新用于新的TCP连接，默认为0，表示关闭；

net.ipv4.tcp_tw_recycle = 1
表示开启TCP连接中TIME-WAIT sockets的快速回收，默认为0，表示关闭；

net.ipv4.tcp_fin_timeout=30
修改系統默认的 TIMEOUT 时间。

参考：https://blog.csdn.net/liuzhenwen/article/details/50245359