现象
活动开场瞬间并发冲到 5000,Nginx 开始返回 502,客户端大量连接超时。登录机器看 dmesg,反复出现 possible SYN flooding on port 80 和 times the listen queue of a socket overflowed。ss -lnt 里 80 端口的 Send-Q 一直顶在 511,降不下来。
原因
accept 队列长度取应用 listen() 传入值与 net.core.somaxconn 的较小者,Nginx 默认 backlog 511,系统默认 somaxconn 也是 4096 以内,二者叠加就卡在几百。SYN 队列由 tcp_max_syn_backlog 控制,握手阶段就排队;队列满了内核直接丢 SYN,客户端只能重试,表现为连接超时。worker_connections 不够时,已经建立的连接也排队等不到处理。
解决步骤
第一步,确认是哪个队列溢出。同时看内核日志、监听队列和两个上限参数,避免只调一个。
dmesg | grep -i "listen queue" | tail -5
ss -lnt | grep :80
sysctl net.core.somaxconn
sysctl net.ipv4.tcp_max_syn_backlog
第二步,三个参数一起抬高。somaxconn 与 tcp_max_syn_backlog 都设到 65535,Nginx 的 listen 指令补上 backlog=8192,worker_connections 按并发乘以二设置。
第三步,加兜底与观测。开启 net.ipv4.tcp_syncookies=1,在队列真被打满时仍能完成握手;持续采集 Send-Q 与 overflowed 计数,确认调整后不再增长。
验证
同样 5000 并发压测,ss 里 Send-Q 停留在几十而不是上限,dmesg 不再出现溢出记录,502 比例降到万分之一以下。
小结
队列溢出要同时调应用 backlog 和内核上限,缺一个都白改。先分清 SYN 队列还是 accept 队列,再把三个参数拉齐,最后用计数验证。
