陆零云
30
0
对账服务调合作方的接口,正常一次 40ms 左右。压测时发现一个怪现象:连续请求很快,一旦中间空闲超过一秒,下一次请求就变成 300ms,P99 从 60ms 抖到 320ms。合作方那边说他们的处理时间没变,看日志都是十几毫秒。
第一反应是连接池把连接回收了,重新建连要握手。把池子的空闲回收时间从 30 秒改到 300 秒,抓包确认复用同一个四元组,问题照旧。又怀疑是 DNS,解析结果加了本地缓存,也排除。
用 ss -tin 看连接状态,空闲前 cwn...
陆零云
34
0
客户报海外上传慢,一个 2.3MB 的包要 11 秒,折算下来不到 200KB/s。我在服务器上复现,curl 上传同一份文件,时间和客户说的差不多。
ss -ti 看连接细节,cwnd 停在 10,ssthresh 也是 10,重传比例 18.4%。这个组合很像链路在丢包,先按丢包查。
iperf3 单线程跑一遍,结果一样;mtr 三十跳扫下来没有一跳持续丢包;机房那边说没做限速。三条线索都不支持丢包。
回头看连接寿命。业务是短连接,每次上传新建一条 T...
陆零云
41
0
200MB 的安装包,客户那边下载速度稳定在 100KB/s 左右,换浏览器、换网络都一样。同一台机器用 iperf3 打 TCP 能到 48Mbps,链路本身没问题。
先看发送端的拥塞窗口和发送队列。
ss -tin dst 203.0.113.9
cubic wscale:7,7 rto:204 rtt:58.2/12.4
cwnd:10 ssthresh:7 send 14.6Kbps
rcv_space:29200
cwnd 一直停在...
陆零云
66
0
现象:连接数不高,新请求却报端口耗尽
服务运行一段时间后,日志里出现 Cannot assign requested address 或连接超时,但 CPU、内存、带宽都还有余量。执行 ss -s 看到 timewait 数量上万,而且持续增长。
原因:短连接太多,主动关闭方要等 60 秒
TCP 连接关闭时,主动关闭的一方会进入 TIME_WAIT 状态,等待 2MSL(Linux 默认 60 秒)才释放,目的是保证最后一个 ACK 能重传、避免旧连接...
陆零云
53
0
现象:小包能通,大包全丢
服务器能 ping 通外网,SSH 登录也正常,但网页一直转圈:HTTPS 握手卡住、图片加载到一半断开、大文件传输速度归零。奇怪的是重启网络又好了几分钟。
原因:路径上的 MTU 比本机小
MTU 是单个数据帧能承载的最大字节数。链路中间如果有 PPPoE 拨号、IPsec 隧道、VXLAN 或运营商专线,实际可用 MTU 会比以太网标准的 1500 更小。本机仍按 1500 发大包,且设置了 DF 标志不允许分片,中间设备只...
陆零云
493
0
基础环境跳板机,IP:192.168.3.174控制机01,IP:192.168.2.78控制机02,IP:192.168.2.79控制机01、控制机02只允许跳板机访问。nginx安装这里使用docker-compose安装123456789101112131415161718# docker-compose.ymlversion: '3.7'services: nginx: &nb...