陆零云
30
0
文件同步服务跨省跑,一个 2GB 的包传了六小时,速率卡在 8.2MB/s。同一条链路上个月的记录是 70MB/s,这十分钟里重传计数涨了 3000 多次,重传率 12%。
下意识觉得是丢包。mtr 打了一千个包,每一跳都是 0 丢,链路质量看着没问题。转到内核视角,ss -ti 看连接细节,retrans 在涨,sacked 一直是 0。
sacked 为 0 说明 SACK 根本没生效。SACK 是握手时协商的,抓包看两边 SYN 的 option,客...
陆零云
32
0
支付回调服务凌晨遇到上游机房光缆被挖,按常理半分钟内就该报警,实际是十三分钟后才看到接口失败。这段时间里 200 个回调线程全挂住,连接池被打空,正常订单跟着排队。
应用日志里没有异常,只有一串正常的 GC 输出。ss -ti 看那条卡住的连接,retrans 计数器一路涨到 15,unacked 停在 1,说明数据发出去了没人确认,内核还在死等。
查 tcp_retries2,值是 15。这是重传次数,按 RTO 指数退避累加,1 秒、2 秒、4 秒这样...
陆零云
32
0
监控面板上 TcpRetransSegs 的曲线从早上八点开始往上走,重传率算下来 3.2%,正常应该在 0.5% 以下。用户侧反馈是下载附件慢,网页本身还能开,说明丢的不是控制报文而是数据段。
先排除本机网卡。ethtool -S 看 tx_dropped 和 rx_missed 都是 0,ss -ti 看 Established 连接的 retrans 字段,几条连接分别是 12/3400 和 8/2900,确实在重传。拥塞窗口掉到 10 以下,一直在...