陆零云
30
0
复现一个偶发的 502,在网关抓包,跑了五分钟,tcpdump 退出时打印一行 3000 packets dropped by kernel。业务日志里那段时间正好有七次失败,全在被丢的区间里。
第一反应是磁盘慢。换到 /dev/shm,丢包数从 3000 降到 2400,有改善,说明写盘确实占了一部分,但不是全部。
看 ring buffer。ethtool -S 里 rx_missed_errors 涨了两千多,网卡自己的缓冲在丢,包还没进内核就没了。...
陆零云
27
0
周三下午 Zabbix 弹了一条告警,eth0 的 rx errors 一小时涨了 3000 多。我第一反应是线路出了问题,打开站点却是 200,图片正常加载,客户一个电话都没有。这种计数器难看但业务无感的情况最容易被忽略,也最容易在真出事那天被翻旧账。
先跑 ethtool -S eth0,rx_missed_errors 和 rx_fifo_errors 都在涨,rx_no_buffer_count 也在动。三个计数器含义不同,missed 多半是 r...