陆零云
28
0
压测卡在 12 万 QPS 上不去,24 核的机器 top 里 CPU0 的 si 跑到 99%,其余 23 个核几乎空闲。业务进程的 CPU 使用率不到 30%,瓶颈不在应用。
先看中断落在哪。cat /proc/interrupts 数了一下,eth0 的 16 个队列全是 CPU0 在收。irqbalance 被运维为了稳定性停掉了,中断亲和性又没人配,全堆在第一个核。
手动把队列绑到 0 到 15 核,si 摊开了,QPS 涨到 18 万,但立刻卡...
陆零云
29
0
压测时碰到一个怪现象:iperf3 单线程跑到 940 Mbps 就打住,top 里 us 只有 8%,si 却有 35%,而且全压在 cpu0 上。八核机器,七个核在闲着。
ethtool -l 看队列数,Combined 是 1。这块网卡支持 8 个队列,驱动默认只开了一个,收发全走一个硬中断,软中断也排在 cpu0。带宽看着是打满了,实际是单核在扛,再往上必然上不去。
把队列开出来:ethtool -L eth0 combined 8。再看 /pro...