现象
一台洛杉矶机房的机器,白天从国内 ping 过去 180ms,晚八点到十一点涨到 260ms,丢包 8%,ssh 敲一个字符要等半秒。销售说这是 BGP 优化线路,但换了两家同价位的机器表现差不多。同城另一台贵三成的机器,晚高峰却稳定在 160ms。
原因
普通国际 BGP 出口多走 202.97 段的 163 骨干,晚高峰国际出口拥塞时会绕日本或新加坡;CN2 GIA 走 59.43 段,去程回程都直连,拥塞时仍能维持;CN2 GT 只优化去程,回程照样落回 163。商品名里带 BGP 只说明机房有多线接入,不代表国际段质量,两者不是一回事。
解决步骤
第一步,看经过哪些骨干段。在问题时段做 mtr,重点看第 4 到第 8 跳是 202.97 还是 59.43,前者是 163,后者是 CN2。
mtr -r -c 50 -n 1.2.3.4
traceroute -n -T -p 443 1.2.3.4
mtr -r -c 50 -n 1.2.3.4 | grep -E "202.97|59.43"
第二步,双向都测。回程要从国内机器向海外 IP 做 traceroute,很多线路去程优化、回程不优化,只测一个方向会得出错误结论。
第三步,用吞吐而不是延迟做决策。晚高峰跑 iperf3,对比单向吞吐和抖动;面向国内用户的站选 GIA,预算有限就用 BGP 加 CDN 兜底,把静态资源推近用户。
验证
晚高峰连续三天 mtr,RTT 波动在 ±10ms 内、丢包 0,iperf3 吞吐不低于标称的 80%,说明线路等级与业务匹配。
小结
BGP 是接入方式,CN2 是承载网络,不能互相替代。判断靠 mtr 看骨干段、双向测回程、再看晚高峰吞吐,三样都过了再谈价格。
