客户反馈新加坡和马来西亚的用户打开首页要四秒以上,国内测是 1.1 秒。站点挂在一家 CDN 上,套餐里默认走新加坡节点。我先在马来西亚的跳板机上用 curl 分段计时,看时间花在哪一段。
结果 time_namelookup 18ms,time_connect 42ms,time_appconnect 180ms,time_starttransfer 3.6 秒。TLS 都握手完了,首字节等了三秒多,问题在回源或者节点缓存。加 -I 看响应头,X-Cache 是 MISS,Age 0,这个 URL 每次都在回源。
按说静态页应该能缓存。查缓存规则,默认只缓存 html 以外的后缀,首页是斜杠结尾,被判成了动态。手动改成按 Content-Type 缓存,text/html 也进缓存,命中率从 12% 涨到 68%,剩下的未命中还是慢。
dig 看 CNAME,域名落到 sg1 那台节点,再解析是两个新加坡 IP。回源地址配的是源站公网 IP,从新加坡回上海走普通国际出口,mtr 测出来 180ms 到 220ms,抖得厉害。回源一次要 1.6 秒,节点上再做压缩和图片处理,凑出 3.6 秒不奇怪。
试过把回源改成厂商的内网专线,控制台上开了以后延迟降到 90ms,但只对静态资源生效,html 还是走公网。最后是在源站前面挂了一台香港轻量服务器做二级源,CDN 回源到香港,香港再回上海走 CN2。端到端延迟没降多少,回源 TTFB 从 1.6 秒压到 400ms。
对比数据在同一台跳板机上跑,各二十次取中位数:
# 同一台跳板机各跑二十次
curl -o /dev/null -s \
-w '%{time_namelookup} %{time_starttransfer}\n' \
https://www.example.com/index.html
0.018 0.042 3.61 是改动前,0.017 0.040 0.62 是改完。中间那家香港节点我也试过,回源 300ms,但节点带宽只有 20M,晚高峰直接打满,图片加载反而更慢。节点选择不能只看 ping,得看节点到源站的稳定带宽。
