早上九点,图片站开始零星返回 502,集中在华东两个省。同一张图刷新一两次能出来,过一会儿又不行,客服收到的截图里页面是破图。
先确认 502 是谁发的。curl -I 带上调试头,响应里有 X-Cache: MISS 和 X-Switch: 3,说明请求已经落到边缘节点,是节点回源失败之后自己拼出来的 502,不是源站返回的。
边缘回源走 HTTPS,回源 HOST 配成了图片子域,SNI 也跟着发这个子域。源站 nginx 只给主域装了一张证书,没有图片子域的 server 块,握手时落到 default_server,吐出来的是主域那张证书。名字对不上,节点侧校验失败,连接直接断开。
验证很快,在源站本机对着回源 IP 做两次握手,一次指定 SNI,一次不指定:
openssl s_client -connect 10.20.30.40:443 -servername img.a.com \
-brief </dev/null 2>&1 | grep -E 'verify|CN='
openssl s_client -connect 10.20.30.40:443 -brief </dev/null
第一条 verify return code 是 0,第二条 62,hostname mismatch,输出里 CN 写的是主域。到这一步链路就清楚了,节点握手失败,重试两次后放弃,用户拿到 502。
中间试过一个偷懒办法,在节点侧把回源证书校验关掉。502 当时就没了,等于回源链路不再验身份,安全扫描第二天点了名,只能撤回。
正规处理有两条路。源站补一个图片子域的 server 块并挂上对应证书,或者把回源 HOST 改回主域,让 SNI 跟着主域走。我们选了后者,改配置不用等证书签发,滚动发布十分钟生效。
改完盯了两小时,502 比例从 0.7% 掉到 0.003%,剩下的几条是源站自己的 499。回源日志里那张证书的 CN 和 SNI 终于是同一个名字。
