SSR 挂了降级 CSR 没生效 502 白屏 5 秒 开关怎么验

陆零云 8 0
SSR 服务发版重启,30 秒内所有请求 502。前端写了降级逻辑,window.onerror 里拉 CSR 空壳,实际一点没生效,用户白屏 5 秒后跳到错误页。 第一反应是降级脚本没打包进去,翻构建产物,代码在。再抓包,502 响应体是 nginx 的错误页,前端 JS 根本没机会执行,onerror 挂在 window 上也没用,页面都没加载完。 试着把 error_page 挂到 server 层,nginx 对 upstream 返回的 502...

三层缓存 TTL 都设 1 天 回源 QPS 320 分层顺序怎么定

陆零云 34 0
10 月中旬做缓存治理,浏览器 Cache-Control 设 1 天,CDN 边缘 1 天,Nginx proxy_cache 也是 1 天。按理回源应该很低,实际源站 QPS 还有 320,日志里同一个页面一小时回源 40 次。 第一反应是 CDN 没生效,看响应头 X-Cache 是 MISS,Age 一直停在 0,像是压根没存。 翻 Nginx 的 access log 才发现,proxy_cache_key 默认带 $args,站内链接全带 ut...

mTLS 双向认证报 400 客户端证书没发 ssl_verify_client 怎么配

陆零云 31 0
对接方说一直 400,我们 access_log 里能看到请求进来,nginx 直接返回 400,响应体只有一行:400 No required SSL certificate was sent。 配置是 ssl_verify_client on,ssl_client_certificate 指向自签的根 CA。我的第一反应是对面证书没导出对,让对方重新生成一份。 对方发来 curl 命令,带了 --cert 和 --key,本地跑照样 400。把同样的请...

上线检查清单 从 nginx -t 到回滚演练 8 项怎么排

陆零云 33 0
去年一次周五发版,Nginx 配置少了个分号,reload 报错但没人看输出,命令返回非零被脚本忽略了。第二天早上首页 502,查了四十分钟才发现配置根本没生效,还是旧进程在跑。 这事之后整理了一份八项检查,固化进发布流水线。前四项在构建阶段跑,后四项在发布窗口跑,任何一项不过就不允许点发布。 先是配置语法。nginx -t 通过只是最低要求,还要 reload 完之后 curl 本机回环拿 200,确认新 worker 真的起来了。只 reload 不验...

Nginx 反代 HTTPS 后端报 502 先查 SNI 还是证书链怎么定

陆零云 38 0
后端接口从 http 换到 https 之后,Nginx 这一侧开始零星 502。error.log 原文是 upstream SSL_do_handshake() failed,后面跟着 ssl3_read_bytes:sslv3 alert handshake failure while SSL handshaking to upstream。 第一反应是证书过期。openssl s_client 带 servername api.internal.c...

灰度按 1000 个用户分流 刷新就换版本 哈希键怎么定

陆零云 43 0
灰度发布按用户分流,网关里写的是 uid 对 100 取模小于 10,期望 10% 的用户进新版本。上线当天客服收到十几条反馈,页面一会儿新一会儿旧,刷新一次就变。 先看网关日志,同一个 uid 相邻两次请求落在不同版本。取模的输入是 uid,值本身不会变,除非取模之前 uid 是空的。 确实如此。灰度规则放在最外层,未登录用户没有 uid,取到空串,取模变成 0,全部命中灰度。登录之后 uid 有值,又落回旧版本。接口请求和静态资源请求走不同链路,一个带...

大文件分片上传 单片 4MB 仍报 413 要切到多大才不被拦

陆零云 37 0
后台上传课程视频,前端按 8MB 切片。60MB 的文件在第 3 片开始返回 413,响应头 server 是 nginx,body 是默认的 413 Request Entity Too Large 页面,前端只拿到一个 HTML,JSON 解析报 Unexpected token。 先把 nginx client_max_body_size 从 8m 改到 20m,重启后单片能过,但 PHP 那边返回 200 且 body 是空的,日志里提示 POST...

图片防盗链 Referer 为空误判 403 meta referrer 是不是写反了

陆零云 42 0
站上的图最近被别的站直接引用,带宽一天多跑 40G。运维在 Nginx 里加了防盗链,规则是 if ($invalid_referer) { return 403; },valid_referers 只写了本站域名。上线之后自己的页面也挂了一片图,状态码全是 403。 用 curl 复现:带 -e https://idc.00645.com/ 请求图片是 200,不带 -e、也就是 Referer 为空的时候是 403。可是浏览器里是 HTTPS 页面加载...

反代后只拿到内网 IP | X-Forwarded-For 为什么没传过来

陆零云 51 0
后端 PHP 拿到的 REMOTE_ADDR 是 10.0.0.12,日志里所有用户都是这个 IP,风控没法做。链路是 CDN 到负载均衡,再到 Nginx 和 PHP-FPM,四段,任何一段都可能把真实 IP 丢了。 先在每一层打日志。Nginx 的 log_format 加上 $http_x_forwarded_for 和 $remote_addr,CDN 那边看回源请求头。 log_format main '$remote_addr - $http_...

被打到 502 之后 限速和清洗阈值怎么设才不误伤

陆零云 33 0
下午两点开始 502 暴涨,Nginx 错误日志里全是 connect() failed (110: Connection timed out) while connecting to upstream,源站负载 3 都不到,连接数却是平时的十倍。 先看是不是 CC。access log 按 IP 聚合,前 20 个 IP 贡献了 78% 的请求,UA 全是同一个版本,请求集中在两个搜索接口,每个都带随机参数,缓存全被打穿。 限速先上,按 IP 和按接口两...