陆零云
27
0
下午三点开始零星 502,十分钟后整站打不开。php-fpm 的 status 页显示 20 个 worker 全是 active,max_children 也是 20,一个空闲的都没有。
挨个看进程栈,都停在 curl_exec,对端是同一个第三方地址。第一反应是对方接口慢,抓包看过去,连接建好了,请求也发出去了,就是一直不回。代码里 curl_setopt 只设了 URL 和 RETURNTRANSFER,超时一个都没写。
更关键的是 request_...
陆零云
27
0
发版脚本里加了 opcache_reset(),重启 php-fpm 后第一个请求要等 3.2 秒,第二个开始才回到 90 毫秒。刚给 opcache 配了 file_cache,第一反应就是它拖慢的。
先看配置。opcache.file_cache 指向 /tmp/opcache,目录权限 777,文件也确实生成了,一个脚本一个 bin 文件。把这一行注释掉重启,首请求 240 毫秒,问题立刻消失,等于坐实了怀疑。
但 file_cache 本来是为了让...
陆零云
29
0
监控里每天早班第一波访问,接口 p95 从 180ms 跳到 1.2 秒,持续一两分钟就回落。Nginx 的 upstream_response_time 也一样,不是网络问题。
池子配的是 pm = ondemand,pm.process_idle_timeout = 10s,pm.max_children = 40。夜里没人访问,空闲进程全被回收,早上第一个请求要 fork 子进程、加载扩展、连 MySQL 和 Redis。
我先怀疑 opcache...
陆零云
34
0
晚高峰从七点开始,Nginx 的 error.log 里 502 一条接一条,后端 PHP 日志却干净得反常。挑一条完整的看:connect() to unix:/dev/shm/php-fpm.sock failed (11: Resource temporarily unavailable) while connecting to upstream。
11 是 EAGAIN,连接排不上队,不是超时也不是拒绝。第一反应是 pm.max_children...
陆零云
29
0
凌晨两点开始零星 502,监控上十分钟内出现二十次。php-fpm 的 error log 里只有一行 WARNING: [pool www] child 24681 exited on signal 11 (SIGSEGV),再往后什么都没有。PHP 自己的 error_log 是空的,连一条 Fatal error 都没有。
第一反应是内存不够被系统杀了,dmesg 里搜 oom 和 killed,一条记录都没有,free 看剩余内存还有 3G。又怀疑...
陆零云
29
0
活动十点上线,九点跑预热,八百个 URL 提交上去,接口返回成功一百二十个,其余全是 429 和超时。这批页面是提前生成好的静态 HTML,本来应该十几秒就填满边缘节点。
第一反应是并发开太大被限流。预热任务当时是两百并发,我压到五十重跑,成功率涨到六成,但整批要跑四十多分钟,赶不上十点。
去翻源站日志,那段时间 nginx 有大量 502,上游 PHP-FPM 的监听队列排到 128,正常用户请求的 p95 从 200ms 涨到 4.1 秒。回源把应用打...
陆零云
28
0
上周给一台 PHP-FPM 机器开了慢日志,池配置里写了 request_slowlog_timeout = 5s,slowlog 指向 /var/log/php-fpm/www-slow.log。跑满七天,文件一直是 0 字节,可 access log 里耗时超过五秒的请求有一千二百多条,两边完全对不上。
第一反应是参数没被读到。用 php-fpm -tt 打了一遍配置,request_slowlog_timeout 显示 5s,说明池文件确实加载了。又...
陆零云
35
0
request_slowlog_timeout 设 5 秒,slowlog 一天出现 37 条,脚本都是 /www/app/queue/worker.php,last traced function 清一色是 sleep,栈只有 7 帧,看不出是哪段业务。这个脚本单次跑 30 秒,是几个任务串起来的大循环,单进程配了 4 个 worker,慢的时候一起慢。
慢日志只记录触发那一刻的调用栈,sleep 是 FPM 的默认采样点,抓到它只能说明这 5 秒正好停...
陆零云
33
0
周二早上九点十几分,监控开始跳 502,一分钟里二三十个。Nginx 1.24 的 error.log 刷的是同一行:connect() to unix:/run/php-fpm/www.sock failed (11: Resource temporarily unavailable) while connecting to upstream。机器 4 核 8G,PHP 8.2.13,跑一个日活两万左右的小程序接口。
第一反应是进程不够。www.conf...
陆零云
36
0
为了压一下 TTFB,把 opcache 调成生产模式,validate_timestamps=0,revalidate_freq=0,命中率确实上到 99%。代价是发版之后页面还是旧模板。
PHP 8.1.27,脚本 mtime 已经变了,opcache_get_status() 里那个脚本的 timestamp 还停在三天前。validate_timestamps 一关,PHP 就不去 stat 文件,改多少遍都不看。
先试 systemctl rel...