PHP-FPM 子进程 signal 11 后 502 日志是空的 | catch_workers_output 怎么开

凌晨两点开始零星 502,监控上十分钟内出现二十次。php-fpm 的 error log 里只有一行 WARNING: [pool www] Child 24681 exited on signal 11 (SIGSEGV),再往后什么都没有。PHP 自己的 error_log 是空的,连一条 Fatal error 都没有。

第一反应是内存不够被系统杀了,dmesg 里搜 oom 和 killed,一条记录都没有,free 看剩余内存还有 3G。又怀疑磁盘写满导致日志写不进去,df 显示各个分区都很宽松。排除这两个之后,问题就卡住了,因为拿不到崩溃前的任何上下文。

查手册才注意到 pool 配置里有个 catch_workers_output,默认值是 no。worker 进程的标准输出和标准错误在这种情况下被重定向到 /dev/null,扩展或 Zend 引擎在崩溃前打的那些信息全被吞了。master 只能感知到子进程退出,写一行 signal 11 了事。

; php-fpm.d/www.conf
catch_workers_output = yes
decorate_workers_output = no
; 修改后 reload,不要 restart
systemctl reload php8.3-fpm
grep -c "exited on signal 11" /var/log/php-fpm/error.log

打开之后等了两天,又崩了一次,这次日志里有了内容:崩溃前最后一行是某个图像处理扩展在解析一张损坏的 JPEG 时打的内部错误,紧接着就是段错误。拿那张图单独跑,必现。用二分法把扩展逐个禁用,禁到图像处理那个扩展时不再崩,确认是扩展本身的问题。

那台机器上装的是 3.2.0 版本,官方仓库里 3.3.0 的更新说明提到修复了 PHP 8.3 下的一个空指针解引用。升级到 3.3.0 之后,同一张图再跑,进程正常返回错误码,不再崩。

验证不是看有没有 502,而是连续观察七十二小时,grep 计数保持 0,同时用脚本每天跑一遍那批可疑图片,全部返回业务错误而不是让进程退出。顺手把 catch_workers_output 写进了所有节点的模板,decorate_workers_output 关掉,避免日志里多出一堆进程前缀影响 grep。

现在 pool 的 error log 保留三十天,崩溃一次就能看到栈前的最后几行,不用再靠猜。

您可以还会对下面的文章感兴趣: