Filebeat 8.12 一次异常堆栈拆成 4000 条 multiline 怎么配

陆零云 29 0
上线后日志平台里全是零散的 at com.xxx 行,一次空指针异常被拆成 4000 多条,按 traceId 聚合根本看不出调用栈。 Filebeat 默认逐行读取,一行一个事件。Java 的堆栈天然跨行,不配 multiline 就是现在这个样子。 第一反应是加 pattern。写成空白加 at 开头就并入上一条。配完重启,大部分堆栈合上了,异常首行还是孤立的。 因为首行是 java.lang.NullPointerException: null,下一...

Python 3.11 读 GBK 日志报 0x80 解码错:errors 该设哪个值

陆零云 33 0
日志采集脚本跑在 Python 3.11.7 上,每天 6 点处理 12 万行 IIS 日志,open 时写死 encoding="gbk"。周一直接报 UnicodeDecodeError: 'gbk' codec can't decode byte 0x80 in position 1023,整批日志卡住,下游报表空了 4 小时。 第一反应是文件被写坏了。用 file 看结果是 ISO-8859 text,不是纯 GBK。又怀疑编码写错,改成 utf-...