时钟漂移 40 秒 签名和证书校验全失败

早上八点零五分,对外的回调接口全部返回 401,日志里一行 signature timestamp expired,签名窗口是 300 秒。同一时间,另一个服务的 JWT 校验开始报 nbf 未到生效时间。

先怀疑密钥和证书,翻了半小时配置,一个字没改过。随手 date 看了一眼,比标准时间慢了 40 秒。40 秒刚好跨过 300 秒窗口的边,所有带时间戳的请求全部被判过期。

chronyc tracking 显示 offset 40.217 秒,参考源是内网一台 ntp 服务器,状态标着 Not SYNchronised。再 systemctl status 一看,systemd-timesyncd 和 chronyd 同时在跑,两个服务互相改时钟,谁也同步不上。

根因是虚拟机热迁移。迁移之后时钟跳变,chronyd 判定偏差过大,按默认策略它不会直接跳,而是慢慢调,一秒最多几十毫秒。40 秒要调十几分钟,这期间所有签名都是错的。

中间试过手动 date -s 改回去,五分钟后又漂了十几秒,因为 timesyncd 还在后台拉另一个源。

还查了硬件。虚拟机没有独立 RTC,用的是宿主机的时钟,宿主机本身也慢了两秒。这一层改不了,只能靠 guest 内部的 chrony 勤同步,把漂移压在毫秒级。

systemctl disable --now systemd-timesyncd
chronyc tracking | grep -E 'Offset|Leap|Ref'
chronyc makestep
chronyc sources -v

停掉 timesyncd,chrony.conf 加 makestep 1.0 3 和 iburst,重启后执行一次 makestep,时钟一步跳到偏差以内。再禁用虚拟机的宿主动态调时,避免迁移时再次跳变。

收尾时把监控补上,offset 超过 0.5 秒就告警。这类故障最麻烦的地方是症状全在应用层,报错全指向签名和证书,跟时间一点关系都没有。

您可以还会对下面的文章感兴趣: