现象
活动开始后 2000 QPS 打到商品详情,Redis 里热点 key 同时过期,请求全部落到 MySQL,连接数瞬间打满,接口大面积超时,日志里全是 too many Connections。
原因
缓存击穿是单个热点 key 失效瞬间被高并发穿透。过期时间统一设置,整批 key 同时失效;没有互斥重建,几百个请求同时查库;空结果没缓存,不存在的 id 每次都打数据库;缓存与数据库更新顺序不一致,旧值还会被写回。若 TTL 都落在整点,同一秒失效的 key 更多,问题会被成倍放大。
解决步骤
第一步,确认是击穿而不是雪崩。看 Redis 命中率和单 key 的 QPS,再看数据库瞬时连接数,确认压力是否集中在少数 key 上。
redis-cli info stats | grep -E "keyspace_hits|keyspace_misses"
redis-cli --hotkeys
redis-cli ttl product:1001
redis-cli --latency -h 127.0.0.1
第二步,加互斥重建。读缓存未命中时先用 SET NX 抢锁,抢到的请求查库并回填,其余请求短暂等待或返回旧值,锁必须带过期时间防止死锁。
第三步,错开过期并缓存空值。同一批 key 的 TTL 加随机偏移,空结果缓存 60 秒;热点数据用逻辑过期,后台异步刷新,保证任何时刻都能读到值。
验证
同样 2000 QPS 压测,数据库连接数稳定在 40 以内,接口 P99 从 5 秒降到 220ms,缓存命中率保持在 96% 以上。回填时按 key 维度限速,数据库刚恢复也不会被二次压垮。
小结
击穿的解法不是加大缓存,而是控制重建并发。互斥锁、随机过期、空值缓存三件套配齐,热点 key 失效也不会打穿数据库。
