陆零云
30
0
对账时发现同一笔支付记了 2 条流水,金额一样,渠道交易号一样,创建时间差 90 毫秒。回调日志里这两条请求都返回了 200。
代码里明明有幂等表,先 SELECT 再 INSERT,看上去没问题。问题出在并发:两个回调同时到,两个线程都查不到记录,都走了 INSERT。表上只有普通索引,数据库不拦。
第一反应是给应用加锁。单机加 synchronized 有效,但我们是 3 个 Pod,锁不住跨进程,线上照样偶发重复。
改成让数据库兜底。幂等表加 (ch...
陆零云
30
0
对账时发现同一笔订单对应两张满减券,回收了 17 张,用户投诉 4 起。翻支付平台的通知日志,同一个 out_trade_no 有 3 条回调,间隔 15 秒。
我们的 /pay/notify 要查订单、扣库存、发券、写流水,一整套走 5 秒以上。平台等 5 秒没响应就判失败,按间隔重推 3 次。日志里三次请求都进了发券那一步。
第一版在方法上加 Redis 锁,key 用订单号,setnx 30 秒过期。压测 20 并发,发券还是 2 张。原因很直接:第...
陆零云
38
0
财务对账时发现同一个 out_trade_no 有两条入账流水,金额一样,时间差 40 秒。翻回调日志,这个订单的通知来了 6 次,前两次我们都返回了 success 之外的响应。
第一反应是微信重复推送。查文档才知道,没收到 success 就会按 15 秒、15 秒、30 秒、3 分钟的间隔重试。那天的日志显示,第一次请求进来后服务被 OOM kill,连接断了,微信认为失败。
代码是先写流水再更新订单,两步不在一个事务里。进程被杀在中间,流水有了订单...
陆零云
39
0
支付回调出事是在一个周六。财务对账发现同一个微信订单生成了 137 条本地订单,用户只付了一次,客服挨个退款。回调接口是 POST /pay/notify,微信在没收到 success 应答时会按 15 秒、15 秒、30 秒的间隔重试。
翻日志看,第一次回调处理到写库时数据库连接超时,接口返回了 500。微信重试,第二次插入了一条新订单,第三次又插一条。代码里判断重复是靠先 select count(*) 再 insert,两个重试请求之间只差 200...