JDK 17.0.9,下单接口用的是 ThreadPoolExecutor(8, 16, 60s, ArrayBlockingQueue(200), Abortpolicy)。大促当天 500 个任务并发提交,日志里刷 RejectedExecutionException,财务对账发现 37 笔订单没有落库,用户那边显示下单成功。
拒绝策略本身没选错,AbortPolicy 抛异常是正常设计,错在调用处 catch 住之后只打了一条 warn,任务就彻底没了。队列 200 加最大线程 16,同一时刻最多接住 216 个,超出的全被丢掉。
换成 CallerRunsPolicy 试了一天,任务不丢了,但拒绝时由 Tomcat 的工作线程自己跑,网关线程被占住,上游开始大面积报 504,等于把丢单换成了雪崩,当天回滚。
最后自己写拒绝策略:先把任务序列化落一张本地表,再交给补偿线程按 5 秒间隔重投,连续三次失败进死信队列并告警。队列改成有界 500,核心线程提到 16,最大线程 32。
参数不是拍脑袋定的,压测时盯 queueSize 曲线,峰值 480 说明队列够用,再大只会拉长排队时间。拒绝策略里别做耗时 IO,落表这一步交给异步队列,真正写盘由单独线程做,否则拒绝瞬间会把提交线程再拖一次。
确认口径:500 并发压测成功 500 单,队列峰值 480 没溢出;人为把下游打到超时,补偿表里能看到记录并在 15 秒内重投成功;监控上 rejected 计数不再恒为 0,而是触发告警。
executor = new ThreadPoolExecutor(16, 32, 60, TimeUnit.SECONDS,
new ArrayBlockingQueue<>(500),
new PersistOnRejectPolicy()); 