PDO 报 2014 未缓冲查询还活跃 循环里再查一次就炸

导出脚本要给财务跑上月流水,二十万行,每行还要去关联表查一次商户名。跑到第七分钟报 SQLSTATE[HY000]: General error: 2014 Cannot execute queries while other unbuffered queries are active. Consider using PDOStatement::fetchAll().

2014 这个码不常见,头一次见会以为是连接串了。它的意思是上一个语句的结果集没读完,就在同一条连接上发了新查询。MySQL 协议里结果集是流式的,客户端不把数据取光,服务端就一直等着。

第一反应是代码里有多线程,其实没有,单进程循环。回去看连接初始化,DSN 后面挂了一串属性,其中一行写着 MYSQL_ATTR_USE_BUFFERED_QUERY 为 false。两年前为了省内存加的,当时导出字段少,没人注意。

关掉缓冲之后每个 query 都变成流式,fetch 没走完就发下一条,必然报 2014。改回来最省事,但二十万行一次性进内存,峰值又多 200M。

试过在循环里每次新开连接,能跑通,可二十万次连接把 max_connect_errors 顶满,中途开始拒绝新连接。

最后分两步。外层保留流式,因为订单表字段宽,但改成按 id 游标分批,每批一千行 fetchAll 取完再发下一批。内层查询用单独连接,走连接池,不和外层共享。

$sql = 'SELECT id, amount FROM orders WHERE id > ?'
     . ' ORDER BY id LIMIT 1000';
$stmt = $pdo->prepare($sql);
$rows = $stmt->fetchAll(PDO::FETCH_ASSOC);
$last = end($rows)['id'];

分批写法要保证 id 递增且唯一,否则会漏行。游标取上一批的最大 id,测试时用 count 对了一遍,二十万零三百二十一行,一行不差。

跑完 26 分钟,内存峰值 180M。之前那版跑到一半就挂,从来没跑完过。

您可以还会对下面的文章感兴趣: