news 2025/12/30 13:51:32

“An I/O error occurred while sending to the backend” 时,可能是你的 SQL 参数超过了 32767

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
“An I/O error occurred while sending to the backend” 时,可能是你的 SQL 参数超过了 32767

一、现象:一个看似“网络”的异常

生产日志里突然冒出:复制

org.postgresql.util.PSQLException: An I/O error occurred while sending to the backend. Caused by: java.io.IOException: Tried to send an out-of-range integer as a 2-byte value: 34524

第一反应:
“网断了?连接池炸了?数据库挂了?”
结果 DBA 说数据库一切正常,别的业务也稳如老狗。于是开始漫长的“甩锅”之旅……


二、定位:34524 到底是个啥?

把异常栈翻到底,发现关键行:

at org.postgresql.core.PGStream.sendInteger2(PGStream.java:347)

PostgreSQL JDBC 驱动在组装Parse报文时,需要把参数个数写成 2 字节。
34524 > 32767(0x7FFF),直接越界,驱动抛错。
所以,这不是网络 I/O,而是协议层面的“参数超限”。


三、复现:一条 SQL 如何把参数干到 3W+

简化后的伪代码:

List<String> teams = dealerTeamService.selectAll(); // 1,800+ Map<String, Object> param = new HashMap<>(); param.put("dataDate", dataDate); param.put("teams", teams); // 1,800 个字符串 return mapper.queryWaitDeal(param);

对应的 XML:

<select id="queryWaitDeal" resultType="xxx"> SELECT 'survey' AS stage, 1 AS orderId, COALESCE(SUM(wait_cnt), 0) AS waitCnt FROM t_wait_deal WHERE data_date = #{dataDate} AND (dealer_id::text||','||dealer_team_id::text) = ANY <foreach collection="teams" item="t" open="ARRAY[" separator="," close="]"> #{t} </foreach> UNION ALL <!-- 还有 3 个 UNION,每个都 copy 一遍 teams --> </select>

1 800 × 4 条 UNION × 3 天批次 ≈ 34 000 个参数,
完美踩雷。


四、协议天花板:32767 的由来

PostgreSQL Frontend/Backend Protocol 文档里写得明明白白:

Parse (F) Int32 length String statementName String query Int16 number of parameter types (→ 2 字节) ...

JDBC 驱动只是忠实实现,想改协议?先 fork PG 源码


五、解法:参数瘦身三板斧

方案思路代码量级推荐指数
1. 临时表/VALUES 表COPY团队列表到临时表,SQL 里直接JOIN中等★★★★☆
2. 分批查询内存拆队,每批 1k,结果归并★★★★★
3. 服务端数组类型Array[text]换成int[],一条= ANY(?::int[])即可需 DBA 配合★★★☆☆

临时表演示:

sql

-- 会话级临时表,自动回收 CREATE TEMP TABLE tmp_team ON COMMIT DROP AS SELECT unnest(?::text[]) AS team_id; SELECT ... FROM t_wait_deal w JOIN tmp_team t ON (w.dealer_id||','||w.dealer_team_id) = t.team_id;

Java 端只需传1 个 java.sql.Array,参数个数瞬间降到 3 个。

分批演示:

List<List<String>> partitions = Lists.partition(allTeams, 800); return partitions.stream() .map(p -> mapper.queryWaitDeal(dataDate, p)) .reduce(this::merge) .orElse(Collections.emptyList());

六、踩坑小结

  1. 看到“An I/O error occurred while sending to the backend”先别急着重启,
    Caused by翻到底,关键字“out-of-range integer as a 2-byte value”直指参数过多。

  2. MyBatis 的<foreach>爽归爽,集合 size 超过 1k 就要警惕

  3. 架构评审时,把“列表查询”当潜在 SQL 炸弹,提前留好分批/临时表口子。

  4. 32767 是硬天花板,任何 ORM、任何驱动都绕不过去


七、一行代码应急兜底

if (teams.size() > 1000) { throw new BizException("一次最多选择 1000 个团队,请缩小范围"); }

先保命,再优化。


八、参考

  • PostgreSQL Protocol 3.0 – Frontend/Backend Protocol

  • PostgreSQL JDBC Driver –PGStream.javahistory #2471

  • MyBatis Foreach 陷阱 – MyBatis Documentation

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2025/12/11 20:37:43

《Agentic设计模式》:构建智能系统的实战指南

本文系统介绍AI智能体的概念、五步循环工作法及四个复杂度层级&#xff0c;详细阐述构建智能体系统的21个核心设计模式&#xff0c;涵盖基础模式、高级能力、鲁棒性和系统级模式。同时探讨智能体未来五大假设、市场趋势及实践建议&#xff0c;为开发者提供从理论到实践的完整指…

作者头像 李华
网站建设 2025/12/11 20:35:25

adb命令大全

1、退出终端最常用的退出命令是 exit 或 logout&#xff0c;直接输入后回车即可。使用快捷键 Ctrl D 来达到同样的效果。

作者头像 李华
网站建设 2025/12/24 6:54:26

29、Linux基础:TCP/IP服务与系统信息管理

Linux基础:TCP/IP服务与系统信息管理 1. 学习Linux的意义与基础铺垫 在网络自动化领域,掌握Linux技能是非常重要的。虽然并非每个学习者都想成为专业的Linux管理员,但具备一定的Linux知识,在复杂生产环境中会有很大的帮助。很多Python网络自动化资源往往忽略了良好Linux管…

作者头像 李华
网站建设 2025/12/25 15:18:01

Android摄像头调试神器:v4l2 camera apk全方位指南

Android摄像头调试神器&#xff1a;v4l2 camera apk全方位指南 【免费下载链接】Androidv4l2cameraapk资源介绍 Android v4l2 camera apk是一款专为开发者设计的摄像头功能实现工具&#xff0c;支持在Android设备上进行摄像头预览和调试。它兼容多种Android版本&#xff0c;提供…

作者头像 李华
网站建设 2025/12/20 8:19:58

鸿蒙 Electron 跨生态协同:与 Windows/macOS/Android 互联互通实战

鸿蒙Electron跨生态协同&#xff1a;与Windows/macOS/Android互联互通实战 在多系统并存的办公与生活场景中&#xff0c;单一设备的能力边界始终有限。鸿蒙Electron凭借鸿蒙系统的分布式软总线技术&#xff0c;打破了Windows、macOS、Android与鸿蒙设备之间的壁垒&#xff0c;…

作者头像 李华