为何结果集内存溢出

“结果集内存溢出”通常是指程序从数据库（或其他数据源）查询返回的数据量过大，直接加载到内存中，导致 JVM / 进程内存被撑爆（OutOfMemoryError）。下面从常见原因 → 典型场景 → 解决方案系统说明。

一、常见根本原因

1️⃣ 一次性加载全部结果集

List<User> users = userMapper.selectAll(); // 几百万条

• 数据库返回所有行
• ORM（MyBatis / Hibernate / JPA）全部放入内存
• 内存瞬间飙升

✅ 这是最常见原因

2️⃣ 未使用游标 / 流式查询

• JDBC 默认：ResultSet 会缓存在客户端
• 如果 SQL 返回大结果集，没有边读边处理

3️⃣ 分页方式错误

SELECT * FROM order
LIMIT 1000000, 100000;

• 深度分页导致：
  • 数据库扫描大量数据
  • 应用仍可能一次性接收

4️⃣ 循环中累加对象未释放

List<BigObject> list = new ArrayList<>();
while (rs.next()) {
    list.add(new BigObject(rs));
}

• 对象一直被引用
• GC 无法回收

5️⃣ 序列化 / 网络传输放大

• 结果集 → JSON
• 对象嵌套过深（User → Order → Item → …）
• 内存 × N 倍膨胀

6️⃣ 框架默认行为

二、典型报错表现

java.lang.OutOfMemoryError: Java heap space

或：

GC overhead limit exceeded

三、解决方案（重点）

✅ 1. 流式 / 游标查询（最推荐）

MyBatis

<select id="selectLarge"
        resultSetType="FORWARD_ONLY"
        fetchSize="1000">
  select * from user
</select>

@Select("select * from user")
@Options(resultSetType = ResultSetType.FORWARD_ONLY, fetchSize = 1000)
void selectLarge(ResultHandler<User> handler);

✅ 2. 分批处理（Batch）

int page = 0;
while (true) {
    List<User> list = mapper.selectPage(page, 1000);
    if (list.isEmpty()) break;
    process(list);
    page++;
}

✅ 内存恒定

✅ 3. 数据库端聚合

SELECT user_id, COUNT(*)
FROM order
GROUP BY user_id;

• 不要“查全量再计算”

✅ 4. 只查需要的字段

SELECT id, name FROM user

❌ 避免 SELECT *

✅ 5. 增大 JVM（治标不治本）

-Xmx4g -Xms4g

⚠️ 只适合临时缓解

四、一句话总结

结果集内存溢出 = 数据量 > 内存容量 + 错误加载方式

✅ 正确姿势：

• 边查边处理
• 不缓存全量
• 用游标 / 分页 / 流式

如果你能告诉我：

• 用的什么语言 / 框架（Java？MyBatis？Spring？）
• 数据量级（万 / 百万 / 千万）
• 具体报错或代码

我可以直接给你可落地的改法。