将50万条SQL查询结果存入ArrayList遇内存溢出，求优化方案

从你的场景和代码来看，一次性把50万条记录转换成SabanaDatos对象并塞进ArrayList，必然会撑爆堆内存——每个对象除了字段数据，还带着对象头、引用等额外开销，50万个实例的内存占用很容易超出JVM的堆限制。结合你提到的系统约束（每2小时仅能查一次库、只能用内存存储、需分时段展示数据），我整理了几个针对性的优化方案：

1. 按需创建对象，拒绝全量加载到内存 #

既然你不需要一次性展示所有数据，而是分时段（比如每10分钟展示一部分），那完全没必要把所有SabanaDatos都存在内存里。可以这么做：

• 配置可滚动ResultSet并保持连接：创建Statement时设置游标为可滚动类型，保持数据库连接打开（注意调整连接池的超时参数，避免连接被自动回收）。之后每次需要展示数据时，直接从ResultSet定位到对应记录，临时创建对象，展示完就让GC自动回收它。

  // 创建支持滚动的Statement
  Statement stmt = conn.createStatement(ResultSet.TYPE_SCROLL_INSENSITIVE, ResultSet.CONCUR_READ_ONLY);
  ResultSet rs = stmt.executeQuery("你的SQL查询语句");
  
  // 后续每次需要展示数据时，移动游标读取
  rs.absolute(当前批次的起始位置);
  for (int i = 0; i < 每次展示的记录数; i++) {
      SabanaDatos sd = sd.loadSabanaDatos_ResumenLlamadaIntervalo(rs);
      // 处理数据展示逻辑
      rs.next();
  }
  

  这种方式的核心是只在需要展示时才创建对象，内存里始终只留当前批次的对象，内存压力会大幅降低。

2. 用紧凑数据结构存储原始数据 #

如果必须把所有数据存在内存里，放弃ArrayList<SabanaDatos>，改用按字段拆分的数组存储原始值，能大幅减少对象开销：

// 按字段拆分存储，避免每个对象的额外开销
int[] ids = new int[500000];
String[] horas = new String[500000];
int[] duraciones = new int[500000];
// 其他字段同理

int index = 0;
while (rs.next()) {
    ids[index] = rs.getInt("id");
    horas[index] = rs.getString("hora");
    duraciones[index] = rs.getInt("duracion");
    // 读取并存储其他字段
    index++;
}

数组的内存效率远高于大量对象：基本类型数组直接存原始值，没有对象头、引用等额外消耗；String数组虽然存的是引用，但相比每个SabanaDatos对象的多个引用字段，依然能省不少内存。

当需要展示数据时，再临时创建SabanaDatos对象：

SabanaDatos sd = new SabanaDatos();
sd.setId(ids[currentIndex]);
sd.setHora(horas[currentIndex]);
// 设置其他字段

3. 优化JDBC Fetch Size，降低客户端内存压力 #

默认情况下，有些JDBC驱动会一次性把所有查询结果加载到客户端内存，这本身就会占用大量内存。你可以设置fetchSize让驱动分批从数据库拉取数据：

PreparedStatement pstmt = conn.prepareStatement("你的SQL查询语句");
pstmt.setFetchSize(1000); // 每次从数据库读取1000条到客户端
ResultSet rs = pstmt.executeQuery();

这个参数能避免一次性把50万条数据加载到本地，配合按需加载的方案，能进一步压低内存峰值。

4. 压缩SabanaDatos的内存占用 #

• 如果用的是Java 16+，把SabanaDatos改成record类：record是轻量级不可变类，JVM会对它做内存优化，比普通POJO占用更少内存：

  public record SabanaDatos(int id, String hora, int duracion, int navegautenticado, int indicadorasesor, int llamadaexitosa, int llamadanoexitosa, String tipocliente) {}
  

• 确保字段用基本类型而非包装类（比如用int而不是Integer），避免自动装箱带来的额外对象开销。

5. 临时调大JVM堆内存（治标方案） #

如果以上优化后仍有内存压力，可以临时调整JVM堆参数，比如把最大堆内存设为4GB：

java -Xmx4g -jar 你的应用.jar

但这只是临时救急，核心还是要从数据加载和存储方式上优化，别依赖堆内存无限扩容。

内容的提问来源于stack exchange，提问作者Ivalberto