使用Apache POI读取Excel时遭遇GC overhead limit exceeded错误求助

针对你遇到的创建Workbook时触发java.lang.OutOfMemoryError: GC overhead limit exceeded的问题，结合你的环境限制（Java 8、POI 3.14、1G堆内存无法扩容），提供以下可行方案：

1. 切换为SXSSF流式处理（优先推荐，适用于.xlsx文件） #

POI 3.14已支持SXSSF，它是XSSF的低内存替代实现，通过将超出内存缓存的行写入临时磁盘文件，避免加载整个Excel到内存。

核心用法： #

FileInputStream fis = new FileInputStream("目标文件.xlsx");
// 设置内存缓存行数为100（可根据实际调整，越小内存占用越低）
SXSSFWorkbook sxssfWorkbook = new SXSSFWorkbook(new XSSFWorkbook(fis), 100);

try {
    // 逐个处理工作表
    for (int sheetIdx = 0; sheetIdx < sxssfWorkbook.getNumberOfSheets(); sheetIdx++) {
        SXSSFSheet sheet = sxssfWorkbook.getSheetAt(sheetIdx);
        // 遍历行处理数据
        Iterator<Row> rowIterator = sheet.iterator();
        while (rowIterator.hasNext()) {
            Row row = rowIterator.next();
            // 处理单元格数据并入库
            Iterator<Cell> cellIterator = row.cellIterator();
            while (cellIterator.hasNext()) {
                Cell cell = cellIterator.next();
                // 读取单元格值（根据类型处理：字符串、数字等）
            }
        }
        // 处理完当前工作表后，立即清理其临时数据
        sheet.dispose();
    }
} finally {
    // 关闭Workbook并清理所有临时文件
    sxssfWorkbook.dispose();
    fis.close();
}

注意：SXSSF不支持完整的公式求值（若无需公式结果可忽略），且临时文件默认存储在系统临时目录，确保该目录有足够磁盘空间。

2. 针对.xls文件使用HSSF Event API #

如果你的Excel是旧版.xls格式，使用基于SAX的HSSF Event API，它不会创建完整的Workbook对象，而是逐解析文件流中的记录，内存占用极低。

核心示例： #

FileInputStream fis = new FileInputStream("目标文件.xls");
HSSFRequest request = new HSSFRequest();

// 注册事件监听器处理各类型记录
request.addListenerForAllRecords(new HSSFListener() {
    @Override
    public void processRecord(Record record) {
        // 处理行记录
        if (record instanceof RowRecord) {
            RowRecord rowRecord = (RowRecord) record;
            int rowNum = rowRecord.getRowNumber();
            // 行相关逻辑
        }
        // 处理单元格值记录
        else if (record instanceof CellValueRecordInterface) {
            CellValueRecordInterface cellRecord = (CellValueRecordInterface) record;
            int colNum = cellRecord.getColumn();
            // 根据单元格类型读取值（比如NumberRecord、LabelSSTRecord等）
            if (cellRecord instanceof NumberRecord) {
                double value = ((NumberRecord) cellRecord).getValue();
                // 处理数字值
            } else if (cellRecord instanceof LabelSSTRecord) {
                String value = ((LabelSSTRecord) cellRecord).getString();
                // 处理字符串值
            }
        }
    }
});

// 触发事件解析
HSSFEventFactory eventFactory = new HSSFEventFactory();
eventFactory.processEvents(request, fis);
fis.close();

3. 内存优化细节 #

• 及时释放资源：创建Workbook前确保已关闭所有未使用的文件流，处理完每个工作表后立即调用sheet.dispose()（SXSSF）释放临时数据。
• 避免加载无关工作表：如果只需处理部分工作表，直接通过getSheet("工作表名")或getSheetAt(索引)加载目标表，无需遍历全部。
• 调整GC参数：在Tomcat的启动参数中添加-XX:+UseG1GC（Java 8支持），G1垃圾收集器在内存紧张时的GC效率优于默认的Parallel GC，可能避免GC overhead触发。

内容的提问来源于stack exchange，提问作者Avinash Reddy