Spring Batch两次chunk执行间隔80秒卡顿问题排查求助

核心排查方向 #

1. ItemReader分页性能问题 #

这是大数量量批处理最常见的耗时原因：

• 检查你使用的repositoryUserItemReader配置：确保pageSize参数与chunk配置的500保持一致，避免单chunk需要多次分页查询拉取数据
• 确认分页查询的排序字段已创建数据库索引，当offset达到数万级别时，无索引的分页查询会触发全表扫描，耗时会从毫秒级飙升至数十秒

2. JPA持久化配置问题 #

你使用的RepositoryItemWriter默认未开启批量提交，单chunk500条数据会单条执行插入，执行效率极低：
在应用配置文件中添加以下JPA参数开启批量操作：

spring.jpa.properties.hibernate.jdbc.batch_size=500
spring.jpa.properties.hibernate.order_inserts=true
spring.jpa.properties.hibernate.order_updates=true

3. 资源池耗尽问题 #

• 检查数据库连接池（如Hikari）的最大连接数配置，避免上一个chunk执行完后连接未及时释放，下一个chunk等待获取连接的耗时
• 若你使用的是游标读取而非分页读取，检查游标持有连接是否正常释放

4. 耗时定位方法 #

在Reader、Processor、Writer三个组件的方法入口和出口分别打印时间戳，即可精准定位80秒的耗时具体发生在哪个执行阶段，再针对性排查即可。

内容的提问来源于stack exchange，提问作者juan.vlr