如何在Spring Batch中一次性向多个表填充数据
Spring Batch读取CSV同步写入多表的可行解决方案
方案1:使用CompositeItemWriter组合多个JdbcBatchItemWriter
该方案适合单条CSV记录直接对应多表字段、无复杂关联依赖的场景
核心逻辑是将读取到的每一条CSV记录,同时分发到多个配置好的写入器中,每个写入器独立负责一个表的插入逻辑,配置方式简单无侵入。
配置示例:
// 配置表1写入器 @Bean public JdbcBatchItemWriter<CsvDataDTO> tableAWriter(DataSource dataSource) { return new JdbcBatchItemWriterBuilder<CsvDataDTO>() .dataSource(dataSource) .sql("INSERT INTO table_a (field1, field2) VALUES (?, ?)") .itemPreparedStatementSetter((item, ps) -> { ps.setString(1, item.getField1()); ps.setInt(2, item.getField2()); }) .build(); } // 配置表2写入器 @Bean public JdbcBatchItemWriter<CsvDataDTO> tableBWriter(DataSource dataSource) { return new JdbcBatchItemWriterBuilder<CsvDataDTO>() .dataSource(dataSource) .sql("INSERT INTO table_b (field3, field4) VALUES (?, ?)") .itemPreparedStatementSetter((item, ps) -> { ps.setString(1, item.getField3()); ps.setDate(2, java.sql.Date.valueOf(item.getField4())); }) .build(); } // 组合多写入器 @Bean public CompositeItemWriter<CsvDataDTO> multiTableWriter(DataSource dataSource) { CompositeItemWriter<CsvDataDTO> compositeWriter = new CompositeItemWriter<>(); // 按需要的执行顺序添加写入器 compositeWriter.setDelegates(List.of(tableAWriter(dataSource), tableBWriter(dataSource))); return compositeWriter; }
注意事项:
- 所有委派写入器默认在同一个Chunk事务中执行,任意写入失败整个批次都会回滚,保证多表数据一致性
- 可通过调整
setDelegates的入参顺序控制多表写入顺序
方案2:自定义ItemWriter实现多表写入
该方案适合多表存在强关联、需要动态生成关联ID的场景,比如先插主表获取自增主键再插子表
直接实现ItemWriter接口的write方法,在方法内自行编排多表的写入逻辑,灵活度最高。
实现示例:
public class RelationalMultiTableWriter implements ItemWriter<CsvDataDTO> { private final JdbcTemplate jdbcTemplate; public RelationalMultiTableWriter(DataSource dataSource) { this.jdbcTemplate = new JdbcTemplate(dataSource); } @Override public void write(Chunk<? extends CsvDataDTO> chunk) { for (CsvDataDTO item : chunk.getItems()) { // 1. 插入主表,获取自增主键 KeyHolder keyHolder = new GeneratedKeyHolder(); jdbcTemplate.update(conn -> { PreparedStatement ps = conn.prepareStatement( "INSERT INTO main_table (col1, col2) VALUES (?, ?)", new String[]{"id"} // 指定返回的主键字段名 ); ps.setString(1, item.getMainCol1()); ps.setString(2, item.getMainCol2()); return ps; }, keyHolder); Long mainTableId = keyHolder.getKey().longValue(); // 2. 插入关联子表,绑定主表主键 jdbcTemplate.update( "INSERT INTO sub_table (main_id, sub_col1, sub_col2) VALUES (?, ?, ?)", mainTableId, item.getSubCol1(), item.getSubCol2() ); } } }
注意事项:
- 自定义写入逻辑仍然被Spring Batch的事务管理覆盖,整个Chunk写入失败会统一回滚,无需自行处理事务
- 可以根据业务需求灵活加入校验、关联数据查询等附加逻辑
方案3:使用ClassifierCompositeItemWriter按条件路由写入
该方案适合CSV包含多种类型数据、不同类型数据需要写入不同表的场景
通过自定义分类规则,将不同特征的CSV记录自动路由到对应的表写入器中,实现动态分表写入。
内容的提问来源于stack exchange,提问作者user16619767
相关产品推荐
相关产品推荐

