You need to enable JavaScript to run this app. 如何在Spring Batch中一次性向多个表填充数据
优惠活动
大模型
产品
解决方案
定价
更多

如何在Spring Batch中一次性向多个表填充数据

Spring Batch读取CSV同步写入多表的可行解决方案

方案1:使用CompositeItemWriter组合多个JdbcBatchItemWriter

该方案适合单条CSV记录直接对应多表字段、无复杂关联依赖的场景
核心逻辑是将读取到的每一条CSV记录,同时分发到多个配置好的写入器中,每个写入器独立负责一个表的插入逻辑,配置方式简单无侵入。
配置示例:

// 配置表1写入器
@Bean
public JdbcBatchItemWriter<CsvDataDTO> tableAWriter(DataSource dataSource) {
    return new JdbcBatchItemWriterBuilder<CsvDataDTO>()
            .dataSource(dataSource)
            .sql("INSERT INTO table_a (field1, field2) VALUES (?, ?)")
            .itemPreparedStatementSetter((item, ps) -> {
                ps.setString(1, item.getField1());
                ps.setInt(2, item.getField2());
            })
            .build();
}

// 配置表2写入器
@Bean
public JdbcBatchItemWriter<CsvDataDTO> tableBWriter(DataSource dataSource) {
    return new JdbcBatchItemWriterBuilder<CsvDataDTO>()
            .dataSource(dataSource)
            .sql("INSERT INTO table_b (field3, field4) VALUES (?, ?)")
            .itemPreparedStatementSetter((item, ps) -> {
                ps.setString(1, item.getField3());
                ps.setDate(2, java.sql.Date.valueOf(item.getField4()));
            })
            .build();
}

// 组合多写入器
@Bean
public CompositeItemWriter<CsvDataDTO> multiTableWriter(DataSource dataSource) {
    CompositeItemWriter<CsvDataDTO> compositeWriter = new CompositeItemWriter<>();
    // 按需要的执行顺序添加写入器
    compositeWriter.setDelegates(List.of(tableAWriter(dataSource), tableBWriter(dataSource)));
    return compositeWriter;
}

注意事项:

  • 所有委派写入器默认在同一个Chunk事务中执行,任意写入失败整个批次都会回滚,保证多表数据一致性
  • 可通过调整setDelegates的入参顺序控制多表写入顺序

方案2:自定义ItemWriter实现多表写入

该方案适合多表存在强关联、需要动态生成关联ID的场景,比如先插主表获取自增主键再插子表
直接实现ItemWriter接口的write方法,在方法内自行编排多表的写入逻辑,灵活度最高。
实现示例:

public class RelationalMultiTableWriter implements ItemWriter<CsvDataDTO> {
    private final JdbcTemplate jdbcTemplate;

    public RelationalMultiTableWriter(DataSource dataSource) {
        this.jdbcTemplate = new JdbcTemplate(dataSource);
    }

    @Override
    public void write(Chunk<? extends CsvDataDTO> chunk) {
        for (CsvDataDTO item : chunk.getItems()) {
            // 1. 插入主表,获取自增主键
            KeyHolder keyHolder = new GeneratedKeyHolder();
            jdbcTemplate.update(conn -> {
                PreparedStatement ps = conn.prepareStatement(
                    "INSERT INTO main_table (col1, col2) VALUES (?, ?)",
                    new String[]{"id"} // 指定返回的主键字段名
                );
                ps.setString(1, item.getMainCol1());
                ps.setString(2, item.getMainCol2());
                return ps;
            }, keyHolder);
            Long mainTableId = keyHolder.getKey().longValue();

            // 2. 插入关联子表,绑定主表主键
            jdbcTemplate.update(
                "INSERT INTO sub_table (main_id, sub_col1, sub_col2) VALUES (?, ?, ?)",
                mainTableId, item.getSubCol1(), item.getSubCol2()
            );
        }
    }
}

注意事项:

  • 自定义写入逻辑仍然被Spring Batch的事务管理覆盖,整个Chunk写入失败会统一回滚,无需自行处理事务
  • 可以根据业务需求灵活加入校验、关联数据查询等附加逻辑

方案3:使用ClassifierCompositeItemWriter按条件路由写入

该方案适合CSV包含多种类型数据、不同类型数据需要写入不同表的场景
通过自定义分类规则,将不同特征的CSV记录自动路由到对应的表写入器中,实现动态分表写入。


内容的提问来源于stack exchange,提问作者user16619767

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.10.09 06:03:04