Open Liberty集合引用共享问题及批量插入优化求助

问题背景 #

开发博客系统的条目克隆端点：管理员批准发布时，需要克隆主表（核心内容）及附属表（上传文件、关联用户、评论等）的所有数据，并将版本号加1。所有表共享条目ID，通过版本字段追踪变更历史。技术栈为Open Liberty应用服务器 + Jakarta 10 + JPA + CriteriaAPI，已完成所有表的实体类开发。

当前实现与问题 #

1. 关联关系克隆错误 #

当前用Commons BeanUtils复制实体属性实现克隆，代码示例：

Entity1 entity1 = entity1Query.getSingleResult();
Entity1 entity1duplicate = new Entity1();
BeanUtils.copyProperties(entity1duplicate , entity1);

List<Entity2> entity2 = entity2Query.getResultList();
if(!entity2.isEmpty()) {
   for (Entity2 en : entity2) {
      Entity2 entity2duplicate = new Entity2();
      BeanUtils.copyProperties(entity2duplicate , en);
      entity2duplicate.setVersion(newVersion);
      em.persist(entity2duplicate);
   }
}

em.persist(entity1duplicate);

问题：BeanUtils会复制原实体的关联引用，导致新克隆的主实体指向旧版本的附属实体，手动设置关联未成功；且仅在启用<property name="hibernate.order_inserts" value="true"/>时触发该问题。

2. 批量插入失效 #

配置了以下参数但未生效，仍逐条插入，单次请求耗时400-500秒：

<property name="hibernate.jdbc.fetch_size" value="100"/>
<property name="hibernate.jdbc.batch_size" value="30"/>

尝试启用order_inserts后，又出现集合引用共享错误。

解决方案建议 #

解决关联克隆问题 #

• 弃用BeanUtils，手动编写克隆逻辑，确保关联指向新实体：
  1. 先克隆主实体，重置自增ID（如果有）、设置新版本号，手动复制非关联属性
  2. 逐个克隆附属实体，同样重置ID、设置版本号，同时将附属实体的主实体引用指向新克隆的主实体
  3. 将新的附属实体集合绑定到新主实体，确保双向关联一致（如果是双向OneToMany）
• 示例代码：

// 克隆主实体
Entity1 originalMain = entity1Query.getSingleResult();
Entity1 clonedMain = new Entity1();
// 手动复制核心属性
clonedMain.setTitle(originalMain.getTitle());
clonedMain.setContent(originalMain.getContent());
clonedMain.setVersion(newVersion);
// 其他非关联属性...

// 克隆附属实体并建立正确关联
List<Entity2> clonedSubs = new ArrayList<>();
for (Entity2 originalSub : entity2Query.getResultList()) {
    Entity2 clonedSub = new Entity2();
    clonedSub.setFileName(originalSub.getFileName());
    clonedSub.setVersion(newVersion);
    // 其他属性...
    // 绑定到新主实体
    clonedSub.setEntity1(clonedMain);
    clonedSubs.add(clonedSub);
}
// 将附属实体集合绑定到主实体
clonedMain.setEntity2List(clonedSubs);

// 持久化新实体（如果配置了CascadeType.PERSIST，附属实体会自动持久化）
em.persist(clonedMain);

• 问题根源：Commons BeanUtils无法过滤关联属性，导致旧关联被复制；启用order_inserts后，Hibernate按表排序插入，此时关联不一致的问题被触发，本质是克隆逻辑错误。

解决批量插入问题 #

• 先满足批量插入的前提条件：
  1. 实体ID生成策略不能用IDENTITY（自增主键），改用SEQUENCE或TABLE，比如：

  @Id
  @GeneratedValue(strategy = GenerationType.SEQUENCE, generator = "main_seq")
  @SequenceGenerator(name = "main_seq", sequenceName = "MAIN_ENTITY_SEQ", allocationSize = 50)
  private Long id;
  

  （IDENTITY会让Hibernate必须逐条插入获取主键，无法批量）
  2. 同时启用以下配置：

  <property name="hibernate.jdbc.batch_size" value="50"/>
  <property name="hibernate.order_inserts" value="true"/>
  <property name="hibernate.order_updates" value="true"/>
  

• 额外优化措施：
  • 分批次处理大数据量：每处理1000条就flush并清空持久化上下文，避免内存溢出：

    int batchSize = 1000;
    List<Entity2> clonedSubs = // 克隆好的附属实体列表
    for (int i = 0; i < clonedSubs.size(); i++) {
        em.persist(clonedSubs.get(i));
        if ((i + 1) % batchSize == 0) {
            em.flush();
            em.clear();
        }
    }
    // 处理剩余数据
    em.flush();
    em.clear();
    

  • 开启Hibernate SQL日志验证批量是否生效：添加日志配置，查看是否出现batch insert语句
• 注意：先修正关联克隆逻辑，确保所有新实体的关联都是指向克隆后的对象，再启用order_inserts就不会出现集合引用共享错误。

内容的提问来源于stack exchange，提问作者Julian Schaefers