如何解决Hibernate JPA中collection fetch分页引发的内存错误
HHH000104警告的根因与修复方案
警告到底是啥意思
这是Hibernate的固定提示信息,只要查询同时满足两个条件就会必出:
- 查询里用了join fetch抓取一对多、多对多类型的集合关联
- 查询传了分页参数(也就是
firstResult偏移量、maxResults返回条数,对应Spring Data JPA的Pageable分页入参)
为啥Hibernate要打这个警告?因为带集合join的多表查询结果会被关联表的行数放大,直接在数据库层用
limit offset,size做分页是不准的——比如1个主实体挂了5条子评论,本来要查10条帖子,join完直接出50行数据,直接分页会把同一个帖子拆成不完整的片段。所以Hibernate默认会把所有符合条件的主实体全捞到内存里,在内存里做正确的分页截断,再把结果返回给应用。
为啥自己没改代码、没改库,平白无故冒这个警告
这个问题根本不是突然出现的bug,只是之前的环境下你根本没感知到:
- 之前全流程测试跑通的时候,对应关联表的数据量特别少,Hibernate全量捞数据的耗时可以忽略,同时日志配置把WARN级别的信息过滤掉了,这条提示根本没打出来。等换了本地运行环境、日志配置回到默认的INFO/WARN级别,原本就存在的警告自然就显示出来了
- 别把这个警告当成功能异常——它和你应用能不能正常跑没有强绑定,哪怕所有业务功能都正常,只要代码里有这类查询写法,达到日志输出条件就会打这条提示,不存在数据库或者代码莫名抽风的情况
对应解决办法(按推荐程度从高到低排)
- 拆分查询逻辑,从根上避免单条SQL同时干“分页+join抓集合”两件事
- 第一步:先不抓任何关联集合,只查主实体的分页结果,这时候数据库可以正常走标准分页逻辑,不会触发全量加载
- 第二步:拿到当前页所有主实体的ID集合,再单独批量查这些主实体对应的关联集合数据,在代码里组装成最终的返回结果
- 调整关联抓取策略
把之前强制在主查询里join抓取的集合关联,改成懒加载模式,让主分页查询的SQL只查单表的主实体数据,等真的要用到关联集合内容的时候再触发关联查询,从逻辑上消掉“主查询带集合join”的场景,自然就不会触发这个警告 - 临时屏蔽警告(别长期用)
如果当前业务下关联表的数据量特别小,完全能接受全量加载的性能损耗,可以直接把对应日志类别的输出级别调高,把警告信息屏蔽掉,参考配置:
这种做法只是把提示藏起来,根本没解决Hibernate全量捞数据的性能隐患,等关联表数据涨到一定规模,迟早会出现接口变慢、甚至内存溢出的问题,生产环境绝对别长期这么干。logging: level: org.hibernate.hql.internal.ast.QueryTranslatorImpl: ERROR
内容的提问来源于stack exchange,提问作者Mohit Chaudhary
相关产品推荐
相关产品推荐

