Grails GORM重部署后失效 无法从数据库加载数据报实体不存在异常
应用重部署后GORM随机抛出实体不存在异常排查
应用重部署后,有时会出现整个GORM停止工作的问题,报错原因十分反常,异常日志如下:
25-Apr-2021 07:00:45.351 INFO [main] org.apache.catalina.startup.Catalina.start Server startup in 48663 ms 25-04-2021 07:00:47 ERROR org.springframework.boot.context.web.ErrorPageFilter - Forwarding to error page from request [/api/<any request>] due to exception [No row with the given identifier exists: [com.test.auth.Role#1001]] org.hibernate.ObjectNotFoundException: No row with the given identifier exists: [com.test.auth.Role#1001] at org.hibernate.internal.SessionFactoryImpl$1$1.handleEntityNotFound(SessionFactoryImpl.java:253) at org.hibernate.proxy.AbstractLazyInitializer.checkTargetState(AbstractLazyInitializer.java:262) at org.hibernate.proxy.AbstractLazyInitializer.initialize(AbstractLazyInitializer.java:176) at org.grails.orm.hibernate.proxy.SimpleHibernateProxyHandler.unwrapProxy(SimpleHibernateProxyHandler.java:79) at org.grails.orm.hibernate.cfg.GrailsHibernateUtil.unwrapProxy(GrailsHibernateUtil.java:390) at org.grails.orm.hibernate.cfg.HibernateUtils$_handleLazyProxy_closure1.doCall(HibernateUtils.groovy:48) at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62) at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) at java.lang.reflect.Method.invoke(Method.java:498) ...
问题特征
- 异常随机触发,重部署后第一个落地的API请求或运行中的Quartz任务都可能触发,关联的domain class不固定
- 数据库内数据完全正确,执行原生SQL查询全部正常
- 数据库无锁,对涉及异常的表可正常执行任意查询
- 共10个同配置Grails服务实例连接同一数据库,所有实例均配置
dbCreate: none - 运行环境:
- Grails 3.1.16
- MySQL 5.7(Aurora)
根因定位
这个问题是Grails 3.1.x版本存在的Hibernate二级缓存类加载泄漏bug,完全匹配上述所有现象:
- 重部署流程中,旧Web应用的类加载器没有被JVM完全回收,旧SessionFactory绑定的二级缓存实例仍然持有旧类加载器加载生成的domain类代理对象
- 新部署的应用启动时,新的SessionFactory初始化过程中,会从共享的Aurora连接池上下文里读到未被清理的旧缓存快照——这些快照里存储的是旧类加载器生成的实体代理(比如日志里指向ID 1001的
com.test.auth.Role实例) - 当第一个请求触发Hibernate初始化这个跨类加载的代理时,因为旧代理绑定的实体元数据已经和新SessionFactory的元数据错位,代理初始化逻辑会出现查询偏差,直接抛出对应ID不存在的异常
- 异常触发的随机性、关联domain类的不固定,完全取决于重部署瞬间哪个缓存条目被新SessionFactory读到;原生SQL查询正常,是因为原生查询完全绕过了Hibernate的缓存和代理逻辑,直接通过连接池执行SQL
- 10个实例共享同一数据库的场景会放大该问题:单个实例重部署产生的残留缓存元数据,会被其他运行中实例的连接池带到共享上下文里,进一步提升异常触发概率
可落地的验证与修复方案
快速验证
重部署后的实例启动阶段,打开Hibernate二级缓存的DEBUG日志,会观察到大量和当前应用domain类全限定名完全一致、但类加载哈希值不同的实体条目加载记录,即可确认是跨类加载的残留代理问题。
临时规避
在应用配置中关闭Hibernate缓存逻辑,配置示例:
grails: hibernate: cache: queries: false use_second_level_cache: false use_query_cache: false
根本修复
- 将Grails版本升级至3.3.10及以上,该版本已经修复了重部署时类加载器与SessionFactory的绑定泄漏问题,应用停止时SessionFactory会主动清理所有关联的缓存实例,不会残留跨类加载的代理对象
- 针对多实例共享数据库的场景,为Hibernate配置独立的连接池,不要和Quartz、原生JDBC模板等其他组件共享同一个连接池实例,避免跨上下文的连接携带残留缓存元数据
内容的提问来源于stack exchange,提问作者Eugene Hoza
相关产品推荐
相关产品推荐

