Python中无需修改被测函数,能否用gc模块测试保存异常引发的引用循环?
提问内容
本问题对应Python官方缺陷跟踪条目36820。
问题背景
保存异常会引发循环引用,原因是异常的内置数据包含traceback对象,该traceback存有对应栈帧,栈帧中又包含了保存该异常的变量,形成引用闭环。
示例代码:
try: 1/0 except Exception as e: ee = e
该代码本身不会出现故障,因为Python的垃圾回收器最终会回收释放对应内存,但可以通过如下方式规避该循环引用问题:
try: 1/0 except Exception as e: ee = e # 后续业务逻辑 finally: ee = None
在上述缺陷条目的演示中,可看到该场景下弱引用被意外保活的情况。
核心咨询问题
是否存在无需修改被测函数本身的测试方案,大致流程为:
- 运行被测函数
- 检查是否产生了新的循环引用
gc模块能否实现该检测功能?
解答
可行性结论
完全可以通过gc模块实现检测,且不需要修改被测函数本身的逻辑。
具体实现逻辑
Python的gc模块默认会跟踪所有容器类对象(包括异常、traceback、栈帧这类循环引用涉及的核心对象),核心思路是通过前后快照对比+手动触发全量回收,定位被测函数运行后残留的、无法被自动释放的循环引用对象。
测试步骤(无需改动被测函数)
- 前置清理(避免干扰)
先关闭自动gc,手动触发一次全量回收,清空之前的残留对象:import gc gc.disable() # 关闭自动gc,防止测试过程中阈值触发打乱结果 gc.collect() # 先清掉之前所有的垃圾对象 before_objs = {id(obj): type(obj) for obj in gc.get_objects()} - 运行被测函数
直接调用你要检测的函数即可,不需要做任何修改。 - 回收与比对检测
再次手动触发全量回收,统计本次回收后新增的残留对象:unreachable_count = gc.collect() # 返回本次回收中清理的不可达对象数 after_objs = {id(obj): type(obj) for obj in gc.get_objects()} # 找出被测函数运行后新增、且未被回收的对象 new_leaked_objs = { obj_id: obj_type for obj_id, obj_type in after_objs.items() if obj_id not in before_objs } - 结果判定
如果new_leaked_objs中出现了Exception及其子类、traceback、frame这类类型的对象,就说明存在异常保存导致的循环引用。如果要进一步确认引用闭环结构,可以调用gc.get_referents()/gc.get_referrers()遍历新增对象的引用链,验证是否存在「异常→traceback→栈帧→保存异常的变量」的闭环。
额外补充
- 如果要验证弱引用是否被意外保活,可以在运行被测函数前给预期回收的对象创建弱引用,运行完触发gc后检查弱引用是否仍有指向,即可直接验证保活问题。
- 该方法需要在隔离的测试环境下运行,避免测试环境本身存在的常驻对象干扰快照比对结果,尽量每个测试用例单独跑前置清理逻辑。
内容的提问来源于stack exchange,提问作者VPfB
相关产品推荐
相关产品推荐

