如何实现IPython %store指定变量名恢复及内存释放？

一、为什么你的retrieve函数会报错？ #

你的函数里有两个核心问题导致了no stored variable outputfile的错误：

1. IPython魔法命令的变量解析逻辑问题：%store -r outputfile会直接把outputfile当成要恢复的变量名，而不是读取你传入的outputfile参数的值（比如调用时的'frame'）。魔法命令在函数中执行时，不会自动解析Python变量，必须动态生成命令字符串才能正确传递参数值。
2. 路径字符串的转义错误：你定义path时最后一个单引号没有正确转义，改用带r前缀的原始字符串可以避免这类转义问题。

二、修复后的retrieve函数 #

先修正路径定义，再用get_ipython().run_line_magic动态执行%store命令，就能正确使用参数中的变量名了：

import IPython
import gc
import os
import numpy as np
import pandas as pd

# 用原始字符串定义路径，避免转义问题
path = IPython.paths.get_ipython_dir() + r'\profile_default\db\autorestore\'

def retrieve(inputfile, outputfile='temp'):
    # 拼接完整路径，同时检查文件是否存在
    input_full_path = os.path.join(path, inputfile)
    output_full_path = os.path.join(path, outputfile)
    
    if not os.path.exists(input_full_path):
        raise FileNotFoundError(f"Stored variable '{inputfile}' does not exist")
    
    try:
        # 重命名存储文件
        os.rename(input_full_path, output_full_path)
        # 动态执行%store -r命令，传入参数值作为变量名
        get_ipython().run_line_magic('store', f'-r {outputfile}')
    finally:
        # 无论执行是否成功，都将文件改回原名称，避免破坏存储结构
        if os.path.exists(output_full_path):
            os.rename(output_full_path, input_full_path)
    
    # 将恢复的变量同步到全局命名空间
    globals()[outputfile] = locals()[outputfile]
    return

调用retrieve('df','frame')后，全局变量frame就会包含原来存储的df数据了。

三、关于内存释放的解决方案 #

你提到用%xdel、del、gc.collect()后内存仍无法释放，通常是因为存在隐藏引用（比如IPython的历史记录、其他变量的间接引用、Pandas内部缓存等），可以尝试以下方法：

方法1：彻底清除变量+强制垃圾回收 #

# 删除目标变量
del frame
# 清除IPython中该变量的历史记录，避免残留引用
%reset_selective -f frame
# 强制触发垃圾回收
gc.collect()

方法2：用局部变量临时处理，避免全局残留 #

如果只是临时使用存储的变量，可以在函数内部处理，用完立即清理：

def process_stored_data(inputfile):
    # 临时恢复到局部变量
    get_ipython().run_line_magic('store', f'-r {inputfile}')
    temp_df = locals()[inputfile]
    # 在这里处理数据
    result = temp_df.groupby('category').sum()
    # 立即删除局部变量，断开引用
    del temp_df
    gc.collect()
    return result

方法3：创建独立副本，断开内存引用 #

恢复变量时创建深度副本，避免原存储对象和新变量共享内存：

retrieve('df','frame')
# 创建深度副本，断开与原存储对象的引用
frame_independent = frame.copy(deep=True)
# 删除原恢复变量
del frame
gc.collect()
# 后续使用frame_independent即可

方法4：彻底重置IPython环境 #

如果以上方法都无效，可以执行%reset -f清除所有变量，再重启IPython内核，这是最彻底的内存释放方式。

内容的提问来源于stack exchange，提问作者Pureluck