Python如何仅打开一次patterns.txt避免多次调用main重复读取文件

核心思路是将patterns.txt的读取结果缓存下来，仅执行一次文件IO操作，后续调用直接复用缓存的模式列表。下面是最适配你场景的修改方案，同时修复了原代码的隐含问题：

修改后的parse.py代码 #

# 请自行替换为你实际使用的Grok依赖导入语句
from pygrok import Grok

# 加载模式文件的工具函数
def load_patterns():
    # 用with上下文管理器自动关闭文件，避免资源泄漏
    with open('patterns.txt', 'r', encoding='utf-8') as f:
        # 过滤空行，返回所有有效模式
        return [line.strip() for line in f if line.strip()]

# 模块顶层加载模式，Python模块仅首次导入时执行一次该代码
PATTERNS = load_patterns()

class Parse:
    def __init__(self, log): 
        self.log = log

    def parse(self):
        parsed_log = ""
        for pattern in PATTERNS:
            grok = Grok(pattern)
            result = grok.match(self.log)
            if result:
                parsed_log = result
                # 匹配到才跳出循环，修复原代码break位置错误问题
                break
        return parsed_log

def main(log):
    matches = Parse(log)
    return matches.parse()

方案说明 #

• 利用Python模块特性：模块在同一个进程中只会被导入一次，顶层的load_patterns()仅会在首次导入parse模块时执行一次，后续所有main()调用都会直接复用缓存好的PATTERNS列表，不会重复读取文件。
• 原有调用逻辑无需任何修改，完全兼容你现有的调用方式。
• 修复了原代码的2个隐含问题：
  • 原break位置错误，不管是否匹配到模式都会只尝试第一个模式就终止循环
  • 原patterns是main函数的局部变量，Parse类的parse方法无法访问，运行会抛出名称错误

其他可选实现方式 #

如果你不想使用模块级全局变量，也可以选择以下两种方案：

• 类属性缓存：将PATTERNS作为Parse类的类属性，首次实例化Parse时加载模式列表，后续实例直接复用类属性
• 函数缓存：给load_patterns函数加上@functools.lru_cache(maxsize=None)装饰器，首次调用后自动缓存返回结果，后续调用直接返回缓存值

内容的提问来源于stack exchange，提问作者user1234