如何简化多组字符串日志搜索Python代码并便捷新增搜索组？

核心思路 #

把搜索组从业务逻辑里拆出来做成可配置的列表，新增搜索组直接在列表里加元素就行，不用改核心匹配逻辑；同时把代码拆成独立功能模块，让可读性和可维护性直接拉满。

优化后代码示例 #

def is_line_matching(line, search_groups):
    """判断单行是否匹配任意一组搜索条件"""
    # 可选：要忽略大小写的话，取消下面两行注释
    # line_lower = line.lower()
    # return any(all(keyword.lower() in line_lower for keyword in group) for group in search_groups)
    
    # 默认大小写敏感的匹配逻辑
    return any(all(keyword in line for keyword in group) for group in search_groups)

def process_log_file(input_path, output_path, search_groups):
    """处理输入文件，把匹配行写入输出文件"""
    matched_lines = []
    # 指定编码避免乱码问题
    with open(input_path, 'r', encoding='utf-8') as f:
        for line in f:
            if is_line_matching(line.strip(), search_groups):
                matched_lines.append(line)
    
    with open(output_path, 'w', encoding='utf-8') as f:
        f.writelines(matched_lines)

if __name__ == "__main__":
    # --------------------------
    # 这里是搜索组配置区，新增组直接加子列表就行
    # --------------------------
    SEARCH_GROUPS = [
        ["123458", "Login"],
        ["123456", "order"],
        # 新增组示例，直接解开注释就能用：
        # ["error", "timeout"],
        # ["user_001", "logout"]
    ]
    
    INPUT_FILE = "input.log"  # 换成你的输入文件路径
    OUTPUT_FILE = "matched_results.txt"  # 换成你的输出文件路径
    
    process_log_file(INPUT_FILE, OUTPUT_FILE, SEARCH_GROUPS)

代码说明 #

• 配置化搜索组：SEARCH_GROUPS是专门的配置区域，新增搜索组只需要加个新的子列表，完全不用碰匹配逻辑代码，新手也能操作。
• 模块化拆分：
  • is_line_matching：专门管单行匹配判断，逻辑独立，想改匹配规则直接改这个函数就行。
  • process_log_file：负责文件读写和整体流程，职责单一，看一眼就知道它干啥的。
• 灵活调整：需要忽略大小写？把注释掉的两行打开就行，不用大动干戈改逻辑。
• 可读性拉满：函数名直白，注释明确，哪怕是别人接手你的代码，也能快速看懂。

扩展建议 #

• 如果搜索组特别多，可以把搜索组放到单独的配置文件（比如search_config.json）里，用代码读取配置文件加载，维护起来更方便。
• 可以加个命令行参数功能，直接通过命令行指定输入输出文件和搜索组，连代码都不用打开就能改参数。

内容的提问来源于stack exchange，提问作者antony yu