基于模式列表移除字典键指定模式及处理重复键的最优方法

一、用模式列表批量清理字典键 #

先写一个辅助函数循环处理所有替换模式，再结合字典推导式完成批量清理：

def clean_key(key, patterns):
    cleaned_key = key
    for pattern in patterns:
        cleaned_key = cleaned_key.replace(pattern, '')
    return cleaned_key

# 示例使用
pattern_list = ['_PATTERN1','_PATTERN2']
test_dictionary = {'x_PATTERN1': '1', 'y_PATTERN2': 'Okay...'}

# 仅清理键
cleaned_dict = {clean_key(k, pattern_list): v for k, v in test_dictionary.items()}
# 结果: {'x': '1', 'y': 'Okay...'}

# 同时清理键和值（和你之前的单替换逻辑对齐）
cleaned_dict_with_values = {
    clean_key(k, pattern_list): clean_key(v, pattern_list)
    for k, v in test_dictionary.items()
}

二、处理重复键的最佳实践 #

清理后出现重复键时，默认字典推导式会保留最后一个出现的键值对（后序键覆盖前序），如果需要更可控的处理，有以下几种常用方案：

1. 保留最后一个（默认行为） #

就是上面的基础推导式，适合明确只需要最新/最后一个值的场景，代码最简单。

2. 合并值为列表 #

把相同键的所有值收集到列表中，保留所有原始数据：

from collections import defaultdict

pattern_list = ['_PATTERN1','_PATTERN2']
test_dictionary = {'x_PATTERN1': '1', 'x_PATTERN2': '2', 'y_PATTERN2': 'Okay...'}

cleaned_dict = defaultdict(list)
for k, v in test_dictionary.items():
    cleaned_k = clean_key(k, pattern_list)
    cleaned_dict[cleaned_k].append(v)

# 可选：转换为普通字典
cleaned_dict = dict(cleaned_dict)
# 结果: {'x': ['1', '2'], 'y': ['Okay...']}

3. 自定义合并规则 #

根据需求自定义重复值的处理逻辑，比如字符串拼接、数值取最大等：

cleaned_dict = {}
for k, v in test_dictionary.items():
    cleaned_k = clean_key(k, pattern_list)
    if cleaned_k in cleaned_dict:
        # 示例：用逗号拼接重复的字符串值
        cleaned_dict[cleaned_k] = f"{cleaned_dict[cleaned_k]}, {v}"
    else:
        cleaned_dict[cleaned_k] = v

# 结果（以上面的重复键例子）: {'x': '1, 2', 'y': 'Okay...'}

4. 抛出异常（避免意外覆盖） #

如果重复键属于异常情况，可检测后抛出错误，提前发现数据问题：

cleaned_dict = {}
for k, v in test_dictionary.items():
    cleaned_k = clean_key(k, pattern_list)
    if cleaned_k in cleaned_dict:
        # 找到产生重复键的原键
        duplicate_orig_key = [orig_k for orig_k in test_dictionary if clean_key(orig_k, pattern_list) == cleaned_k][0]
        raise ValueError(f"清理后出现重复键 {cleaned_k}，来自原键 {k} 和 {duplicate_orig_key}")
    cleaned_dict[cleaned_k] = v

内容的提问来源于stack exchange，提问作者DonCharlie