基于code/tc/signal/in_force多键值的字典列表去重优化需求

针对你需要对包含None元素的字典列表，按code、tc、signal、in_force四个键的取值完全一致来去重的需求，这里提供两种简洁高效的实现方案，替代冗长的循环对比逻辑：

核心思路 #

利用Python字典的键唯一性特性，将每个字典中指定四个键的取值（支持None）组成元组作为唯一标识键，用该键对应存储字典本身，最终提取字典的values即可得到去重后的列表。

方案一：字典推导式（自动保留最后一个匹配项） #

适合无需保留原列表顺序、任意保留匹配项的场景：

# 示例输入
input_list = [
    {"code": "A", "tc": 1, "signal": "high", "in_force": True, "other_key": "x"},
    {"code": "A", "tc": 1, "signal": "high", "in_force": True, "other_key": "y"},
    {"code": "B", "tc": 2, "signal": "low", "in_force": False, "other_key": "z"},
    {"code": "A", "tc": 1, "signal": None, "in_force": True, "other_key": "a"},
    {"code": "B", "tc": 2, "signal": "low", "in_force": False, "other_key": "b"}
]

# 定义去重判定的键集合
unique_keys = ("code", "tc", "signal", "in_force")

# 执行去重
result = list({tuple(d[k] for k in unique_keys): d for d in input_list}.values())

方案二：遍历保留第一个匹配项 #

如果需要保留原列表中首次出现的匹配字典，可使用这种写法：

unique_keys = ("code", "tc", "signal", "in_force")
unique_dict = {}

for item in input_list:
    key = tuple(item[k] for k in unique_keys)
    if key not in unique_dict:
        unique_dict[key] = item

result = list(unique_dict.values())

预期输出 #

两种方案的输出均为去重后的字典列表（顺序可能不同，符合需求）：

[
    {"code": "A", "tc": 1, "signal": "high", "in_force": True, "other_key": "y"},
    {"code": "B", "tc": 2, "signal": "low", "in_force": False, "other_key": "b"},
    {"code": "A", "tc": 1, "signal": None, "in_force": True, "other_key": "a"}
]

优势说明 #

• 自动兼容None值：元组可以包含None类型，不会影响唯一性判定
• 时间复杂度O(n)：比嵌套循环对比的实现效率高得多
• 代码简洁直观：无需冗余的条件判断和临时变量

内容的提问来源于stack exchange，提问作者Jason