是否存在类表格集合类型，可像数据库unique约束一样保证每行唯一？

基础实现方案（零依赖） #

直接用不可变元组+Set集合的组合即可实现全字段唯一的表格约束，绝大多数编程语言都原生支持这两种结构：

• 把每行的所有字段按顺序打包为不可变的元组/结构体
• 所有行存入Set结构，Set天然会自动过滤重复元素，重复插入不会生效，完全符合你要的全局unique约束效果。

以Python为例，代码实现如下：

unique_table = set()
# 插入数据
unique_table.add(("txt", "data"))
unique_table.add(("txt", "txt"))
unique_table.add(("txt", "data")) # 重复插入，直接被Set忽略，不会报错也不会重复存储
unique_table.add(("data", "txt"))
unique_table.add(("exe", "path"))
unique_table.add(("exe", "path2"))
unique_table.add(("exe", "path")) # 重复插入，直接被忽略

# 输出最终去重后的所有行
for row in unique_table:
    print(row)

运行后输出的去重结果完全匹配需求：

('txt', 'data')
('txt', 'txt')
('data', 'txt')
('exe', 'path')
('exe', 'path2')

进阶场景方案 #

如果需要支持指定部分字段作为唯一键、按列查询、事务等更复杂的能力，可以选对应的实现：

• 结构化数据处理：Python可以用pandas库，插入数据后调用drop_duplicates方法去重，也可以自定义校验规则实现插入前的唯一性校验；Java可以重写行实体类的equals和hashCode方法，存入HashSet实现自定义规则的去重。
• 类数据库能力：直接使用嵌入式数据库SQLite，建表时直接加UNIQUE约束即可，不需要启动独立服务，直接读写内存或者本地文件，支持组合唯一键、事务、复杂查询等所有数据库的能力，适合数据量较大、逻辑较复杂的场景。
• 前端场景：可以把每行数据序列化为字符串存入Set，或者在IndexedDB建表时设置唯一键实现约束。

内容的提问来源于stack exchange，提问作者Get Off My Lawn