Databricks执行Minus查询遇断言错误：Found duplicate rewrite attributes求助

开发者阿泽

2026-7-19

解决Databricks MINUS查询触发"Found duplicate rewrite attributes"断言错误

可能的原因及对应解决方案

显式指定列名，避免使用SELECT *
即便表的列名、数据类型完全一致，SELECT *可能会让查询优化器在解析元数据时触发冲突（比如隐藏分区列、元数据属性重复）。改为明确列出所有需要对比的列：
```
SELECT col1, col2, col3 FROM table_a
MINUS
SELECT col1, col2, col3 FROM table_b
```
检查并排除隐藏/元数据列
部分表（比如Delta Lake表）可能包含_rescued_data这类隐藏列，或是分区表的分区列在元数据层面存在重复定义。用DESCRIBE EXTENDED table_name查看完整表结构，确认后在查询中排除这类列：
```
SELECT col1, col2 -- 仅保留业务列，排除隐藏/分区列
FROM table_a
MINUS
SELECT col1, col2
FROM table_b
```
刷新表统计信息
过期或损坏的表统计信息可能导致优化器逻辑出错，执行以下命令重新生成统计数据：
```
ANALYZE TABLE table_a COMPUTE STATISTICS FOR ALL COLUMNS;
ANALYZE TABLE table_b COMPUTE STATISTICS FOR ALL COLUMNS;
```
替换为EXCEPT语法
Databricks中MINUS是EXCEPT的别名，但部分场景下EXCEPT的优化逻辑更稳定，尝试替换后执行：
```
SELECT col1, col2 FROM table_a
EXCEPT
SELECT col1, col2 FROM table_b
```
用子查询包装表结构
通过子查询包装表，让优化器重新解析表结构，规避元数据层面的冲突：
```
SELECT * FROM (SELECT col1, col2 FROM table_a) t1
MINUS
SELECT * FROM (SELECT col1, col2 FROM table_b) t2
```