Teradata多列去重合并值的更优实现方案咨询

Great question! 当需要处理大量列的时候，反复写UNION SELECT DISTINCT确实会变得繁琐且难维护。下面给你几个更优的实现思路，适配列数多的场景：

方案1：用UNPIVOT（适用于Oracle、SQL Server等支持的数据库） #

UNPIVOT的核心是把多列数据转换成单行单列的结构，之后只需要一次去重再聚合即可，不用重复写N个SELECT块。比如你有col1到colN，代码可以这样写：

WITH unpivoted_data AS (
    SELECT DISTINCT value
    FROM your_table
    UNPIVOT (
        value FOR column_name IN (col1, col2, col3, col4, ..., colN) -- 直接列出所有需要合并的列
    ) AS unpvt
)
SELECT XMLAGG(value ORDER BY value SEPARATOR ', ') AS combined_unique_values
FROM unpivoted_data;

这个方案的优势是：列数再多，只需要在UNPIVOT的列列表里补充字段就行，代码结构整洁，而且只做一次DISTINCT，比多次UNION DISTINCT的执行效率更高。

方案2：数组+Unnest（适用于PostgreSQL） #

PostgreSQL对数组的支持很友好，可以直接把多列打包成数组，再用unnest展开成行，之后去重聚合：

SELECT string_agg(DISTINCT val, ', ' ORDER BY val) AS combined_unique_values
FROM your_table,
     unnest(ARRAY[col1, col2, col3, ..., colN]) AS vals(val);

这个写法更简洁，列数增加时只需要往数组里追加字段即可，执行逻辑和UNPIVOT类似，也是一次去重后聚合，性能表现优秀。

方案3：简化版UNION ALL（适用于MySQL等无UNPIVOT的数据库） #

如果你的数据库不支持UNPIVOT或数组展开，可以用UNION ALL替代多次UNION（因为UNION ALL不会自动去重，速度更快），然后在外层统一做一次DISTINCT：

SELECT GROUP_CONCAT(DISTINCT val SEPARATOR ', ') AS combined_unique_values
FROM (
    SELECT col1 AS val FROM your_table
    UNION ALL SELECT col2 FROM your_table
    UNION ALL SELECT col3 FROM your_table
    -- 列数多的话继续追加SELECT语句
) AS all_values;

虽然还是要写多个SELECT，但比原来的UNION DISTINCT少了多次去重的开销，整体效率会更高。

对比你原来的思路 #

你原来用UNION SELECT DISTINCT的方式，每一列都要单独去重再合并，当列数多的时候，不仅代码冗余，数据库也要多次执行去重操作，性能会打折扣。而上面的方案都是先把多列转成行，再一次去重聚合，既简化了代码维护，也提升了执行效率。

内容的提问来源于stack exchange，提问作者WilliamB2