Google BigQuery中UNION ALL合并同结构表报错及列消失问题求助

• 原始UNION ALL报错：虽然ride_length列显示都是TIME类型，但实际可能存在精度差异（比如一个是TIME(0)，另一个是TIME(6)），导致BigQuery判定类型不兼容。
• 修改后列消失：使用* EXCEPT(ride_length)再重新CAST时，若两个表的列顺序不一致，或者CAST后的列在结果集中的位置与原列不匹配，可能导致最终结果中该列未正确合并。

方案1：显式指定所有列（推荐） #

不要依赖*的隐式列映射，直接列出所有列，对ride_length统一转换类型，确保两个子查询的列完全一致：

SELECT 
  col1, col2, ..., -- 替换为表中除ride_length外的所有列
  SAFE_CAST(ride_length AS STRING) AS ride_length
FROM CaseStudy.Apr22
UNION ALL
SELECT 
  col1, col2, ..., -- 必须和上一个子查询的列顺序、名称完全一致
  SAFE_CAST(ride_length AS STRING) AS ride_length
FROM CaseStudy.Aug22

方案2：修复* EXCEPT的使用逻辑 #

如果一定要用*简化代码，可以先标准化每个表的结构，再合并：

WITH Apr22_standard AS (
  SELECT * EXCEPT(ride_length), SAFE_CAST(ride_length AS STRING) AS ride_length
  FROM CaseStudy.Apr22
),
Aug22_standard AS (
  SELECT * EXCEPT(ride_length), SAFE_CAST(ride_length AS STRING) AS ride_length
  FROM CaseStudy.Aug22
)
SELECT * FROM Apr22_standard
UNION ALL
SELECT * FROM Aug22_standard

方案3：保留TIME类型，统一精度 #

如果不需要转成STRING，可将两个表的ride_length转换为相同精度的TIME类型：

SELECT 
  *, 
  CAST(ride_length AS TIME(0)) AS ride_length -- 统一为0精度TIME，可根据需求调整精度
FROM CaseStudy.Apr22
UNION ALL
SELECT 
  *, 
  CAST(ride_length AS TIME(0)) AS ride_length
FROM CaseStudy.Aug22

• UNION ALL要求两个子查询的列数、列名、列顺序、数据类型完全匹配，哪怕类型看似相同，精度等细节差异也会触发报错。
• 显式列清单比*更可靠，能避免隐式列顺序带来的问题。
• SAFE_CAST在转换失败时返回NULL，若需要严格校验转换结果，可改用CAST并提前处理异常数据。

内容的提问来源于stack exchange，提问作者Rina Els