BigQuery使用DATE(startTime)分区建表后无数据问题求助

可能的原因分析 #

1. 分区表达式的隐式解析偏差
   你的SQL语法本身无错误，但PARTITION BY date(startTime)直接使用源表字段的转换表达式，在BigQuery执行逻辑中可能出现字段解析的隐式偏差。相比之下，引用SELECT结果中明确别名的字段（比如你定义的game_date）会更稳定。

2. 缓存复用导致空表
   如果之前执行过返回空结果的错误SQL，BigQuery可能复用缓存结果，导致新创建的分区表依然为空。

3. 分区数据未在默认预览中显示
   若startTime的时区与year字段的统计时区不一致，部分year=2016的记录可能被划分到2015或2017的分区中，而BigQuery预览默认只展示最新分区，导致你看不到数据，但表实际存在数据。

解决方案 #

1. 修改分区语句引用查询结果字段
   将分区字段改为SELECT中已明确定义的game_date，避免隐式解析问题：

CREATE TABLE project.table
PARTITION BY game_date AS

SELECT 
    gameId, seasonID, date(startTime) as game_date, startTime, year
FROM `bigquery-public-data.baseball.games_wide`
WHERE year = 2016

2. 禁用缓存后重新执行
   在BigQuery查询编辑器中点击右上角的「禁用缓存」按钮，或添加--no_cache参数后重新执行建表语句，确保查询重新计算并写入数据。

3. 检查表的全部分区数据
   执行SELECT COUNT(*) FROM project.table确认表是否存在数据。若有数据，在表详情页切换到「分区」标签，查看所有分区的数据分布，找到对应年份的分区即可看到记录。

4. 验证源表字段完整性
   执行以下查询确认year=2016的记录中startTime是否存在NULL值：

SELECT COUNT(*) AS total_records, COUNT(startTime) AS non_null_startTime
FROM `bigquery-public-data.baseball.games_wide`
WHERE year = 2016

如果non_null_startTime小于total_records，说明存在NULL的startTime，这些记录会被划分到NULL分区，可在分区列表中找到该分区查看数据。

内容的提问来源于stack exchange，提问作者Katherine Chen