BigQuery中主键与外键莫名消失问题求助

BigQuery不会自动定期检查或删除用户添加的约束，你的情况大概率是以下场景导致：

1. 表更新操作覆盖了原约束 #

虽然你提到每日00:30UTC的更新早于添加约束的时间，但要确认：

• 是否在09:12添加约束后，表又发生了全量替换类操作（比如INSERT OVERWRITE全量写入、LOAD DATA指定WRITE_TRUNCATE模式、或者通过Dataflow/Cloud Functions等工具重建表）。这类操作会直接创建新表替换原表，新表不会继承原有的约束元数据。
• 如果是增量更新（比如MERGE或INSERT INTO），不会影响约束，但如果更新过程中包含了ALTER TABLE修改表结构的操作，需检查是否有意外删除约束的逻辑。

2. 约束添加脚本未完全执行成功 #

你一次性添加4个外键的ALTER TABLE语句，可能存在部分执行失败的情况：

• 检查引用表的状态：比如my_dataset.parsers、my_dataset.customers等表是否存在，或者id_parser等字段是否为这些表的主键/唯一键（BigQuery非强制外键要求引用列是主键或唯一键）。
• 查看09:12的ALTER TABLE任务日志细节：虽然你看到任务记录，但可能存在部分外键添加失败的隐性错误（比如权限不足、引用表字段类型不匹配），导致这些约束从未真正生效，而非后续被删除。

3. BigQuery元数据一致性延迟或缓存问题 #

• 如果你是通过BigQuery UI查看约束，可能存在界面缓存，建议通过INFORMATION_SCHEMA查询确认约束的实际状态：

  SELECT * FROM `my_dataset.INFORMATION_SCHEMA.TABLE_CONSTRAINTS`
  WHERE table_name = 'orders_final';
  

• BigQuery的元数据同步偶尔会有延迟，短时间内出现约束显示异常的情况，刷新查询或等待一段时间后可能恢复。

4. 自动化工具/流程的隐性操作 #

• 检查是否有其他自动化流程（比如数据管道、CI/CD脚本、Dataplex数据治理规则）在09:12-10:05之间对该表进行了操作，部分审计日志可能未被你排查到（比如使用服务账号执行的操作，需确认日志筛选范围是否包含所有相关账号）。

内容的提问来源于stack exchange，提问作者Silberfab