BigQuery + GDPR：如何从BigQuery快照中移除PII数据？

核心结论 #

BigQuery的快照是不可变对象，一旦创建就无法修改、更新或删除其中的部分数据——这就是你执行UPDATE语句时收到Table project.dataset.table-2023-03-28T14_10_10 is a snapshot, and snapshots are immutable.错误的原因。直接从快照中移除PII是行不通的，你可以从以下合规选项中选择处理方式：

可行处理选项 #

• 直接删除整个快照
  如果该快照没有必须保留的业务价值，且其中包含需要按RTBF要求移除的PII，直接删除快照是最直接的合规解决办法。

• 创建净化后的备份表替代快照
  若需要保留快照中的非PII数据，可以通过查询快照并净化PII后生成新的常规表，再替换原快照：
  示例SQL（针对特定用户的邮箱字段掩码）：

  CREATE OR REPLACE TABLE `project.dataset.purged_backup_20230328`
  AS
  SELECT
    id,
    -- 对目标PII字段进行掩码处理
    CASE WHEN id = '<id>' THEN '<MASKED>' ELSE email END AS email,
    -- 保留其他非PII字段
    name,
    create_time,
    ...
  FROM `project.dataset.table-2023-03-28T14_10_10`
  

  完成后删除原快照，用这个新表作为合规备份。

• 调整备份策略从源头规避
  后续创建备份时，先对源表完成RTBF净化操作（删除行、掩码PII等），再基于净化后的表创建快照；或者使用BigQuery的时间旅行功能替代快照保留历史版本（注意配置合适的保留期，若需要处理时间旅行中的PII，同样需要通过复制+净化的方式生成合规的历史备份）。

合规提醒 #

务必确保所有包含PII的备份介质（包括快照、时间旅行版本）都符合RTBF要求，同时记录所有RTBF相关操作，以备合规审计。

内容的提问来源于stack exchange，提问作者philMarius