GCP Datastream无法同步RDS Postgres新增表，该如何处理？

以下是针对该问题的分步排查与解决方案：

• 检查Datastream元数据自动发现配置
  进入Datastream控制台对应Postgres数据源详情页，确认「自动发现」功能已开启。若未开启则立即启用，随后手动点击「刷新元数据」按钮触发即时发现（默认自动发现周期为几小时）。

• 验证Postgres Publication的有效性
  执行Postgres命令确认新增表已加入目标publication：

  SELECT * FROM pg_publication_tables WHERE pubname = '你的publication名称';
  

  如果publication是用FOR ALL TABLES创建的，需确认RDS Postgres版本≥10（该版本开始支持自动纳入新增表）。同时确保同步用户对新增表拥有SELECT权限：

  GRANT SELECT ON 新增表名 TO 同步用户名;
  

• 检查Datastream流的表过滤规则
  进入Datastream流配置页面，查看「包含的Schema与表」规则：

  • 若为手动选择表，需重新编辑流配置，将新增表添加至列表后保存并重启流；
  • 若使用通配符（如public.*），确认Schema名称拼写无误，且新增表确实位于该Schema下。

• 排查Postgres Replication Slot状态
  执行命令检查slot的活跃性与类型：

  SELECT slot_name, active, slot_type FROM pg_replication_slots WHERE slot_name = '你的slot名称';
  

  需确保active为t且slot_type为logical，若slot非活跃状态，需排查Datastream的数据库连接配置（如用户名、密码、网络策略）。

• 查看Datastream同步日志
  在同步任务的「日志」选项卡中搜索新增表相关条目，确认是否存在权限不足、字段类型不兼容（如BigQuery不支持的Postgres字段类型）等错误，针对性调整表结构或Datastream字段映射规则。

• 强制重启同步任务
  若以上步骤均无问题，尝试停止同步任务，等待3-5分钟后重新启动，以此刷新Datastream的元数据缓存。

内容的提问来源于stack exchange，提问作者fred