Datastream同步PostgreSQL至BigQuery时丢失数组类型字段问题

针对你遇到的student_classes表中class_ids（integer[]类型）同步到BigQuery后消失的问题，给你几个排查和解决方向：

• 检查Datastream的字段映射配置
  Datastream默认可能没自动识别PostgreSQL的数组类型，进入同步任务的字段映射界面，确认class_ids是否被正确映射到BigQuery的ARRAY<INT64>类型。如果没找到这个字段，手动添加映射规则，指定源类型为integer[]，目标类型为ARRAY<INT64>。

• 确认同步任务的字段选择
  创建同步任务时，可能误操作排除了class_ids字段。回到任务配置的表字段选择环节，检查该字段是否被勾选为需要同步的字段。

• 查看Datastream同步日志
  进入Datastream的日志面板，搜索同步过程中的报错信息。如果存在"不支持的字段类型"这类提示，说明当前Datastream版本对该数组类型的支持有问题，可能需要升级Datastream代理或者调整类型定义。

• 验证PostgreSQL字段类型的规范性
  确保class_ids是PostgreSQL标准的integer[]类型，而非自定义数组类型。自定义数组类型不在Datastream的默认支持范围内，会被忽略同步。

• 重新触发全量同步
  如果以上配置都调整正确，先暂停当前同步任务，然后触发一次全量同步，确保字段能被正确识别并同步到BigQuery。

内容的提问来源于stack exchange，提问作者coder1999