Azure Synapse与Netezza双向数据传输的最高效实现方案咨询

你现有的自研Java传输工具方案具备可行性，是当前实现需求最快的路径，无需重新调研适配新的商业化工具，能最大程度复用现有开发成果。

以下是优先级从高到低的执行步骤：

• 首先做核心链路验证：将现有Java工具打包为可执行jar包，直接在Azure同区域的临时虚拟机上部署运行，跑一次小批量数据同步测试，验证云网络环境下的传输、读写性能是否符合要求，这一步无需复杂的云原生配置，最快半天即可完成验证，确认核心流程无问题后再做后续优化。
• 验证通过后，优先选择轻量云原生托管方案，无需学习复杂的容器编排技术：
  • 如果仅需要定时触发同步任务，直接将jar包打包为Docker镜像，使用Azure容器实例（ACI）托管即可，按需启动运行、任务完成后自动停止资源，不需要长期维护服务器，学习成本极低。
  • 如果需要更完善的触发、监控能力，可以将Java代码做少量适配，接入Azure Functions的Java运行时，平台自带日志采集、运行监控、告警通知能力，基础设施全托管，无需自行运维。
• 网络配置要优先调整：将Netezza所在的本地网络与Azure Synapse所属的VPC通过专线或者VPN打通，同步流量走私有链路，不要走公网传输，既可以避免公网波动影响传输性能，也能保障数据安全。
• 后续性能优化方向：如果需要进一步提升同步效率，可以在Java工具中新增多线程并行拉取、分批写入逻辑，配合Azure Synapse原生的COPY批量写入指令，性能比逐行写入至少提升一个数量级。

内容的提问来源于stack exchange，提问作者Lauren_G