寻求将Informatica ETL脚本迁移至AWS Glue的开源工具或替代方案

优先考虑的开源迁移工具 #

• Apache NiFi：可通过自定义处理器解析Informatica的XML格式工作流/映射元数据，将转换逻辑映射为NiFi数据流，之后导出为AWS Glue兼容的Spark脚本，或直接在AWS环境部署NiFi配合Glue执行。可视化界面便于逐步迁移单作业，适配复杂转换逻辑。
• Talend Open Studio：自带Informatica迁移开源插件，能读取Informatica的工作流、映射文件，转换为Talend作业后，通过其AWS集成组件导出为Glue可执行的Spark代码，也可直接配置Glue作为作业执行引擎。
• 自定义PySpark脚本生成器：若Informatica作业逻辑规整，可编写Python脚本解析其元数据文件（如.xml或.rep），自动生成对应PySpark代码（Glue基于Spark构建）。这种方式灵活性极强，适合50个作业的规模，能针对性适配业务规则。

替代方案（无合适开源工具时） #

• Glue Studio手动迁移+模板复用：梳理每个Informatica作业的数据源、转换规则、输出目标，用Glue Studio可视化构建ETL作业，或编写PySpark/Scala脚本。针对重复逻辑的作业制作模板，批量提升迁移效率，适合50个作业的量级。
• 第三方商业迁移工具：如Matillion、Fivetran等，提供Informatica到Glue的专属迁移服务，自动解析元数据并生成Glue作业，适合需要快速完成迁移且预算充足的场景。

内容的提问来源于stack exchange，提问作者powerofthunder