求推荐支持CSV迁移至MongoDB与PostgreSQL的开源工具

Apache NiFi #

• 核心能力：原生支持CSV作为数据源，可直接配置MongoDB、PostgreSQL作为目标库，完全覆盖你的第一个要求
• 字段映射：通过可视化流程画布，能自动读取CSV表头和目标库的表列/集合属性，支持拖拽式配置字段映射、类型转换，满足第二个要求
• 导入报告：内置监控面板和日志系统，可生成包含导入状态、成功/失败记录数、错误详情的结构化报告，支持导出为CSV或JSON，满足第三个要求
• 补充：适合大规模、复杂数据迁移场景，还支持数据清洗、批量处理等扩展功能

Airbyte #

• 核心能力：预封装了CSV源连接器和MongoDB、PostgreSQL目标连接器，无需复杂编码即可完成数据源与目标库的关联，符合第一个要求
• 字段映射：自动识别CSV表头和目标库的结构，提供可视化映射界面，支持字段重命名、类型匹配，满足第二个要求
• 导入报告：内置同步仪表盘，实时展示导入进度、成功/失败记录数及错误原因，可导出详细统计报告，满足第三个要求
• 补充：支持增量同步，适合需要定期更新数据的场景

pgLoader + mongoimport（轻量级组合方案） #

• 针对PostgreSQL：pgLoader是专门的PostgreSQL数据导入工具，原生支持CSV读取，能自动匹配表头与表列，支持字段映射，导入完成后会生成包含统计信息的日志报告，完全覆盖针对PostgreSQL的所有要求
• 针对MongoDB：mongoimport是MongoDB官方开源工具，支持CSV作为数据源，可指定集合、配置字段映射，导入后通过日志可统计成功/失败记录数，满足针对MongoDB的要求
• 补充：两个工具都是轻量级，学习成本低，适合中小规模数据迁移场景

内容的提问来源于stack exchange，提问作者Nigel Thomas