使用AWS Glue实现AWS Aurora MySQL跨实例数据迁移的可行性咨询
AWS Glue 同步 Aurora MySQL 问题解答
问题1:AWS Glue是否支持两个AWS Aurora MySQL数据库之间迁移数据?
支持。AWS Glue原生兼容JDBC协议的数据源,Aurora MySQL完全适配MySQL的JDBC连接规范,你只需要在Glue控制台分别配置生产、性能环境Aurora MySQL的数据源连接,同时在两个Aurora实例的安全组中放行Glue的访问权限,即可直接实现跨库数据迁移,也可根据需求选择S3作为中转存储完成迁移链路。
问题2:是否可通过它实现每周一次的生产库到性能库的定期数据同步?
可以实现。你可以直接使用Glue自带的作业调度功能,配置cron表达式指定每周固定的业务低峰时段触发同步作业,同时支持配置失败重试、运行状态告警规则,作业异常时可自动通知运维人员处理。
问题3:是否支持从生产库选择性复制数据,同时不会丢失性能环境中独有的新增数据?
支持,该方案比你当前直接用生产副本覆盖性能库的模式灵活度更高:
- 选择性复制:可在Glue作业的ETL逻辑中自定义同步范围,支持仅同步指定库、指定表,甚至仅同步满足过滤条件的特定行/列,无需全库全量同步。
- 不丢失性能侧独有数据:只要不配置全表覆盖的写入规则,选择
upsert(按主键更新生产侧有变更的记录、插入生产侧新增的记录)或者增量写入模式,也可以按表单独配置同步规则,性能环境中自行新增的独有库、表、字段、数据都不会被改动。
注意:同步前需提前核对两个环境的表结构差异,如果是同表内性能侧新增了独有的字段,同步逻辑中排除对应字段即可避免该部分数据被覆盖。
内容的提问来源于stack exchange,提问作者Brian K
相关产品推荐
相关产品推荐

