Azure Cosmos DB跨账户数据迁移方案咨询：替代本地迁移工具的方法

针对大量容器和百万级数据场景下本地运行数据迁移工具不现实的问题，以下是几种云端原生或可规模化的可行方案：

1. 账户级异地复制（原生托管方案） #

• 这是官方提供的跨区域复制能力，可将整个Cosmos DB账户的所有数据库、容器及数据异步复制到另一个区域的Cosmos DB账户。
• 核心优势：完全由Azure托管，无需手动干预数据同步，支持自动故障转移，适合灾备或跨区域读写需求；可按需添加/移除复制区域，配置故障转移优先级。
• 注意：目标必须是已配置异地复制的Cosmos DB账户，若需复制到同区域独立账户，可先创建跨区域账户完成同步后，再拆分或结合其他方案。

2. Azure Data Factory (ADF) 批量迁移 #

• 利用云端数据集成服务ADF规模化处理复制任务，无需本地资源：
  • 配置源和目标Cosmos DB数据集，通过复制活动实现数据迁移，可调整Degree of Copy Parallelism参数提升并行复制速度。
  • 针对多容器场景，用Get Metadata活动遍历源数据库的所有容器，再通过ForEach活动批量执行复制，实现全数据库自动复制。
  • 支持增量复制，基于时间戳或ETag过滤仅同步新增/修改数据。
• 优势：云端弹性扩容，自带监控和调度能力，适合大规模数据和多容器场景，无需编写代码即可完成配置。

3. SDK自定义云端脚本 #

• 使用官方SDK（.NET/Java/Python等）编写复制脚本，部署在Azure Function、VM或App Service上运行，避免本地资源瓶颈：
  • 先同步源容器的元数据（索引策略、吞吐量、分区键等），在目标数据库创建一致的容器。
  • 借助SDK的批量操作API（如.NET的BulkExecutor）读取源数据并批量写入目标，通过并行任务优化性能。
• 优势：高度自定义，可处理特殊数据格式或业务逻辑；云端运行可利用Azure的计算资源，轻松支撑百万级数据复制。

4. 备份还原方案 #

• 对源数据库执行按需备份，将备份快照还原到目标Cosmos DB账户的新数据库中：
  • 还原操作可通过Azure Portal提交请求（部分场景支持API自动化），数据一致性由官方备份机制保障。
• 注意：当前跨区域还原需额外配置，目标数据库必须是新创建的，且默认还原到与备份相同的区域。

方案选型参考 #

内容的提问来源于stack exchange，提问作者Nmaster88