MongoDB分片跨服务器迁移后数据不匹配问题排查

嘿，我之前迁移MongoDB分片集群时也碰到过类似的数据不一致问题，结合你的场景，咱们一步步排查可能的原因和解决办法：

1. 先确认「实际数据是否真的缺失」 #

有时候sh.status()或者集合统计显示的数值是缓存的统计值，不是实时的。你可以直接连接到新集群的每个分片节点（注意是分片的mongod实例，不是mongos），执行以下命令验证实际数据：

# 切换到目标数据库
use your_database
# 全量计数（不要用带条件的count，确保统计所有文档）
db.your_collection.count({})
# 查看集合实际占用大小
db.your_collection.dataSize()
# 执行全量校验，检查集合物理完整性
db.your_collection.validate({full: true})

把这些结果和旧分片的对应数值对比，如果差异很大，说明数据复制过程出了问题。

2. 检查数据复制的方式是否正确 #

你提到是「复制两个分片的数据至新服务器」，如果是直接拷贝MongoDB的数据文件（比如dbpath下的文件），很容易出问题：

• 旧分片如果还在运行，文件系统层面的拷贝无法获取一致性快照（有未持久化的journal日志或内存数据）
• 分片节点如果是副本集，直接拷贝单个节点的数据可能遗漏同步的oplog

正确的做法应该是用官方备份工具：

# 在旧分片节点上执行一致性备份（如果是副本集，加--oplog保证快照一致性）
mongodump --db your_database --oplog --out /path/to/backup
# 在新分片节点上恢复数据（确保新分片mongod处于运行状态，且未加入集群前恢复）
mongorestore --db your_database /path/to/backup/your_database

3. 验证分片集群的元数据是否同步正确 #

新集群的config服务器可能没有正确同步旧集群的分片元数据，导致mongos展示的数据分布有误：

1. 连接到mongos，查看分片配置：

sh.status()
# 查看具体集合的分片分布
db.your_collection.getShardDistribution()

2. 切换到config数据库，检查集合的分片元数据：

use config
# 查看目标集合的分片配置
db.collections.find({_id: "your_database.your_collection"})
# 检查分片节点的注册信息
db.shards.find()

如果元数据和旧集群不一致，比如分片键、chunk分布不对，你需要重新导入旧集群的config数据，或者手动修正（手动操作前一定要备份config库）。

4. 触发分片平衡并等待完成 #

如果数据已经正确复制到新分片，但chunk分布还没平衡，也会导致统计数据异常：

# 确保目标集合的平衡器开启
sh.enableBalancing("your_database.your_collection")
# 查看平衡器状态
sh.getBalancerState()
# 等待平衡完成后，再查看数据分布
sh.status()

注意：大集合的平衡可能需要较长时间，期间可以通过db.currentOp()查看平衡任务的进度。

5. 版本兼容的小细节 #

虽然都是3.0系列，但3.0.4到3.0.15有一些分片逻辑的小更新，你可以尝试在mongos上执行以下命令刷新统计：

# 刷新数据库统计
db.your_database.stats()
# 强制刷新分片集合的统计信息
db.your_collection.aggregate([{$collStats: {storageStats: {}}}])

内容的提问来源于stack exchange，提问作者mongouser