使用milvus-backup创建备份时遇空输入路径错误求助

问题场景 #

我是milvus-backup工具的新手，使用的Milvus版本为2.3.12，部署模式为集群，milvus-backup版本为v0.4.14。尝试将远程Milvus实例中的集合备份到本地Minio时，执行命令./milvus-backup create -n test_backup出现如下错误：

[2024/06/13 15:06:06.852 +08:00] [INFO] [core/backup_impl_create_backup.go:523] ["Begin copy data"] [dbName=default] [collectionName=chapters] [segmentNum=2]
[2024/06/13 15:06:06.852 +08:00] [DEBUG] [core/backup_impl_create_backup.go:531] ["copy segment"] [collection_id=444879892039202356] [partition_id=444879892039202357] [segment_id=444879892139483548] [group_id=0]
[2024/06/13 15:06:06.852 +08:00] [DEBUG] [core/backup_impl_create_backup.go:888] [insertPath] [bucket=a-bucket] [insertPath=files/insert_log/444879892039202356/444879892039202357/444879892139483548/]
[2024/06/13 15:06:06.853 +08:00] [ERROR] [core/backup_impl_create_backup.go:531] ["Fail to fill segment backup info"] [collection_id=444879892040221795] [partition_id=444879892040221796] [segment_id=444879892009040118] [group_id=0] [error="Get empty input path, but segment should not be empty, files/insert_log/444879892040221795/444879892040221796/444879892009040118/"] [stack="github.com/zilliztech/milvus-backup/core.(*BackupContext).backupCollectionExecute...]

解决方案 #

• 检查异常Segment的存储状态：错误提示的Minio路径files/insert_log/444879892040221795/444879892040221796/444879892009040118/为空，先登录Minio控制台确认该路径下是否确实无数据文件。如果是Milvus集群内该Segment未完成持久化或损坏，执行以下操作修复：
  1. 找到集合chapters下ID为444879892009040118的异常Segment
  2. 用milvus-cli执行合并命令触发数据持久化：milvus-cli compact -c chapters
  3. 等待compact任务完成后，重新执行备份命令
• 验证备份工具配置：检查milvus-backup的config.yaml配置文件，确认Minio的地址、访问密钥、Bucket名称是否正确，确保工具能正常读写Minio存储
• 升级milvus-backup版本：v0.4.14可能存在与Milvus 2.3.12的兼容性bug，尝试升级到最新兼容版本（如v0.4.16及以上），新版本通常修复了此类路径读取异常问题
• 排查集群存储一致性：如果是Milvus集群部署，确认所有数据节点的存储挂载正常，无路径丢失或权限问题，保证Segment数据可被正常访问

内容的提问来源于stack exchange，提问作者rachel song