DistCp跨HDFS集群复制失败求助：Standby状态不支持READ操作

错误原因分析 #

从你提供的错误日志里能直接定位核心问题：

org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.ipc.StandbyException): 操作类别READ在state standby状态下不被支持

这说明你命令里指定的源或目标NameNode处于Standby状态——在HDFS HA模式下，Standby节点只负责同步元数据，不会处理客户端的读写请求，只有Active节点才能响应这类操作。另外你用的50070是NameNode的Web UI端口，DistCP需要连接的是NameNode的RPC服务端口（默认是8020），这也是诱发问题的一个小细节。

正确执行步骤 #

1. 确认集群的Active NameNode

   • 命令行查询法（需要知道集群的NameNode标识，比如nn1、nn2）：

     hdfs haadmin -getServiceState nn1
     

     返回结果为active的节点就是当前可处理请求的Active节点。
   • Web UI查看法：访问http://namenode主机名:50070，页面顶部会明确显示节点是Active还是Standby状态。

2. 修正DistCP命令
   把命令里的NameNode地址替换成Active节点的主机名/IP，同时将端口改为RPC默认端口8020：

   hadoop distcp hdfs://active-sourcenode:8020/var/lib/hadoop-hdfs/distcptest.txt hdfs://active-destnode:8020/var/lib/hadoop-hdfs
   

3. 进阶方案：使用HA逻辑名称（推荐）
   如果两个集群都配置了HA，直接用集群的逻辑名称访问即可，客户端会自动识别Active节点，不用手动指定具体节点：

   # 假设源集群逻辑名称是source-cluster，目标集群是dest-cluster
   hadoop distcp hdfs://source-cluster/var/lib/hadoop-hdfs/distcptest.txt hdfs://dest-cluster/var/lib/hadoop-hdfs
   

   注意：执行命令的节点需要配置两个集群的HDFS配置文件（core-site.xml、hdfs-site.xml），或者通过-conf参数指定配置文件路径。

额外注意事项 #

• 确保执行DistCP的服务器能和两个集群的Active NameNode的RPC端口（8020）正常通信
• 确认源文件路径存在，且目标路径有足够的写入权限
• 如果跨集群涉及权限认证问题，可能需要配置Kerberos票据或者调整HDFS权限设置

内容的提问来源于stack exchange，提问作者Jibinjks