Hadoop 3.3.6 SecondaryNameNode启动节点与配置不符求助

你配置的dfs.namenode.secondary.https-address仅用于设置SecondaryNameNode的HTTPS监听地址，无法控制它启动在哪个节点。要将SecondaryNameNode部署到192.168.56.193，需按以下步骤调整配置：

1. 配置集群节点列表 #

Hadoop 3.x通过$HADOOP_HOME/etc/hadoop/workers文件管理集群节点，确保目标节点被纳入集群：

• 编辑workers文件，添加目标节点IP：

192.168.56.213
192.168.56.193

• 确认NameNode节点可以无密码SSH登录到192.168.56.193，否则无法远程启动进程。

2. 明确指定SecondaryNameNode的运行节点 #

方式一：修改hadoop-env.sh #

在$HADOOP_HOME/etc/hadoop/hadoop-env.sh中添加环境变量，指定SecondaryNameNode的运行参数：

export HADOOP_SECONDARYNAMENODE_OPTS="-Ddfs.namenode.secondary.http-address=192.168.56.193:9868 -Ddfs.namenode.secondary.https-address=192.168.56.193:9869"

方式二：补充hdfs-site.xml配置 #

在已有的配置基础上，添加HTTP地址配置（保持和HTTPS地址的节点一致）：

<property>
  <name>dfs.namenode.secondary.http-address</name>
  <value>192.168.56.193:9868</value>
</property>
<property>
  <name>dfs.namenode.secondary.https-address</name>
  <value>192.168.56.193:9869</value>
</property>

3. 同步配置到所有节点 #

将修改后的workers、hdfs-site.xml、hadoop-env.sh同步到192.168.56.193节点：

scp $HADOOP_HOME/etc/hadoop/workers root@192.168.56.193:$HADOOP_HOME/etc/hadoop/
scp $HADOOP_HOME/etc/hadoop/hdfs-site.xml root@192.168.56.193:$HADOOP_HOME/etc/hadoop/
scp $HADOOP_HOME/etc/hadoop/hadoop-env.sh root@192.168.56.193:$HADOOP_HOME/etc/hadoop/

4. 重启集群并验证 #

• 先停止当前HDFS集群：

stop-dfs.sh

• 启动集群（或手动指定节点启动SecondaryNameNode）：

# 手动启动到目标节点
hdfs --daemon start secondarynamenode --host 192.168.56.193
# 或启动整个集群
start-dfs.sh

• 验证：
  • 在192.168.56.193节点执行jps，应看到SecondaryNameNode进程；
  • 在192.168.56.213节点执行jps，不应出现该进程；
  • 访问https://192.168.56.193:9869，确认WebUI正常运行。

常见排查点 #

• 检查SSH免密登录是否生效：在NameNode节点执行ssh 192.168.56.193，无需输入密码即可登录；
• 查看SecondaryNameNode日志（$HADOOP_HOME/logs/hadoop-*-secondarynamenode-*.log），定位启动失败的具体原因；
• 确认目标节点的HADOOP_HOME环境变量配置正确。

内容的提问来源于stack exchange，提问作者prosecutor