Mac启动Hadoop服务时遇文件系统重格式化循环错误求助

核心原因 #

该问题源于Hadoop的namenode存储目录（/tmp/hadoop-arshadssss/dfs/name）状态异常，且交互输入无法被进程正确识别，导致重复触发格式化提示。

解决方案步骤 #

• 彻底终止所有Hadoop进程
  先执行官方停止命令：

  $HADOOP_HOME/sbin/stop-all.sh
  

  若停止命令无效，直接强制清理所有Hadoop相关进程：

  ps aux | grep hadoop | grep -v grep | awk '{print $2}' | xargs kill -9
  

• 手动清理异常存储目录
  删除提示中的namenode存储目录：

  rm -rf /tmp/hadoop-arshadssss/dfs/name
  

  同时清理同路径下的datanode存储目录，避免后续同步异常：

  rm -rf /tmp/hadoop-arshadssss/dfs/data
  

• 手动执行namenode格式化
  直接运行格式化命令，此时输入会被正常识别：

  hdfs namenode -format
  

  执行时输入Y确认即可。

• 重新启动Hadoop
  再次执行启动命令：

  $HADOOP_HOME/sbin/start-all.sh
  

• 验证启动状态
  用jps命令检查进程是否正常运行：

  jps
  

  正常情况下应显示NameNode、DataNode、ResourceManager、NodeManager这几个核心进程。

额外建议 #

• MacOS的/tmp目录会在系统重启后自动清理，建议修改Hadoop的hdfs-site.xml配置文件，将dfs.namenode.name.dir和dfs.datanode.data.dir设置为非临时固定路径，避免后续重复出现同类问题。
• 确认hadoop-env.sh中已正确配置JAVA_HOME环境变量，避免因Java路径问题引发进程异常。

内容的提问来源于stack exchange，提问作者Merlion Curry