执行hadoop namenode -format后NameNode异常关闭，求解决方案

我来帮你梳理下问题的根源和对应的解决办法——你遇到的情况其实是两个常见问题叠加的结果：Hadoop原生库的32位兼容性，以及Java版本和Hadoop 1.2.1的适配问题。

核心问题分析 #

首先，WARN util.NativeCodeLoader这个警告本身不一定会导致NameNode shutdown，但结合你的环境（32位Ubuntu+Java 8+Hadoop 1.2.1），真正触发关闭的大概率是Java版本不兼容：Hadoop 1.2.1发布时Java 8还未推出，官方只支持Java 1.6或1.7，Java 8的一些新特性会和旧版Hadoop的代码冲突。而原生库警告是因为Hadoop 1.2.1预编译的native库是64位的，32位系统无法加载。

下面是分步骤的解决方案：

第一步：降级Java到兼容版本（优先处理） #

这是解决NameNode shutdown的关键：

1. 卸载当前的Java 8：

   sudo apt-get remove openjdk-8-jdk openjdk-8-jre
   

2. 安装Java 7（以OpenJDK 7为例）：

   sudo apt-get install openjdk-7-jdk openjdk-7-jre
   

3. 设置默认Java版本：
   运行以下命令，在弹出的选项中选择Java 7对应的序号：

   sudo update-alternatives --config java
   sudo update-alternatives --config javac
   

4. 修正Hadoop的Java路径配置：
   打开$HADOOP_HOME/conf/hadoop-env.sh，找到export JAVA_HOME这一行，替换为你的Java 7安装路径（通常是/usr/lib/jvm/java-7-openjdk-i386）：

   export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-i386
   

第二步：消除原生库警告（可选，但优化体验） #

如果想去掉那个警告，可以自己编译32位的Hadoop原生库：

1. 安装编译依赖：

   sudo apt-get install build-essential autoconf automake libtool cmake zlib1g-dev pkg-config libssl-dev
   

2. 下载Hadoop 1.2.1源码包，解压后进入源码目录：
3. 编译32位版本：

   export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-i386
   export CFLAGS="-m32"
   export CXXFLAGS="-m32"
   ./configure --prefix=/path/to/your/hadoop-install-dir --with-platform=32-bit
   make && make install
   

4. 替换原有native库：
   将编译生成的target/native目录下的文件，复制到$HADOOP_HOME/lib/native目录中覆盖原文件。

第三步：检查基础配置（确保环境正确） #

确认Hadoop的核心配置文件没有错误：

• 修改$HADOOP_HOME/conf/core-site.xml：

  <configuration>
    <property>
      <name>fs.default.name</name>
      <value>hdfs://localhost:9000</value>
    </property>
    <property>
      <name>hadoop.tmp.dir</name>
      <value>/tmp/hadoop-${user.name}</value>
    </property>
  </configuration>
  

• 修改$HADOOP_HOME/conf/hdfs-site.xml：

  <configuration>
    <property>
      <name>dfs.replication</name>
      <value>1</value>
    </property>
  </configuration>
  

• 确保临时目录存在且有权限：

  mkdir -p /tmp/hadoop-$(whoami)
  chmod 755 /tmp/hadoop-$(whoami)
  

最后重新执行格式化 #

完成以上步骤后，再次运行：

hadoop namenode -format

这次应该能正常完成格式化，不会出现NameNode shutdown的问题了。

内容的提问来源于stack exchange，提问作者Mehdi Hadji