RHEL 7环境编译Hadoop-2.7.3 Snappy原生库时Maven构建失败求助

我之前在RHEL7上编译Hadoop 2.7.3添加Snappy支持时也踩过不少坑，尤其是碰到过类似的KMS模块编译失败问题，结合我的经验给你几个具体的排查和解决方向：

Hadoop 2.7.3对底层依赖的版本要求非常严格，尤其是Protobuf和编译工具链，这是高频出错点：

• 必须使用Protobuf 2.5.0：绝对不能用3.x版本，很多人因为装错版本导致编译失败。先检查当前版本：

  protoc --version
  

  如果版本不对，卸载重装2.5.0：

  # 卸载现有版本
  sudo yum remove protobuf protobuf-devel
  # 下载编译指定版本
  wget https://github.com/protocolbuffers/protobuf/releases/download/v2.5.0/protobuf-2.5.0.tar.gz
  tar zxf protobuf-2.5.0.tar.gz
  cd protobuf-2.5.0
  ./configure --prefix=/usr/local/protobuf
  make && make install
  # 配置环境变量生效
  echo "export PATH=/usr/local/protobuf/bin:$PATH" >> ~/.bashrc
  echo "export LD_LIBRARY_PATH=/usr/local/protobuf/lib:$LD_LIBRARY_PATH" >> ~/.bashrc
  source ~/.bashrc
  

• 确保C/C++编译工具链完整：RHEL7默认的gcc（4.8.5）是符合要求的，但要确认基础工具都已安装：

  sudo yum install gcc gcc-c++ make cmake
  

• 安装Snappy开发包：不能只装运行包，必须装带头文件的开发版：

  sudo yum install snappy snappy-devel
  

编译时要主动指定Snappy和Protobuf的路径，避免Maven自动查找时出错，执行以下完整编译命令：

mvn clean package -Pdist,native -DskipTests -Dtar -Dsnappy.lib=/usr/lib64 -Dprotobuf.path=/usr/local/protobuf

参数说明：

• -Pdist,native：指定构建分发版和原生库（包含Snappy支持）
• -Dsnappy.lib：指向RHEL7 64位系统下Snappy库的默认路径
• -Dprotobuf.path：指定我们手动安装的Protobuf 2.5.0路径

因为失败发生在KMS步骤，建议单独编译该模块并开启调试日志，这样能看到更精准的错误信息：

mvn clean package -pl hadoop-kms -DskipTests -Dsnappy.lib=/usr/lib64 -Dprotobuf.path=/usr/local/protobuf -X

-X会输出详细的调试日志，重点关注日志里的error和warning行，比如是否是某个头文件找不到、链接库缺失，或者权限问题。

• 确保系统内存足够：编译Hadoop比较消耗内存，建议至少4G以上可用内存，或者给Maven分配更多堆内存：
  在~/.mavenrc文件中添加：

  export MAVEN_OPTS="-Xmx2048m -XX:MaxPermSize=512m"
  

• 检查其他依赖是否缺失：Hadoop原生库还依赖一些基础组件，执行以下命令补全：

  sudo yum install zlib-devel openssl-devel
  

内容的提问来源于stack exchange，提问作者Bill