启动Hadoop报错:无法设置datanode/namenode进程优先级,守护进程未运行
Hadoop NameNode/DataNode 启动优先级报错处理
当前环境下DataNode与NameNode守护进程均无法正常运行,关联终端输出截图如下:
终端输出的核心报错信息为:
ERROR: Cannot set priority of datanode process 16536 ERROR: Cannot set priority of namenode process 16556
排查与解决步骤
- 目录权限校验:该报错最高发的诱因是Hadoop部署路径、元数据存储路径、临时数据路径的操作权限与启动进程的用户不匹配。执行
ls -l $HADOOP_HOME核对目录归属,若启动脚本的执行用户与目录所有者不一致,通过chown -R 对应用户:用户组 Hadoop相关全路径目录修正权限,禁止直接将目录权限设置为777,避免引入集群安全风险 - 残留进程清理:此前启动失败遗留的僵尸进程会占用进程锁、对应服务端口,通过
jps命令定位到残留的NameNode、DataNode进程ID,执行kill -9 对应进程PID完成清理后再尝试重启服务 - 启动配置核对:若使用root用户执行启动脚本,需在
hadoop-env.sh配置文件中,显式取消HDFS_NAMENODE_USER、HDFS_DATANODE_USER的注释,指定非root的运行用户;若使用普通用户启动,需确认当前用户具备目录操作的sudo权限,未被sudoers配置拦截 - 锁文件排查:检查Hadoop临时数据存储目录,删除残留的
.pid后缀进程锁文件,排除锁冲突导致的启动失败
内容的提问来源于stack exchange,提问作者Dhanraj Krishnamurthy
相关产品推荐
相关产品推荐

