求助：Oozie调用Shell脚本时Hadoop命令正常，本地/NFS命令报文件不存在

这个问题我之前帮不少用户排查过，核心原因是Oozie的执行环境和NFS挂载的一致性、权限配置没跟上，我给你列几个最可能遗漏的配置点，你逐一排查：

• 确保所有Oozie任务可能运行的节点都挂载了NFS路径
  Oozie的Shell Action会随机调度到集群的任意DataNode/TaskManager节点执行，如果你只在提交任务的节点挂载了/HDFS，但任务跑到没挂载的节点，就会触发"No such file or directory"。
  解决方法：

  1. 登录集群所有节点执行mount | grep /HDFS，确认每个节点都成功挂载了NFS共享；
  2. 通过/etc/fstab配置NFS自动挂载（格式类似nfs-server-ip:/remote/path /HDFS nfs defaults 0 0），确保节点重启后挂载不会丢失；
  3. 如果用集群管理工具（Ambari/Cloudera Manager），可以通过统一配置界面批量设置NFS挂载。

• 检查Oozie执行用户对NFS路径的权限
  Oozie默认用oozie用户或者提交任务的用户执行Shell脚本，这个用户需要对/HDFS/user/123有读写权限：

  1. 在NFS服务器上检查/etc/exports配置，确保共享目录允许集群节点IP段访问，并且设置了正确的用户映射（比如anonuid、anongid参数，映射到Oozie执行用户的UID/GID）；
  2. 在挂载后的节点上执行ls -ld /HDFS/user/123，确认Oozie执行用户有w权限；
  3. 如果是YARN容器执行模式，还要确保容器内的用户和宿主机用户权限一致（可以通过LinuxContainerExecutor配置用户映射）。

• 配置YARN容器允许挂载宿主机NFS目录（YARN模式必看）
  如果你的Oozie是基于YARN运行的（现在主流部署方式），YARN容器默认是隔离的，不会自动挂载宿主机的NFS路径：

  1. 修改YARN配置：
     • 设置yarn.nodemanager.container-executor.class为org.apache.hadoop.yarn.server.nodemanager.LinuxContainerExecutor；
     • 设置yarn.nodemanager.linux-container-executor.group为hadoop（或你的集群用户组）；
  2. 编辑container-executor.cfg文件：
     • 添加mounts=/HDFS到配置项，允许容器挂载该目录；
     • 设置allowed.system.filesystem.paths=/HDFS,...（加上其他必要路径），解除YARN对该路径的访问限制；
  3. 重启YARN NodeManager服务，让配置生效。

• 验证本地命令的执行环境
  虽然touch是基础命令，但也要确保Oozie执行环境的PATH包含/bin（touch通常在/bin下）。可以在Shell脚本开头添加echo $PATH，然后查看Oozie日志确认环境变量是否正常。如果路径缺失，可以在Oozie Workflow的Shell Action里通过env-var参数指定PATH，比如：

  <shell xmlns="uri:oozie:shell-action:0.3">
    <job-tracker>${jobTracker}</job-tracker>
    <name-node>${nameNode}</name-node>
    <exec>sample.sh</exec>
    <env-var>PATH=/bin:/usr/bin:$PATH</env-var>
  </shell>
  

• 查看详细日志定位问题
  如果以上配置都检查过还是报错，一定要看Oozie任务的详细日志：

  • 用命令oozie job -log <你的job ID>查看完整日志；
  • 重点看YARN容器的stderr输出，里面会有更具体的错误原因（比如权限拒绝、挂载失败细节）。

内容的提问来源于stack exchange，提问作者AHK