Oozie中mapred.input.dir.mappers配置失效问题求助

我来帮你排查这个Oozie 4.3.0工作流的输入路径问题——报错No input paths specified in job通常是因为Oozie没有正确识别到你的多输入配置，或者参数传递环节出了问题。咱们一步步来梳理解决思路：

1. 先检查workflow.xml的多输入配置规范 #

如果你的任务依赖多输入路径，要确保workflow.xml里的配置符合Oozie对MapReduce任务的要求：

• 要是用原生的多输入方式，直接在<map-reduce>节点下添加多个<input>标签：

  <action name="multi-input-mapreduce">
    <map-reduce>
      <job-tracker>${jobTracker}</job-tracker>
      <name-node>${nameNode}</name-node>
      <!-- 多个输入路径分别配置 -->
      <input path="${input_path_1}"/>
      <input path="${input_path_2}"/>
      <configuration>
        <property>
          <name>mapreduce.job.name</name>
          <value>MultiInputProcessingJob</value>
        </property>
      </configuration>
    </map-reduce>
    <ok to="next-step"/>
    <error to="fail"/>
  </action>
  

• 要是你在驱动类里用了MultipleInputs类来绑定不同输入路径和对应的Mapper，那得确保workflow.xml里的配置能把路径参数传递给驱动类，比如在<configuration>里添加自定义参数：

  <property>
    <name>custom.multiple.input.paths</name>
    <value>${input_path_1},${input_path_2}</value>
  </property>
  

  同时驱动类里要读取这个参数，再调用MultipleInputs.addInputPath()来绑定路径和Mapper。

2. 验证job.properties的参数传递是否正确 #

确保job.properties里的输入路径是完整的HDFS路径，且参数名和workflow.xml里的引用一致：

nameNode=hdfs://your-nn-host:8020
jobTracker=your-rt-host:8032
# 对应workflow.xml里的${input_path_1}和${input_path_2}
input_path_1=/user/your-user/input/dataset1
input_path_2=/user/your-user/input/dataset2
oozie.wf.application.path=${nameNode}/user/your-user/oozie/workflows/multi-input-wf

另外要确认这些HDFS路径确实存在，且Oozie的执行用户有读取权限——可以用hdfs dfs -ls /user/your-user/input/dataset1命令验证。

3. 检查驱动类的配置兼容性 #

别在驱动类里硬编码输入路径！因为Oozie是在集群环境中提交任务，硬编码的路径可能无法被Oozie的参数替换，或者执行用户没有访问权限。驱动类应该通过读取Configuration对象来获取输入路径，比如：

String inputPaths = conf.get("custom.multiple.input.paths");
String[] pathArr = inputPaths.split(",");
for(String path : pathArr) {
    MultipleInputs.addInputPath(job, new Path(path), TextInputFormat.class, YourCustomMapper.class);
}

4. 查看Oozie日志定位细节 #

如果上面的配置都没问题，就去Oozie的Web UI（默认端口11000）找到对应的工作流实例，查看MapReduce任务的详细日志——里面会有完整的堆栈信息，能帮你确认是参数没传递到、路径不存在，还是权限不足的问题。也可以用命令行快速查看日志：

oozie job -log <your-oozie-job-id>

内容的提问来源于stack exchange，提问作者Markiza