无法在Oozie中运行Sqoop作业：ParquetFile枚举常量不存在

我之前也踩过Sqoop + Oozie + Parquet组合的坑，结合你提到的版本（Sqoop 1.4.7、Oozie 4.3.1）和现象（textfile正常、Parquet失败），给你几个针对性的排查和解决方向：

1. 确认Oozie共享库的jar放置路径是否正确 #

Oozie的共享库是按组件分类存放的，Sqoop相关的依赖必须放到/user/oozie/share/lib/lib_<时间戳>/sqoop这个子目录下，而不是共享库的根目录或者其他组件目录（比如hadoop、mapreduce）。你可以通过HDFS命令hadoop fs -ls /user/oozie/share/lib/lib_*/sqoop检查parquet-*.jar是否在这个路径里。

2. 校验Parquet jar包的版本兼容性 #

Sqoop 1.4.7对Parquet的版本有要求，建议使用Parquet 1.8.x系列的jar包（比如parquet-hadoop-1.8.3.jar、parquet-avro-1.8.3.jar等）。请确保你从SQOOP_HOME/lib复制到Oozie共享库的jar版本完全一致，不要混合不同版本的Parquet jar，否则很容易出现类冲突或加载失败的问题。

3. 检查Oozie工作流的关键配置 #

• 确保在workflow.xml的Sqoop动作中，明确指定了--as-parquetfile参数，同时可以尝试添加<configuration>标签配置Hadoop相关参数，比如：

  <action name="sqoop-ingest">
    <sqoop xmlns="uri:oozie:sqoop-action:0.4">
      <job-tracker>${jobTracker}</job-tracker>
      <name-node>${nameNode}</name-node>
      <configuration>
        <property>
          <name>mapreduce.job.classloader</name>
          <value>true</value>
        </property>
      </configuration>
      <command>job --exec ingest_amsp_custmaster</command>
    </sqoop>
    <ok to="end"/>
    <error to="fail"/>
  </action>
  

  开启mapreduce.job.classloader可以避免部分类加载冲突问题。
• 在job.properties中务必添加oozie.use.system.libpath=true，这个参数会强制Oozie使用系统共享库，而不是工作流自带的依赖包，很多时候共享库不生效都是因为没开这个配置。

4. 查看Oozie/YARN日志定位具体错误 #

不要盲目排查，一定要去看具体的报错信息：

• 登录YARN UI，找到对应的Oozie Application，查看ApplicationMaster的日志；
• 如果是ClassNotFoundException（比如找不到org.apache.parquet.hadoop.ParquetOutputFormat），说明共享库的jar没放对或者没加载到；
• 如果是NoClassDefFoundError，大概率是版本冲突，需要清理Oozie共享库中重复或不兼容的Parquet jar。

5. 本地验证Sqoop作业的可行性 #

登录到Oozie所在的节点，切换到oozie用户，手动执行sqoop job --exec ingest_amsp_custmaster：

• 如果本地执行失败，说明Sqoop本身的Parquet配置有问题，先解决Sqoop本地运行的问题；
• 如果本地执行成功但Oozie失败，那问题肯定出在Oozie的共享库、权限或配置上。

内容的提问来源于stack exchange，提问作者Yusata