使用Sqoop从MySQL导入表时任务失败，请求协助排查

你好，我看到你在同一服务器上用Sqoop从MySQL导入emp2表时，出现了“检索到0条记录”且导入任务失败的问题。先帮你拆解下日志里的关键信息：那些HBase/HCatalog/Accumulo的警告只是因为没配置对应环境变量，完全不影响当前的HDFS导入操作，不用管它们。下面是具体的排查和解决步骤：

1. 先确认MySQL源表是否真的有数据 #

日志里Sqoop已经成功执行了SELECT t.* FROM emp2 AS t LIMIT 1来生成代码，但后续导入时没拿到数据。首先登录MySQL终端，执行：

SELECT COUNT(*) FROM sqoop_test.emp2;

如果返回的行数是0，那导入0条记录是正常的，但任务失败可能还有其他原因；如果表确实有数据，继续往下排查。

2. 检查Sqoop命令的参数细节 #

你的导入命令是：

sqoop/bin$ ./sqoop import --connect jdbc:mysql://localhost/sqoop_test --username **** --password ***** --table emp2 --delete-target-dir -m 1;

可以做这几个小调整试试：

• 把localhost换成127.0.0.1：有时候MySQL的绑定地址是127.0.0.1而非localhost（取决于MySQL的my.cnf配置），修改后的连接串为jdbc:mysql://127.0.0.1/sqoop_test
• 验证MySQL用户权限：确保你的用户名有sqoop_test.emp2表的SELECT权限，执行SHOW GRANTS FOR '你的用户名'@'localhost';就能看到权限列表，如果缺少权限，用root用户给它授权：GRANT SELECT ON sqoop_test.emp2 TO '你的用户名'@'localhost';

3. 确认Hadoop集群状态和权限 #

因为Sqoop默认把数据导入到HDFS，要确保：

• Hadoop核心进程在运行：执行jps命令，检查NameNode、DataNode、ResourceManager、NodeManager这些进程是否都在运行。如果有进程没启动，先重启Hadoop集群。
• 执行Sqoop的用户有HDFS写入权限：默认导入目录是/user/你的用户名/emp2，可以先手动创建试试：hdfs dfs -mkdir /user/你的用户名/emp2，如果提示权限不足，需要修改HDFS目录权限（比如hdfs dfs -chmod 777 /user/你的用户名）或者用有HDFS权限的用户执行Sqoop。

4. 尝试启用MySQL专属导入模式 #

日志里已经提示使用--direct参数启用MySQL专属快速路径，这个参数会跳过JDBC层，直接用MySQL的mysqldump工具来导出数据，有时候能解决奇怪的导入问题。修改后的命令：

./sqoop import --connect jdbc:mysql://localhost/sqoop_test --username **** --password ***** --table emp2 --delete-target-dir -m 1 --direct;

5. 查看MapReduce的详细错误日志 #

任务失败的具体原因可能藏在MapReduce的日志里，你可以通过YARN命令查看：

yarn logs -applicationId <你的应用ID>

应用ID可以从你的Sqoop日志里找，格式类似application_1620000000_0001，里面的错误堆栈会告诉你到底是哪里出了问题（比如HDFS写入失败、MySQL连接中断等）。

如果以上步骤都试过还是没解决，可以补充MySQL表结构、Hadoop和Sqoop的版本信息，以及MapReduce的详细错误日志，这样能更精准地定位问题。

内容的提问来源于stack exchange，提问作者S Das