求助：使用Sqoop无法将MySQL表导入HDFS

先梳理下你的环境配置：

• MySQL连接器：mysql-connector-java-5.1.46
• Sqoop版本：sqoop-1.4.7.bin__hadoop-2.6.0
• Hadoop版本：hadoop-2.7.5
• Java版本：Oracle JDK 1.8.0_171（试过OpenJDK同样有问题）
• 操作系统：Ubuntu，Hadoop单节点本地模式

你执行的导入命令：

bin/sqoop import -connect jdbc:mysql://localhost:3306/testDb -username root -password root --table student --target-dir /user/hadoop/student -m 1

结合这些信息，我给你几个排查和解决的方向：

1. 确认MySQL驱动包的位置是否正确 #

Sqoop依赖MySQL驱动包建立JDBC连接，你需要把mysql-connector-java-5.1.46.jar放到Sqoop安装目录的lib文件夹下（比如$SQOOP_HOME/lib）。如果已经放了，检查下文件权限，确保Sqoop能读取它：

chmod 644 $SQOOP_HOME/lib/mysql-connector-java-5.1.46.jar

2. 验证MySQL的连接和数据可用性 #

先在终端手动连接MySQL，确认你的数据库、表和用户权限都没问题：

mysql -uroot -proot testDb

进入数据库后执行select * from student;，看看能不能正常查询到数据。同时确保MySQL服务是运行状态：

sudo service mysql status

3. 处理HDFS目标目录的问题 #

如果HDFS里的/user/hadoop/student目录已经存在，Sqoop会直接报错终止导入。你可以先删除这个目录：

hdfs dfs -rm -r /user/hadoop/student

或者在导入命令里加上--delete-target-dir参数，让Sqoop自动清理已存在的目标目录：

bin/sqoop import -connect jdbc:mysql://localhost:3306/testDb -username root -password root --table student --target-dir /user/hadoop/student -m 1 --delete-target-dir

另外，要确保hadoop用户对/user/hadoop目录有读写权限，必要的话创建并修改权限：

hdfs dfs -mkdir -p /user/hadoop
hdfs dfs -chown hadoop:hadoop /user/hadoop

4. 检查环境变量和Sqoop配置 #

确认$SQOOP_HOME、$HADOOP_HOME、$JAVA_HOME这几个环境变量都正确设置并生效，你可以通过以下命令验证：

echo $SQOOP_HOME
echo $HADOOP_HOME
echo $JAVA_HOME

同时，检查Sqoop的配置文件sqoop-env.sh（在$SQOOP_HOME/conf目录下，没有的话复制sqoop-env-template.sh重命名），确保里面配置了Hadoop的相关路径：

export HADOOP_COMMON_HOME=/path/to/your/hadoop-2.7.5
export HADOOP_MAPRED_HOME=/path/to/your/hadoop-2.7.5
export JAVA_HOME=/path/to/your/jdk1.8.0_171

5. 启用 verbose 日志排查具体错误 #

如果上面的步骤都没解决问题，执行命令时加上--verbose参数，输出详细的错误日志，这样就能定位到具体的问题（比如JDBC驱动找不到、连接超时、权限不足等）：

bin/sqoop import -connect jdbc:mysql://localhost:3306/testDb -username root -password root --table student --target-dir /user/hadoop/student -m 1 --verbose

内容的提问来源于stack exchange，提问作者ruchika doifode