使用SQOOP将HDFS数据导入Hive遇问题：无报错但数据未导入

看起来你搞混了Sqoop --external-table-dir 参数的使用场景，这也是数据没成功导入的核心原因。咱们先理清楚问题，再给出对应方案：

核心问题所在 #

你的命令同时指定了MySQL连接参数和--external-table-dir，但这个参数的作用是让Sqoop从MySQL抽数时，把数据写到指定HDFS路径，并自动在Hive创建对应外部表——但你的需求是把已经存在于HDFS /WithFields 的数据导入到已建好的Hive表，两者的逻辑完全不搭。另外，你的原命令还缺了关键的--table参数（Sqoop不知道要从MySQL的哪个表拉数据），这也会导致命令执行后没有实际数据流转。

针对你的需求的两种解决方案 #

方案1：直接让Hive关联已有的HDFS数据（推荐，无需Sqoop） #

如果你已经手动创建了sampleone.customers外部表，只需要确保HDFS数据的格式、字段分隔符和Hive表定义完全匹配，然后执行以下HiveQL操作即可：

-- 非分区表：直接加载数据到表（如果是外部表，此操作会把HDFS数据移动到表的默认存储路径）
LOAD DATA INPATH '/WithFields' INTO TABLE sampleone.customers;

-- 或者如果想让外部表直接指向/WithFields路径（不需要移动数据），创建表时就要指定LOCATION：
-- CREATE EXTERNAL TABLE sampleone.customers(字段定义) 
-- ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t'  -- 替换成你的数据分隔符
-- LOCATION '/WithFields';
-- 这种情况下Hive会自动识别该路径下的数据，不需要额外加载

如果是分区表的话，需要先修复分区再查询：

MSCK REPAIR TABLE sampleone.customers;

方案2：修正Sqoop命令，从MySQL导入到Hive外部表 #

如果你的真实需求是从MySQL的sampleOne库拉数据到Hive外部表sampleone.customers，并把数据存在/WithFields，那修正后的命令应该是这样：

sqoop import \
--connect jdbc:mysql://localhost/sampleOne \
--username root \
--password root \
--table customers \  # 必须指定MySQL中的表名，Sqoop要知道从哪抽数
--hive-import \
--hive-database sampleone \
--hive-table customers \
--external-table-dir "/WithFields" \
--create-hive-table  # 如果Hive表还没创建就加这个，已创建的话可以去掉，但要确保表结构和MySQL一致

额外检查项 #

1. 先确认HDFS路径/WithFields真的有数据：

   hdfs dfs -ls /WithFields
   

2. 检查Hive表结构和HDFS数据格式是否匹配（比如分隔符、字段数量、类型）：

   DESCRIBE sampleone.customers;
   

3. 查看Sqoop的执行日志（控制台或指定日志路径），有没有隐性的权限问题或者数据格式不匹配的提示——有时候没报错不代表真的没问题，只是没触发显性错误而已。

内容的提问来源于stack exchange，提问作者RushHour