我来帮你排查这个Sqoop导出的问题——你遇到的IllegalArgumentException大概率是因为Sqoop在读取Hive表的底层存储文件时，没有正确按照你指定的--columns参数筛选字段，反而解析了那些你想排除的列导致的。下面是几个针对性的解决方案，你可以逐一尝试：

1. 匹配Hive表的存储格式与分隔符 #

Sqoop默认会用TextInputFormat读取Hive表的文件，但如果你的Hive表是列式存储（比如Parquet/ORC），或者字段分隔符不是默认的\001（Ctrl+A），就会导致字段解析错位。你需要在命令中明确指定输入格式和分隔符：

示例命令（TextFile格式的Hive表）： #

sqoop export \
  --connect jdbc:mysql://<host>:<port>/<db_name> \
  --username <U> \
  --password <p> \
  --table target \
  --columns "col1,col2,col3" \
  --export-dir /path/to/source/table \
  --input-fields-terminated-by '\001' \  # 对应Hive表的字段分隔符
  --input-lines-terminated-by '\n'

如果是Parquet格式的Hive表： #

需要额外指定Parquet的输入格式，避免Sqoop用默认的文本解析器：

sqoop export \
  --connect jdbc:mysql://<host>:<port>/<db_name> \
  --username <U> \
  --password <p> \
  --table target \
  --columns "col1,col2,col3" \
  --export-dir /path/to/source/table \
  --input-format org.apache.hadoop.hive.ql.io.parquet.MapredParquetInputFormat

2. 创建Hive临时视图筛选目标列（最稳妥的方法） #

如果直接指定--columns不好使，更可靠的方式是先在Hive中创建一个只包含col1,col2,col3的临时视图，这样Sqoop读取的就是已经筛选好的数据，不会再碰其他字段：

1. 先在Hive中创建临时视图：

CREATE TEMPORARY VIEW export_temp AS
SELECT col1, col2, col3 FROM your_source_hive_table;

2. 找到这个视图对应的HDFS存储路径（可以通过DESCRIBE FORMATTED export_temp;查看Location字段），然后用Sqoop导出：

sqoop export \
  --connect jdbc:mysql://<host>:<port>/<db_name> \
  --username <U> \
  --password <p> \
  --table target \
  --export-dir /user/hive/warehouse/your_db.db/export_temp \
  --input-fields-terminated-by '\001'

3. 校验MySQL目标表的字段匹配度 #

还要确保MySQL的target表的字段顺序、数据类型和Hive表的col1,col2,col3完全匹配。比如Hive的col1是STRING类型，MySQL对应的字段应该是VARCHAR而非INT，类型不匹配也可能抛出IllegalArgumentException。

4. 开启调试日志定位细节 #

如果以上方法都无效，加上--verbose参数开启调试日志，能帮你看到Sqoop解析字段的具体过程：

sqoop export \
  --connect jdbc:mysql://<host>:<port>/<db_name> \
  --username <U> \
  --password <p> \
  --table target \
  --columns "col1,col2,col3" \
  --export-dir /path/to/source/table \
  --verbose

从日志里你能看到Sqoop读取的字段数量、类型是否和预期一致，从而精准定位问题。

内容的提问来源于stack exchange，提问作者rnmalone