已创建Hive外部表但表为空，请求技术协助

以下是针对你遇到的问题的排查步骤和解决方法：

1. 验证文件路径与权限 #

• 用HDFS命令确认目标CSV文件是否在指定路径下：

  hdfs dfs -ls /appl/trench/dev/data/in/main/daily_wf/fink_category_mapping
  

  如果未列出你的CSV文件，说明上传路径错误，重新上传到指定路径即可。
• 检查Hive用户对该路径及文件的读取权限：

  hdfs dfs -ls /appl/trench/dev/data/in/main/daily_wf/
  

  确保路径和文件的权限位包含其他用户/组的读权限（如r-x），权限不足时执行：

  hdfs dfs -chmod -R 755 /appl/trench/dev/data/in/main/daily_wf/fink_category_mapping
  

2. 检查字段分隔符是否匹配 #

• 你当前使用的分隔符是\073（对应ASCII分号;），但CSV文件实际分隔符可能是逗号,、制表符\t或其他符号。先查看文件内容确认：

  hdfs dfs -cat /appl/trench/dev/data/in/main/daily_wf/fink_category_mapping/your_file.csv | head -10
  

• 如果分隔符不匹配，修改表DDL重新创建（或用ALTER TABLE调整），比如实际是逗号分隔的话：

  CREATE EXTERNAL TABLE c_fink_category_mapping (
      trench_code string,
      fink_code string
  )
  row format delimited fields terminated by ',' stored as textfile 
  location '/appl/trench/dev/data/in/main/daily_wf/fink_category_mapping'
  TABLEPROPERTIES ('serialization.null.format' = '');
  

3. 确认文件格式与存储格式兼容 #

• 你指定了stored as textfile，如果CSV文件是压缩格式（如.gz），需确保Hive支持该压缩格式，或者先解压文件后再上传。
• 检查文件是否包含特殊编码或隐藏字符，导致Hive无法解析。可将文件下载到本地，用纯文本编辑器打开查看是否有异常格式。

4. 验证表结构与数据列匹配 #

• 确认CSV文件的列数与表定义的列数完全一致，列数不匹配会导致数据无法正确映射，甚至显示为空。
• 如果数据包含引号包裹的字段，需在row format中添加引号配置：

  row format delimited fields terminated by '\073' optionally enclosed by '"' stored as textfile
  

5. 刷新Hive元数据 #

• 执行命令刷新表的元数据，确保Hive识别到路径下的文件：

  MSCK REPAIR TABLE c_fink_category_mapping;
  

6. 直接验证数据读取 #

• 执行查询查看数据是否能被读取：

  SELECT * FROM c_fink_category_mapping LIMIT 10;
  

  如果返回NULL值，大概率是分隔符或格式不匹配；如果无结果，说明文件未被Hive识别，回到步骤1重新检查路径和权限。

内容的提问来源于stack exchange，提问作者Stanislav Jirák