Hive时间戳分区异常：期望创建含空格的分区路径却生成日期分区

我帮你梳理下问题里的几个关键错误，以及对应的解决办法：

1. 先纠正三个低级但致命的错误 #

（1）Shell变量传递的空格拆分问题 #

你调用Hive时的命令：

hive -f load.hql -hiveconf file_load_timestamp=$dat;

这里的$dat包含空格，Shell会自动把它拆分成两个独立参数（比如20180102和10:01:34），导致Hive实际只接收到日期部分作为分区值，这是分区只生成日期的核心原因之一。

（2）HQL里的变量引用错误 #

你的load.hql里写的是${hiveconf:dat}，但你在Shell里传递的HiveConf变量名是file_load_timestamp，两者不匹配，Hive找不到dat变量，会触发默认逻辑导致分区异常。

（3）Date命令的格式错误 #

你用了%H:%m:%S，其中%m代表月份，不是分钟！分钟的正确格式符是%M，否则你的时间部分会一直显示当前月份（比如1月就显示10:01:34），完全不符合预期。

2. 修正后的完整代码 #

（1）test1.sh 脚本 #

# 如果你期望时间部分不带冒号（比如103455），把格式改成'%Y%m%d %H%M%S'
dat=$(date +'%Y%m%d %H:%M:%S')
# 给变量加双引号，避免空格拆分参数
hive -f load.hql -hiveconf file_load_timestamp="$dat";

（2）load.hql 文件 #

INSERT OVERWRITE table perm.test partition(file_load_timestamp='${hiveconf:file_load_timestamp}') 
SELECT a,b FROM work.temp;

3. 确保目标表的分区字段类型正确 #

你的目标表perm.test的分区字段file_load_timestamp必须定义为string类型，如果是timestamp类型，Hive会自动将其格式化为日期格式（yyyy-MM-dd），无法保留完整的带空格的时间戳。创建表的示例代码：

CREATE TABLE perm.test (
    a string, -- 根据你的实际字段类型调整
    b string
)
PARTITIONED BY (file_load_timestamp string);

4. 验证结果 #

完成上述修正后，HDFS上的分区路径应该会生成你期望的格式：file_load_timestamp=20180102 10:34:55/（如果是不带冒号的格式，就是file_load_timestamp=20180102 103455/）。

额外提醒 #

HDFS路径包含空格虽然可以实现，但后续用HDFS命令、Spark或其他工具访问时，需要对空格进行转义（比如\ ）或者用引号包裹路径，可能会带来一些操作上的不便。如果业务允许，用下划线代替空格会更稳妥，但如果必须用空格，上述方案完全可行。

内容的提问来源于stack exchange，提问作者user2531569