Hive中YYYYMMDD格式日期转Unix时间戳结果错误的解决方法

这个问题我之前踩过一模一样的坑！核心原因是你用错了日期格式符——Hive的unix_timestamp函数对大小写格式符的语义完全不同，千万别搞混了。

问题根源 #

你写的unix_timestamp(DATE,'YYYYMMDD')里，大写的YYYY代表的是ISO基于周的年份（week-based year），不是我们日常用的公历年（对应小写yyyy）。ISO周年份的规则是：每年的第一周必须包含1月4日，这就导致部分年初或年末的日期会被归到上一个或下一个周年份里。

就像你遇到的情况，输入'20180301'时，用YYYY解析会错误地将其对应到2017年的周周期中，最终得到的时间戳就指向了2017年12月30日。

正确解法 #

把格式符里的大写YYYY改成小写的yyyy就搞定了，正确的SQL语句如下：

select unix_timestamp(DATE,'yyyyMMdd') from table_name;

用这个语句解析'20180301'，得到的正确Unix时间戳是1519862400，对应2018-03-01 00:00:00，完全符合预期。

额外提示 #

再给你补充几个Hive里容易混淆的日期格式符，避免以后再踩坑：

• yyyy：公历年份（4位，日常使用的年份）
• YYYY：ISO周年份（4位，仅用于周相关的日期计算）
• MM：月份（01-12）
• dd：日期（01-31）
• HH：24小时制小时（00-23）
• hh：12小时制小时（01-12）

内容的提问来源于stack exchange，提问作者neha khemani