Hive中字符串转Europe/Berlin时区Timestamp为空，函数问题排查

错误原因 #

1. 格式字符串不匹配：你用的unix_timestamp格式yyyy MM dd HH:mm:ss Z和CREATEDDATE的实际格式2022-07-13T09:30:19.000+0000完全不符，导致解析失败返回null，后续所有依赖此结果的函数自然输出null。
2. 函数逻辑方向错误：to_utc_timestamp的作用是将指定时区的时间转换为UTC时间，但你需要的是把UTC时间转成柏林时区的时间，逻辑搞反了。

正确转换写法 #

方法一：兼容全版本的标准写法

, from_utc_timestamp(to_timestamp(CREATEDDATE, "yyyy-MM-dd'T'HH:mm:ss.SSSZ"), 'Europe/Berlin') AS CREATEDDATE

• to_timestamp用匹配的格式字符串yyyy-MM-dd'T'HH:mm:ss.SSSZ解析原字符串，得到UTC时区的Timestamp（原字符串带+0000标识，会被自动识别为UTC时间）。
• from_utc_timestamp将UTC时间转换为Europe/Berlin时区的Timestamp，自动处理夏令时（比如夏季CET变为CEST，UTC+2）。

方法二：Spark 3.x+简化写法

如果你的Spark版本是3.x及以上，支持直接解析ISO格式的时间字符串为Timestamp：

, from_utc_timestamp(CREATEDDATE::timestamp, 'Europe/Berlin') AS CREATEDDATE

• CREATEDDATE::timestamp会自动识别带时区标识的ISO字符串，转为UTC时间戳，再通过from_utc_timestamp转换为柏林时区时间。

验证示例 #

原时间2022-07-13T09:30:19.000+0000（UTC），转换后柏林时区（夏季夏令时UTC+2）结果为2022-07-13 11:30:19。

内容的提问来源于stack exchange，提问作者HansMuff