使用Amazon Athena at_timezone函数遇MST格式错误，求排查

问题背景 #

原WHERE子句（用于增量查询）：

--date_parse(coalesce(nullif(cc.timemodified         , ''),nullif(cc.timecreated         , ''), '2500-01-01 15:01:01    '),'%Y-%m-%d %H:%i:%s')         >= date_add('hour', -36, date_parse('2022-11-07 14:08:22','%Y-%m-%d %H:%i:%s'))

为优化查询效率，改用Athena的at_timezone函数重写SQL：

at_timezone(parse_datetime(coalesce(nullif(cc.timemodified || 'MST', ''),nullif(cc.timecreated || 'MST', ''), '2022-11-01 22:25:32 MST'),'YYYY-MM-dd HH:mm:ss z'), 'US/Mountain') >= parse_datetime('2022-11-01 22:25:32 EST', 'YYYY-MM-dd HH:mm:ss z')
              --date_parse(coalesce(nullif(cc.timemodified         , ''),nullif(cc.timecreated         , ''), '2500-01-01 15:01:01    '),'%Y-%m-%d %H:%i:%s')         >= date_add('hour', -36, date_parse('2022-11-07 14:08:22','%Y-%m-%d %H:%i:%s'))

执行后报错：

INVALID_FUNCTION_ARGUMENT: Invalid format: "MST"
This query ran against the "some data" database, unless qualified by the query. Please post the error message on our forum  or contact customer support  with Query Id:

问题原因 #

• 时区缩写解析限制：Athena的parse_datetime函数对时区缩写（如MST、EST）的支持不完善，无法单独解析纯时区字符串，且部分缩写存在歧义（比如MST可能对应多个时区），函数优先识别时区全称（如US/Mountain、US/Eastern）或UTC偏移格式。
• 空值处理逻辑错误：nullif(cc.timemodified || 'MST', '')的写法存在漏洞——当cc.timemodified为空字符串时，拼接后得到'MST'，nullif判断该值不等于空字符串，会将'MST'传入parse_datetime，导致函数无法解析纯时区标识，触发报错。

修正方案 #

调整空值处理逻辑，确保仅在字段非空时拼接时区全称，同时使用parse_datetime可识别的时区格式：

at_timezone(
  parse_datetime(
    coalesce(
      -- 仅当timemodified非空时，拼接时区全称
      case when cc.timemodified != '' then concat(cc.timemodified, ' US/Mountain') end,
      -- 仅当timecreated非空时，拼接时区全称
      case when cc.timecreated != '' then concat(cc.timecreated, ' US/Mountain') end,
      -- 默认日期携带正确时区全称
      '2022-11-01 22:25:32 US/Mountain'
    ),
    'YYYY-MM-dd HH:mm:ss z'
  ),
  'US/Mountain'
) >= parse_datetime('2022-11-01 22:25:32 US/Eastern', 'YYYY-MM-dd HH:mm:ss z')

修正要点 #

1. 用case语句替代直接拼接，避免生成纯时区字符串；
2. 使用时区全称（如US/Mountain、US/Eastern）替代缩写，提升解析兼容性；
3. 保留原有的coalesce空值 fallback 逻辑，确保默认日期格式合法。

内容的提问来源于stack exchange，提问作者Adam Mohammed Dabdoub