Synapse与Databricks中UST转EST时区异常：Databricks显示昨日数据

问题现象 #

• Synapse转换结果符合预期：
  
• Databricks预览数据显示为昨日日期，结果异常：
  

排查与解决方法 #

1. 检查Databricks集群时区配置 #

• 执行spark.sql("select current_timestamp()")查看集群默认时区，若默认时区不是UST（UTC），会导致转换基准错误，需将集群时区设置为UTC。
• 转换时显式指定时区，不要依赖默认配置，示例SQL：

  -- 将UST时间转为EST（使用时区ID避免夏令时问题）
  SELECT your_ust_column AT TIME ZONE 'UTC' AT TIME ZONE 'America/New_York' AS est_time
  

2. 校验源字段类型与格式 #

• 确保源字段是timestamp类型，若为字符串，先通过to_timestamp转换为时间戳再做时区转换：

  SELECT to_timestamp(ust_str_col, 'yyyy-MM-dd HH:mm:ss') AT TIME ZONE 'UTC' AT TIME ZONE 'America/New_York' AS est_time
  

• 用America/New_York代替EST作为目标时区，因为EST是固定偏移，而America/New_York会自动适配夏令时，避免时间偏差。

3. 验证预览显示的真实性 #

• 执行SELECT est_time, timezone(est_time)确认实际存储的时区是否正确，部分情况下Databricks预览界面会用本地时区展示，并非转换后的实际时区。

内容的提问来源于stack exchange，提问作者Venkatesh