Athena查询Iceberg表时间戳自动追加UTC？求服务端修复方法

通过Glue Catalog将无时区的datetime值（如2025-01-24 13:58:14.000）存入Iceberg表iceberg_timestamp，所有时间均使用EST时区且无时区信息。但通过Athena查询该表时，结果会自动追加UTC后缀（如2025-01-24 13:58:14.000000 UTC）；查询Athena原生外部表athena_timestamp则能得到预期的无时区格式结果。

经分析，Athena自身将时间戳视为无时区类型，但Iceberg表的时间戳被连接器强制识别为带时区类型，因此显式标注UTC。需要服务端层面解决该问题，且不使用CAST、视图等客户端处理方式。已尝试以下Spark配置但无效：

.config("spark.sql.session.timeZone", "UTC")  // treat EST as literal
.config("spark.sql.iceberg.handle-timestamp-without-timezone", "false")

• 调整Spark Iceberg的时间戳映射配置
  将spark.sql.iceberg.handle-timestamp-without-timezone设为true，该配置控制Spark的无时区timestamp类型是否映射为Iceberg的timestamp without time zone类型。设为true后，Iceberg表会存储标准的无时区时间戳，Athena查询时不会强制添加UTC后缀。同时将时区配置改为标准时区ID，避免缩写识别问题：

  .config("spark.sql.session.timeZone", "America/New_York")
  .config("spark.sql.iceberg.handle-timestamp-without-timezone", "true")
  

• 显式指定Iceberg表的字段类型为无时区时间戳
  建表时直接定义时间戳字段为timestamp without time zone，避免依赖默认类型映射。示例Spark建表语句：

  CREATE TABLE iceberg_timestamp (
    event_time timestamp without time zone,
    -- 其他字段
  ) USING iceberg
  LOCATION 's3://your-bucket/path'
  TBLPROPERTIES ('table_catalog' = 'glue_catalog');
  

  若表已存在，可通过Iceberg的Schema Evolution功能修改字段类型：

  ALTER TABLE iceberg_timestamp ALTER COLUMN event_time TYPE timestamp without time zone;
  

• 配置Athena Iceberg连接器的时区参数
  在Athena控制台的Iceberg连接器配置中，添加time_zone参数并设置为America/New_York。该参数会让连接器将无时区时间戳按照指定时区解析，避免自动追加UTC标注。配置路径：Athena控制台 -> 数据来源 -> 连接器 -> 目标Iceberg连接器 -> 编辑配置 -> 添加参数time_zone=America/New_York。

• 校验Glue Catalog的表元数据
  登录Glue控制台，检查iceberg_timestamp表的字段类型，确认时间戳字段的类型为timestamp without time zone而非timestamp with time zone。若元数据有误，可通过Glue API或控制台修改表结构，确保与Iceberg表的实际类型一致。

内容的提问来源于stack exchange，提问作者Chaitanya Kulkarni