AWS Athena视图列数限制触发PrestoException报错问题咨询

这个错误是视图序列化后的元数据大小超出限制导致的，核心触发逻辑如下：

• AWS Athena v2（对应你报错中的Presto v217版本）创建视图时，会把视图包含的所有列的列名、数据类型等全量元数据序列化为Base64编码的Blob，以/* Presto View: 开头的注释形式嵌入到视图定义中。
• 你使用SELECT *构建视图时，基表的所有列元数据都会被写入这个序列化Blob，列数越多，Blob的体积越大。
• 两个叠加的限制触发了本次报错：
  1. Presto v217内置了视图序列化内容的4MB大小校验规则，当基表列数达到9335列时，所有列元数据序列化后的总大小刚好超过该阈值，触发参数校验失败。
  2. Athena的视图元数据默认存储在AWS Glue Data Catalog的表属性中，Glue单条表属性的值最大仅支持400KB长度，超出后也会抛出校验异常。

• 避免使用SELECT *创建视图，仅声明实际需要用到的列，降低需要序列化的元数据量
• 升级到Athena v3引擎，该版本优化了视图序列化逻辑，同时放宽了对应的大小限制
• 若业务确实需要全量宽表，可将原宽表拆分为多个有关联主键的窄表，分别构建视图后在查询时关联，避免单视图列数过多

内容的提问来源于stack exchange，提问作者michaelgbj