AWS Athena(Presto) 如何将表名设为变量仅修改一次即可全局生效

你尝试的直接赋值变量作为表名的写法无法运行，是因为Athena的标准SQL语法不支持直接用变量作为表名标识符，表名属于SQL解析阶段就需要确定的静态内容，不能直接用运行时字符串变量替代。可通过以下几种方案实现一次修改全局生效：

方案1：使用参数化查询 #

如果通过Athena API、SDK或者JDBC/ODBC驱动运行查询，直接使用参数占位符即可，执行时只需要传一次日期参数值：

SELECT * FROM "db1".? WHERE condition
UNION
SELECT * FROM "db2".? WHERE condition

执行时将2021_09_30作为参数值传入两个占位符，修改日期只需要改一次传参值。

方案2：用视图封装查询逻辑 #

如果频繁需要切换日期后缀，可以先创建视图，修改日期时只要更新视图定义即可，所有引用视图的查询无需调整：

-- 仅需修改此处的日期后缀
CREATE OR REPLACE VIEW merged_date_tbl AS
SELECT * FROM "db1"."2021_09_30" WHERE condition
UNION
SELECT * FROM "db2"."2021_09_30" WHERE condition;

-- 后续所有查询直接调用视图
SELECT * FROM merged_date_tbl;

方案3：动态生成SQL语句 #

如果在Athena控制台手动执行查询，可以先运行拼接SQL的语句，生成对应日期的目标查询，只需要改一次日期值：

-- 修改此处的日期即可生成对应查询
SELECT CONCAT(
  'SELECT * FROM "db1"."', dt, '" WHERE condition UNION SELECT * FROM "db2"."', dt, '" WHERE condition'
) AS target_sql
FROM (SELECT '2021_09_30' AS dt) t;

将返回的target_sql结果复制出来执行即可。

方案4：改造为分区表（长期最优方案） #

如果表结构可自主调整，最佳实践是将日期作为分区字段创建统一的分区表，不同日期的数据存储在对应分区下，查询时只需要修改分区过滤值：

-- 分区表创建示例
CREATE EXTERNAL TABLE IF NOT EXISTS db1.business_data (
  -- 此处写你的表字段定义
)
PARTITIONED BY (dt string)
-- 补充存储路径、数据格式等配置

后续查询逻辑可简化为：

SELECT * FROM db1.business_data WHERE dt = '2021_09_30' AND 其他条件
UNION
SELECT * FROM db2.business_data WHERE dt = '2021_09_30' AND 其他条件

切换日期时仅需要修改dt的过滤值即可。

内容的提问来源于stack exchange，提问作者PalimPalim