BigQuery：FROM语句用动态变量遇CONCAT报错，如何实现动态表查询？

你遇到的错误是因为BigQuery的FROM子句不支持直接用CONCAT生成表名，必须通过动态SQL来实现。下面是修正后的完整代码，用EXECUTE IMMEDIATE执行动态拼接的导出语句：

DECLARE list_of_tables ARRAY<STRING>;
DECLARE table_name STRING;
DECLARE counter INT64 DEFAULT 0;

SET list_of_tables = ARRAY(
  SELECT DISTINCT table_name 
  FROM `project.dataset.INFORMATION_SCHEMA.TABLES` 
  WHERE REGEXP_CONTAINS(table_name, "^my_table") AND table_type = "BASE TABLE");

WHILE counter < ARRAY_LENGTH(list_of_tables) DO
  SET table_name = list_of_tables[OFFSET(counter)];
  
  -- 用FORMAT拼接动态SQL，通过EXECUTE IMMEDIATE执行
  EXECUTE IMMEDIATE FORMAT("""
    EXPORT DATA OPTIONS(
      uri = '%s',
      format = 'CSV',
      overwrite = TRUE
    ) AS (
      SELECT * FROM `project.dataset.%s`
    );
  """, CONCAT('gs://archive/', table_name, '_*.csv'), table_name);
  
  SET counter = counter + 1;
END WHILE;

关键说明： #

1. 动态SQL执行：EXECUTE IMMEDIATE是BigQuery中处理动态表名的标准方式，它允许运行拼接生成的SQL字符串。
2. 安全拼接：用FORMAT函数替代手动字符串拼接，既避免语法错误，也能处理特殊字符转义（若表名含特殊字符，可改用%t占位符安全引用表名）。
3. 循环逻辑修正：替换无终止条件的LOOP为WHILE循环，通过counter变量控制循环次数，防止无限循环。

注意事项： #

• 确保执行脚本的账号拥有目标BigQuery表的数据读取权限，以及GCS存储桶的写入权限。
• 若表名包含空格、连字符等特殊字符，可将表名部分改为FORMAT("%t", CONCAT('project.dataset.', table_name))实现自动转义。

内容的提问来源于stack exchange，提问作者kokokruunch