如何查询BigQuery数据集的存储计费模型（LOGICAL/PHYSICAL）

目前BigQuery的INFORMATION_SCHEMA确实没有提供存储计费模型的字段，你可以通过以下几种方式获取该信息：

1. 使用bq命令行工具 #

单个数据集查询：

bq show --format=json 你的项目ID:你的数据集ID

返回的JSON结果中，storageBillingModel字段会显示PHYSICAL或LOGICAL。

批量查询项目下所有数据集（需安装jq工具解析JSON）：

for dataset in $(bq ls --format=csv | tail -n +2 | cut -d',' -f1); do
  echo "数据集: $dataset"
  bq show --format=json "$dataset" | jq '.storageBillingModel'
done

2. 使用BigQuery API #

调用datasets.get接口获取数据集配置，示例请求（需先通过gcloud获取访问令牌）：

curl -H "Authorization: Bearer $(gcloud auth print-access-token)" \
  "https://bigquery.googleapis.com/bigquery/v2/projects/你的项目ID/datasets/你的数据集ID"

响应JSON中同样包含storageBillingModel字段。

3. 使用Python客户端库 #

通过google-cloud-bigquery库遍历并查询所有数据集：

from google.cloud import bigquery

client = bigquery.Client(project="你的项目ID")
datasets = list(client.list_datasets())

for dataset in datasets:
    dataset_obj = client.get_dataset(dataset.dataset_id)
    print(f"数据集: {dataset.dataset_id}, 计费模型: {dataset_obj.storage_billing_model}")

注：存储计费模型是数据集级别的配置，不属于表存储元数据范畴，因此不会出现在INFORMATION_SCHEMA的存储相关视图中。

内容的提问来源于stack exchange，提问作者dylanvanw