GCP中使用Terraform创建Pub/Sub资源时构建超时（20分钟）求助

核心问题分析 #

你的Terraform配置存在几个关键问题，导致资源创建超时：

• 资源依赖未显式声明：Topic必须等Schema创建完成后再创建，Subscription必须等Topic就绪后再创建，缺失依赖会导致Terraform并行操作时尝试引用未就绪的资源，最终超时。
• 硬编码资源引用错误：Topic的schema字段和Subscription的topic字段用了硬编码值，不仅容易出错，还会破坏Terraform的依赖自动推导逻辑。
• Schema名称不匹配：你创建的Schema名称是HISTORY_TEMP，但Topic里引用的是HIST_TEMP，这会导致Topic创建时找不到Schema，陷入等待超时。

修复后的配置代码 #

resource "google_pubsub_schema" "job_schema" {
  name       = "HISTORY_TEMP"
  type       = "AVRO"
  definition = file("./hist.json")
}

resource "google_pubsub_topic" "bq_topic" {
  name = "cdw-cf-bq-temp"

  # 显式依赖Schema资源，确保Schema创建完成后再创建Topic
  depends_on = [google_pubsub_schema.job_schema]

  schema_settings {
    # 使用资源引用替代硬编码，避免名称错误
    schema   = google_pubsub_schema.job_schema.id
    encoding = "JSON"
  }
}

resource "google_pubsub_subscription" "bq_subscription" {
  name  = "cdw-cf-bq-temp-subs"
  # 使用资源引用关联Topic
  topic = google_pubsub_topic.bq_topic.name

  # 显式依赖Topic资源，确保Topic就绪后再创建订阅
  depends_on = [google_pubsub_topic.bq_topic]

  bigquery_config {
    table               = "project:dataset_id.table"
    use_topic_schema    = true
    write_metadata      = false
    drop_unknown_fields = false 
  }
}

额外排查点 #

1. 权限验证：确认Terraform使用的服务账号拥有以下权限：
   • pubsub.schemas.create、pubsub.schemas.get
   • pubsub.topics.create、pubsub.topics.get
   • pubsub.subscriptions.create、pubsub.subscriptions.get
   • bigquery.tables.create（如果目标BigQuery表不存在）、bigquery.tables.updateData
2. BigQuery表状态：如果目标BigQuery表不存在，确保服务账号有权限自动创建表；如果表已存在，确认表结构与Schema兼容。

内容的提问来源于stack exchange，提问作者Mudgal