如何解决GCP Cloud Composer获取IAM代理client_id报错问题

• curl命令参数顺序错误：2>&1 >/dev/null的逻辑是先把标准错误转成标准输出，再把标准输出重定向到/dev/null，最终grep抓取的内容为空。
• Python脚本触发KeyError: 'client_id'的核心原因是当前运行脚本的设备公网IP已加入Composer环境的Airflow UI访问白名单，访问Airflow地址时不会触发IAP重定向流程，重定向地址中不存在client_id参数。如果你的Composer是私网访问模式，也会默认跳过IAP公网认证，不会返回对应参数。

方案1：临时调整白名单后运行原有脚本 #

先把你当前运行脚本的设备公网IP从Composer环境的Airflow访问白名单中移除，再运行原有Python脚本即可正常获取到client_id。

方案2：直接从GCP控制台获取 #

• 打开GCP控制台的「身份识别代理」页面
• 在HTTPS资源列表中找到对应Composer环境的Airflow Web UI条目
• 点击条目右侧的更多操作按钮，选择「编辑OAuth客户端」，跳转后的页面中直接展示的客户端ID就是你需要的IAM代理client_id

方案3：修正curl命令后获取 #

调整curl参数顺序，执行如下命令即可抓取到client_id，同样需要先移除当前IP的白名单配置：

curl -v your_airflow_url >/dev/null 2>&1 | grep -o "client_id\=[A-Za-z0-9-]*\.apps\.googleusercontent\.com"

方案4：通过gcloud命令直接查询 #

无需调整白名单，直接执行如下gcloud命令过滤出Composer对应的OAuth客户端ID：

gcloud iap oauth-clients list --project=你的项目ID | grep composer

内容的提问来源于stack exchange，提问作者Dudes