Dataflow作业Cloud Profiler启动失败,JOB_NAME环境变量缺失原因咨询
Dataflow作业启用Cloud Profiler失败问题分析
按照Cloud Profiler官方文档配置后,Dataflow作业的Cloud Profiler启动失败,核心问题在于:Profiler启动依赖JOB_NAME和JOB_ID两个环境变量,但工作节点VM中仅存在JOB_ID,JOB_NAME缺失。
已完成的排查步骤
- 项目已启用Cloud Profiler API
- 项目相关配额充足
- Dataflow作业使用的服务账号已配置Profiler所需的全部权限
- 流水线启动参数中添加了
--dataflow_service_options=enable_google_cloud_profiler - 通过Dataflow模板部署作业时,已指定
enable_google_cloud_profiler和enable_google_cloud_heap_sampling实验标志
根因定位
经排查,问题源于Provisioning API返回的JOB_NAME为空值,导致boot.go将节点的JOB_NAME环境变量设置为空,最终Python SDK在激活googlecloudprofiler时因缺少有效JOB_NAME而失败。该问题目前已有公开的官方工单记录。
内容的提问来源于stack exchange,提问作者buraktokman
相关产品推荐
相关产品推荐

