Vertex AI Workbench中使用Cloud Storage FUSE读取数据失败求助

• 检查Cloud Storage FUSE挂载状态

  1. 在终端执行ls /gcs，查看是否能列出目标存储桶。如果没有显示，说明FUSE未挂载。
  2. 手动挂载存储桶：执行gcsfuse my_bucket_name /gcs/my_bucket_name。若缺少gcsfuse工具，先安装：sudo apt-get install gcsfuse。
  3. 注意：部分Vertex AI Workbench实例默认仅挂载指定存储桶，用户管理型笔记本可能需要手动挂载。

• 验证路径与文件存在性

  1. 确认存储桶名称完全匹配（GCS存储桶名称大小写敏感）。
  2. 在终端执行gsutil ls gs://my_bucket_name/cola_public/raw/in_domain_train.tsv，验证文件确实存在，排除拼写错误。

• 检查权限配置

  1. 确保笔记本关联的服务账号拥有目标存储桶的存储对象查看者（roles/storage.objectViewer）或更高权限。
  2. 可通过终端执行gsutil acl get gs://my_bucket_name/cola_public/raw/in_domain_train.tsv，查看文件的访问控制列表。

• 适配Vertex AI Training的替代方案

  1. 训练作业中可通过--data-dir参数挂载GCS路径，脚本内直接访问/gcs/开头的挂载路径（需确保作业配置正确指定数据挂载）。
  2. 无需强制使用FUSE路径，Vertex AI Training环境默认支持pandas直接读取gs://格式路径（只要服务账号有权限）。

内容的提问来源于stack exchange，提问作者Ahmad