挂载 NAS--E-MapReduce-火山引擎

文档中心

立即注册

E-MapReduce

请输入

配置存储网络与vePFS

挂载 NAS

本文为您介绍挂载NAS的操作全流程。

背景信息

当前支持通过 FSX 方式挂载 NAS。

注意事项	说明
存储类型	NAS 需选择缓存型。
挂载要点	您需要自行创建 FSX 接入点。
网络要求	需要保障好接入点的 VPC 与 EMR 存储网络 VPC 为同一个 VPC。

前提条件

已创建 NAS 文件系统，用于挂载至 EMR Serverless 队列中，详细操作请参见：NAS 创建文件系统。
已创建 EMR Serverless 独占队列。

挂载 NAS

NAS 侧配置

step1：开通并绑定 FSX 协议服务

NAS 实例需联系 NAS 存储团队开通并绑定 FSX 协议服务。如有需要请提工单联系技术人员开通服务。
确保文件系统实例接入点所在 VPC 与 EMR Serverless 存储网络配置的 VPC 一致。

step2：创建接入点

EMR Serverless 通过 FSX 协议挂载 NAS 时，您还需要在 NAS 中创建好接入点，以便后续挂载和访问。

关键配置参数说明如下，详细操作指导请参见：创建接入点。

关键参数	配置说明
私有网络	需保障和EMR Serverless 存储网络配置的保持一致。
权限组	选择默认权限组即可。
接入点根目录	填写"/"即可（若您需要限制访问特定目录下的文件，可填特定目录）。

EMR 侧配置

step1：队列存储网络配置

登录并进入 EMR 控制台后，在页面左侧导航单击资源管理>Serverless，单击待绑定存储的 Serverless 队列进入队列详情。
单击左侧导航的”存储网络与NAS“，单击”存储网络配置“模块的”立即配置“。
选择私有网络，并配置子网与安全组。

确保此处选择的 VPC，与上述步骤中文件系统实例接入点所在的 VPC 为同一个 VPC。

step2：计算组配置共享文件存储

您可以在创建计算组时选择配置共享文件存储，也可修改计算组配置时配置。

参数	配置说明
文件系统名称	在下拉框中选择待挂载的文件系统。
文件系统接入点	在下拉框中选择已创建的接入点。
文件系统路径	查看需要挂载的 NAS 的文件系统路径。此处会展示接入点的文件路径配置结果，无需再次配置。
挂载路径	设置当前存储在 EMR 队列中挂载的路径。
只读开关	设置挂载存储后，是否设置为”只读“。打开开关后，后续仅支持从挂载的存储路径中读取数据，不支持写入数据。

step5：任务中配置共享文件存储

目前 EMR Serverless 产品可支持在下列引擎类型的作业中挂载存储。

Spark
Ray
CustomJob

当前支持在界面上进行设置，也支持在任务提交代码中设置。

界面方式配置
1. 登录 EMR Serverless 控制台，在左侧导航栏单击作业中心 > 作业管理，进入作业管理页面后单击右上角的”创建作业“。
2. 在创建作业参数配置中配置存储挂载，配置参数与上文中“计算组配置共享文件存储”参数一致。

代码方式配置
在作业原参数设置的基础上，您可以通过增加serverless.fsx.volumes参数来指定您需要在作业中挂载的文件系统路径及对应在 Pod 中的路径。
同时，由于 fsx 访问协议服务接入点需要跨 VPC，因此，使用FSX挂载时，提交任务时需开启跨 VPC 设置。

配置示例

-- 开启跨VPC网络配置
set serverless.cross.vpc.access.enabled = true;

-- 设置存储挂载参数
set serverless.fsx.volumes=[{"type": "vepfs", "fileSystemId": "vepfs-cnxxx", "volumePath": "/abc/", "mountPath": "/data/def", "capacity": "100Gi", "readOnly": false}];

select 1;

说明

在 Spark 作业中挂载 NAS 文件系统时，需要增加set spark.files.useFetchCache=false;配置。

参数说明

参数名	是否必填	默认值	说明
type	是	无	文件系统类型，此处可选值为： vepfs nas
fileSystemId	是	无	文件系统 ID
volumePath	是	无	文件系统待挂载的路径（vePFS/NAS 中的原路径），需满足：该路径在文件系统实例中已存在该路径是文件系统某个协议服务接入点根目录的子路径
mountPath	是	无	挂载到 Pod 中的路径
capacity	否	100Gi	容量
readOnly	否	false	是否为只读，false 为读写，true 为只读

注意

配置了存储挂载的作业暂无法使用独占队列的弹性资源，仅能在固定资源中执行。若固定资源被占满，这类作业会排队等待，直至固定资源释放后再调度执行

权限管理

NAS 接入点默认对本账号下所有子用户开放读写，如果您对子用户的读写权限有管控需求，可以通过以下方式管理权限。

登录 NAS 控制台，选择文件系统>文件系统列表，选择需要的文件系统，进入文件系统详情页面。
选择 接入点 页签后，单击需要管理的接入点，打开 IAM 策略开关，配置 IAM 策略。

说明

IAM 策略开启后，默认所有子用户无访问权限。特定子用户需接入点读写权限，可参考权限策略。

最近更新时间：2026.02.09 18:26:30

这个页面对您有帮助吗？

有用

无用

E-MapReduce

NAS 侧配置 #

step1：开通并绑定 FSX 协议服务 #

step2：创建接入点 #

EMR 侧配置 #

step1：队列存储网络配置 #

step2：计算组配置共享文件存储 #

step5：任务中配置共享文件存储 #

权限管理 #