K8s 1.20无特权模式下PMEM后端本地PV挂载报路径不存在求助
问题根因
- 直接报错触发原因:运行在目标调度节点上的kubelet,在节点本地文件系统中找不到
/mnt/pmem0/vol1路径。结合你提供的集群状态(所有控制平面组件均带minikube标识),你之前执行路径校验的操作是在物理宿主机上完成的,而K8s节点是minikube启动的独立隔离环境,宿主机的目录不会自动同步到节点内部,因此运行在节点环境中的kubelet自然无法定位到对应路径。 - 配置层面的隐藏问题:你的PVC手动指定了
volumeName: pmem-pv-volume字段,会跳过WaitForFirstConsumer存储模式下的节点适配校验逻辑。即使PV配置的节点亲和性和实际存在目标路径的节点不匹配,PV和PVC也会被强制绑定,最终导致Pod调度到无对应路径的节点上触发挂载失败。 - 之前挂载为overlay文件系统的原因:kubelet找不到指定的本地路径时,会自动回落使用节点本地根分区的临时存储完成挂载,因此你之前会观察到卷被识别为根分区上的overlay文件系统,而非预期的PMEM存储。
- 裸金属场景的同类报错原因:如果你的集群不是minikube环境,该报错的常见原因是节点亲和性标签配置错误:
disktype=pmem标签被打在了未挂载PMEM的节点上,实际承载PMEM设备的节点未打对应标签,导致Pod调度到无目标路径的节点上。
可落地解决方案
第一步:修复路径不存在的挂载报错
- minikube环境下的路径透传操作:
- 进入minikube节点内部校验当前路径状态:执行
minikube ssh进入节点环境,运行ls /mnt/pmem0/vol1确认路径确实不存在。 - 停止当前minikube实例:
minikube stop - 重新启动minikube并挂载宿主机的PMEM目录:
minikube start --mount --mount-string="/mnt/pmem0:/mnt/pmem0" - 再次进入minikube内部,确认
/mnt/pmem0/vol1目录可见。
- 进入minikube节点内部校验当前路径状态:执行
- 节点标签校验与修正:
- 查询集群节点列表:
kubectl get nodes - 仅对存在
/mnt/pmem0/vol1路径的节点打亲和性标签:kubectl label node <目标节点名称> disktype=pmem,移除其他节点上的错误同名字段。
- 查询集群节点列表:
- 配置修正:
- 移除PVC中的
volumeName: pmem-pv-volume字段,恢复WaitForFirstConsumer模式的正常节点校验逻辑,避免PV/PVC绑定到不匹配的节点。 - 清理旧的异常绑定资源:执行
kubectl delete pod daemon pvc pmem-pv-claim pv pmem-pv-volume,重新应用修正后的YAML配置创建PV、PVC和Pod。
- 移除PVC中的
第二步:非特权模式下正常使用PMEM资源
- 确认PMEM挂载参数正确:在目标节点内部执行
mount | grep /mnt/pmem0,确认挂载参数包含dax=always。如果缺少该参数,重新挂载文件系统:mount -o remount,dax=always /mnt/pmem0,并将该挂载配置写入/etc/fstab实现开机自动生效。 - 无需开启特权模式:fsdax模式下的PMEM文件系统通过bind mount方式挂载到容器时,会自动继承dax访问特性,不需要给容器配置
privileged: true,同时也能绕开PMEM-CSI直接对接PMEM块设备时遇到的containerd兼容问题。 - 权限校验:确认
/mnt/pmem0/vol1目录的权限允许kubelet读写(当前配置的777权限即可满足),不要对该目录设置noexec、nosuid等限制容器程序运行的挂载参数。
第三步:功能验证
- 等Pod进入Running状态后,进入容器完成校验:
- 执行
kubectl exec -it daemon -- bash进入容器环境 - 执行
mount | grep /mnt/pmem,确认挂载源为PMEM设备,挂载参数包含dax标记 - 执行读写测试:
touch /mnt/pmem/testfile && ls -l /mnt/pmem/testfile,确认读写功能正常
- 执行
内容的提问来源于stack exchange,提问作者TOM ZHANG
相关产品推荐
相关产品推荐

