使用指引

大数据文件存储（Cloud File System, 简称 CloudFS）是火山引擎面向大数据和机器学习生态的文件存储和加速服务，支持标准的 HDFS 协议访问和数据湖透明访问模式，为您提供低成本、高性能、高吞吐和高可用的大数据文件访问服务。

使用流程

CloudFS 主要解决大数据场景下海量数据存储和数据分析问题，您可以将本地自建的 HDFS 文件系统无缝迁移到火山引擎 CloudFS。
创建火山引擎大数据文件存储实例后，您就可以在火山引擎云服务器 ECS 和容器等计算资源内通过 HDFS 协议接口访问 CloudFS 文件存储实例，从而实现文件的访问及共享。

• 关于如何配置、挂载文件存储实例，请参见挂载文件存储实例。
• 默认火山引擎主账号有 CloudFS 的全部操作权限。IAM 用户（子用户）在使用 CloudFS 前，需要配置授权策略。如何为 IAM 配置权限，请参见授权策略概述。
• 如何与大数据计算服务结合，请参考：
  • 使用 Hive 访问 CloudFS 中的数据
  • 迁移 Hadoop 文件系统数据至 CloudFS
  • 配置 MapReduce 的 HDFS 服务使用 CloudFS
  • 使用 Presto 查询 CloudFS 中的数据
  • 配置 Flink 访问 CloudFS
  • 配置 Spark 访问 CloudFS
    

使用限制

使用 HDFS 协议访问 CloudFS 文件存储实例时，请务必了解各命令的支持情况。

• Hadoop dfs 命令支持说明
• FileSystem 接口说明
• 不支持 WebHDFS REST API