和本地文件系统一样的目录树视图 - Append Only 的写入(不支持随机写) - 顺序和随机读 - 超大数据规模 - 易扩展,容错率高## HDFS 在字节跳动的发展字节跳动已经应用 HDFS 非常长的时间了。经历了 9 年的发展,目前已直接支持了十多种数据平台,间接支持了上百种业务发展。从集群规模和数据量来说,HDFS 平台在公司内部已经成长为总数十万台级别服务器的大平台,支持了 10 EB 级别的数据量。**当前在字节跳动,** **...
## tmpfs与devtmpfs分别是什么?### tmpfs简介tmpfs是一个基于内存的临时文件系统,在Linux系统中,tmpfs大小默认最大为系统内存空间的一半。由于tmpfs文件系统是基于内存的,并且挂载在了/dev/shm这个目录下,因此,/dev/shm这个目录也不在磁盘上,而是在内存里。这就支撑了tmpfs的I/O非常快,可以提供较高的访问速度。tmpfs具体的大小可以通过df -Th命令,以及free -m命令对比查看。tmpfs特性可以用来提高服务器的读写性能。您也可以...
本方式仅支持在Linux操作系统中使用,建议云服务器操作系统使用Ubuntu 22.04。 攻略持续跟新中~## 前提条件1. 参考[购买云服务器](https://developer.volcengine.com/articles/7328448271943204927#heading1)指引,在[活动页面](https://www.volcengine.com/activity/game-huanshou)购买了云服务器。2. 参考[配置安全组](https://developer.volcengine.com/articles/7328448271943204927#heading2)指引,在安全组入方向中放通了...
肯定少不了服务器的支持。目前,WebRTC 主要有三种网络架构:Mesh、MCU、SFU。今天就来分别介绍一下三者,带大家认识一下它们的优点和缺点。# 正文## 1. Mesh(P2P)### 简介 Mesh 服务器架构其实就是标准 P2P 通讯模式的混用,每一个 P2P 连接有独立的传输策略控制,通讯质量有一定的保障。但是,这种架构对于客户端系统是一种浪费,一方面需要分配更多的端口,消耗更多的系统资源;另一方面,由于要向其它三个客户端发送本地音视频...
当您不需要在云盘上创建分区,直接创建文件系统时,您可以参考本文介绍的操作步骤进行扩容。 注意事项本操作仅适用于Linux系统。 操作步骤登录Linux实例。 执行以下命令,确认云盘的文件系统类型。 df -ihT返回结果如下所示,当前结果说明文件系统类型为xfs: 根据云盘文件系统的类型,执行不同的命令进行扩容。 扩容EXT文件系统: resize2fs /dev/vdb 扩容XFS文件系统: xfs_growfs /dev/vdb 执行以下命令,查看文件系统的硬盘空间情况...
本文介绍类Unix/Linux操作系统的云服务器间如何传输数据。 传输文件数据的主要工具有SCP、Rsync、Netcat等,下文将详细介绍各工具的特点以及用法。 SCPSCP( Secure Copy)即安全拷贝,是一种在两台服务器(本地与本地、本地与远程、远程与远程)间安全地进行文件传输的方法。SCP是基于SSH登录的应用,所以进行数据传输的机器上必须支持SSH服务。 使用示例场景 命令 示例 两台Linux服务器间传输文件 scp <源主机用户名>@<源主机IP>:<待...
如果您的本地计算机操作系统为Linux或macOS,您可以通过SCP上传文件到Linux云服务器。 前提条件已购买云服务器并绑定公网IP。 云服务器状态为 运行中。 云服务器开启22端口。 软件版本本地计算机操作系统:本文以火山引擎装有CentOS 7.6镜像的云服务器作为本地计算机为例。 云服务器操作系统:本文以CentOS 7.6为例。 操作步骤上传文件获取Linux云服务器公网IP。登录云服务器控制台,在实例列表中可查看对应云服务器的公网IP。 ...
本文以 CentOS 系统实例为例,介绍在 ECS 实例挂载文件系统的操作步骤。 前提条件已创建文件存储 NAS 服务,具体步骤,请参见创建文件系统。 已创建挂载点,具体步骤,请参见创建挂载点。 已创建与文件存储 NAS 服务相同 VPC 的 ECS 实例,具体步骤,请参见购买云服务器。说明 为了达到最优的性能体验,建议文件存储 NAS 与 ECS 实例在同一可用区。 注意事项为了获得最佳访问性能,建议您根据文件系统类型选择合适的 NFS 版本:文件系统...
本文以 CentOS 系统实例为例,介绍在 ECS 实例挂载文件系统的操作步骤。 前提条件已创建文件存储 NAS 服务,具体步骤,请参见创建文件系统。 已创建挂载点,具体步骤,请参见创建挂载点。 已创建与文件存储 NAS 服务相同 VPC 的 ECS 实例,具体步骤,请参见购买云服务器。说明 为了达到最优的性能体验,建议文件存储 NAS 与 ECS 实例在同一可用区。 注意事项为了获得最佳访问性能,建议您根据文件系统类型选择合适的 NFS 版本:文件系统...
如果您的本地计算机操作系统为Windows,您可以通过WinSCP上传文件至Linux云服务器。 关于 WinSCPWinSCP是一个Windows环境下使用SSH的开源图形化SFTP客户端。同时支持SCP协议。其主要功能是本地与远程计算机间安全地复制文件。 前提条件本地计算机已下载并安装WinSCP客户端。可通过官方网站获取最新版本。 已购买云服务器并绑定公网IP。 云服务器状态为 运行中 。 云服务器开启22端口。 软件版本本地计算机操作系统:本文以火山...
表示当前的云服务器有两块磁盘,/dev/vda1是系统盘,/dev/vdb是新增数据盘。 执行mkfs -t <文件系统格式> /dev/vdb命令,对/dev/vdb裸设备直接创建文件系统格式。 不同文件系统支持的分区大小不同,请根据实际需求合理选择文件系统。以设置文件系统为xfs 为例,命令示例如下: mkfs -t xfs /dev/vdb注意 格式化需要等待一段时间,请观察系统运行状态,不要退出。 执行mkdir <挂载点>命令,新建挂载点。 以新建挂载点/data为例,命令示例...
前提条件使用文件存储 vePFS 前,请确保您已完成以下操作: 已注册火山引擎账号并完成实名认证,具体步骤,请参见账号注册及实名认证。 已创建文件系统所属项目。关于项目的详情及创建项目的具体步骤,请参见项目概述和项目管理。 已创建私有网络 VPC。如果您未创建 VPC 或希望重新创建 VPC,具体步骤,请参见创建私有网络。 您已在 VPC 内创建挂载节点,挂载节点包括 ECS 及 GPU 服务器。购买的具体步骤,请参见创建云服务器。 注意 ...
前提条件使用文件存储 vePFS 前,请确保您已完成以下操作: 已注册火山引擎账号并完成实名认证,具体步骤,请参见账号注册及实名认证。 已创建文件系统所属项目。关于项目的详情及创建项目的具体步骤,请参见项目概述和项目管理。 已创建私有网络 VPC。如果您未创建 VPC 或希望重新创建 VPC,具体步骤,请参见创建私有网络。 您已在 VPC 内创建挂载节点,挂载节点包括 ECS 及 GPU 服务器。购买的具体步骤,请参见创建云服务器。 注意 ...