服务器存储原理
社区干货
火山引擎 Redis 云原生实践
Redis 集群模式的原理是把保存在其中的数据做了分片,每一部分数据由不同的 Redis 实例承担。Redis 的典型应用场景有以下 3 种:- **缓存**:因为 Redis 是基于内存的存储,它的读写请求会在内存执行,请求响应的... 可以通过 telnet 连接到一个 Redis server 实例上执行 get 和 set 操作。## K8s 简介K8s 是一个容器编排系统,可以自动化容器应用的部署、扩展和管理。K8s 提供了一些基础特性:- **自动装箱**:可指定 K8s...
9年演进史:字节跳动 10EB 级大数据存储实战
# 背景## **HDFS** **简介**HDFS 全名 Hadoop Distributed File System,是业界使用最广泛的开源分布式文件系统。原理和架构与 Google 的 GFS 基本一致。它的特点主要有以下几项:- 和本地文件系统一样的目录... HDFS 平台在公司内部已经成长为总数十万台级别服务器的大平台,支持了 10 EB 级别的数据量。**当前在字节跳动,** **HDFS** **承载的主要业务如下:**- Hive,HBase,日志服务,Kafka 数据存储 - Yarn,Flink 的计...
分布式数据缓存中的一致性哈希算法|社区征文
分析一下一致性哈希算法环的原理。首先将缓存服务器( ip + 端口号)进行哈希,映射成环上的一个节点,计算出缓存数据 key 值的 hash key,同样映射到环上,并顺时针选取最近的一个服务器节点作为该缓存应该存储的服务器。具体实现见后续的章节。比如说,当存在 A,B,C,D 四个缓存服务器时,它们及其 key 值为 1 的缓存数据在一致性哈希环上的位置如下图所示,根据顺时针取最近一个服务器节点的规则,该缓存数据应该存储在服务器 B 上。...
WebRTC 服务器架构 | 社区征文
肯定少不了服务器的支持。目前,WebRTC 主要有三种网络架构:Mesh、MCU、SFU。今天就来分别介绍一下三者,带大家认识一下它们的优点和缺点。# 正文## 1. Mesh(P2P)### 简介 Mesh 服务器架构其实就是标准 P2P ... 服务器压力适中。** 尽管都需要部署流媒体服务器,但是 SFU 架构和 MCU 架构不一样,它不需要对媒体流解码再混流。SFU 的服务器只负责媒体流的转发或者存储,不做编码、解码、转码、混合等算力要求比较高的任务。所以...
特惠活动
服务器存储原理-优选内容
服务器存储原理-相关内容
弹性块存储概述
弹性块存储EBS(Elastic Block Storage)是火山引擎提供的高可用、高可靠、高性能、弹性扩展的块存储设备,可以作为云服务器和弹性容器服务的可扩展硬盘使用。 弹性块存储类型弹性块存储又称云盘,根据用途可分为系统盘和数据盘。 类型 描述 系统盘 用于存储操作系统,只能随实例创建,生命周期与挂载的云服务器实例相同。 数据盘 用于存储应用数据,适用于I/O密集型应用、关系型数据库、NoSQL数据库、开发测试场景等。您可以在创建云服...
存储概述
存储的应用场景示意图如下所示。 网络存储对比各个网络存储类型的对比如下所示。 维度 EBS NAS TOS CloudFS 简介 弹性块存储 EBS 又称云盘,提供高可用、高可靠、高性能、弹性扩展的块存储设备,可以作为云服务器和... 大数据文件存储是火山引擎面向大数据和机器学习生态的文件存储和加速服务,支持标准的 HDFS 协议访问和数据湖透明访问模式,为您提供低成本、高性能、高吞吐和高可用的大数据文件访问服务。 存放的内容 存放二进制数...
弹性块存储-火山引擎
火山引擎弹性块存储EBS(Elastic Block Storage)是火山引擎提供的高可用、高可靠、高性能的块存储设备,可以作为云服务器和弹性容器服务的可扩展硬盘使用
新功能发布记录
本文介绍了云服务器ECS各特性版本的功能发布动态,新特性将在各个地域(Region)陆续发布,欢迎体验。 说明 “邀测”产品或功能暂未对全部用户开放。为方便了解产品,部分“邀测”产品或功能的配套文档已开放给全部用户... 请参见弹性块存储支持的告警事件。 全部 公测 创建事件规则 2024年04月10日序号 功能 功能描述 发布地域 阶段 文档 1 计费转换 包年包月转按量计费功能由邀测转为正式发布。 全部 商用 包年包月转按量计费 2 实例 ...
字节跳动高性能 Kubernetes 元信息存储方案探索与实践
所有组件都与 APIServer 交互,而 APIServer 则需要将集群元数据持久化到元信息存储系统中。当前,etcd 是 APIServer 唯一支持的元信息存储系统,随着单个集群规模的逐渐增大,存储系统的读写吞吐以及总数据量都会... 随后将 API Server 写入的 Value 写到 Object Key 中;* 执行 Update 请求时,当 Revision Key 中存放的旧 Revision Bytes 符合预期时,才将新 Revision Bytes 写入,随后将 API Server 写入的 Value 写到 Object K...
字节跳动云原生 Spark History 服务的实现与优化
UIService 存储占用和访问延迟均降低 90% 以上,目前 UIService 服务已经在字节跳动内部广泛使用,并且作为火山引擎湖仓一体分析服务 LAS(LakeHouse Analytics Service)的默认服务。业务背景 **开源 Spark History Server 架构**为了能够更好理解本次重构的背景和意义,首先对原生 Spark History Server 原理做个简单的介绍。的默认服务。# 1. 业务背景## 1.1 **开源 Spark History Server 架构**为了能够更好理解本次重构的背景和意义,首先对原生 Spark History Server 原理做个简单的介绍。的默认服务。# 业务背景## 开源 Spark History Server 架构为了能够更好理解本次重构的背景和意义,首先对原生 Spark History Server 原理做个简单的介绍。是火山引擎提供的高可用、高可靠、高性能、弹性扩展的块存储设备,可以作为云服务器和弹性容器服务的可扩展硬盘使用。 产品类型弹性块存储又称云盘,根据用途可分为系统盘和数据盘。 类型 描述 系统盘 用于存储操作系统,只能随实例创建,生命周期与挂载的云服务器实例相同。 数据盘 用于存储应用数据,适用于I/O密集型应用、关系型数据库、NoSQL数据库、开发测试场景等。 您可以在创建云服务器...
