存储服务器开发
社区干货
字节跳动极高可用 KV 存储系统详解
服务端需要记录已经给用户推荐过的视频列表,再推荐给用户更符合需求的其他视频,用户的浏览历史列表就存储在 Abase 内。都统一部署在数据中心机房内。这些硬件通过网络进行连接,专门的IT架构设计和维...
9年演进史:字节跳动 10EB 级大数据存储实战
HDFS 平台在公司内部已经成长为总数十万台级别服务器的大平台,支持了 10 EB 级别的数据量。**当前在字节跳动,** **HDFS** **承载的主要业务如下:**- Hive,HBase,日志服务,Kafka 数据存储 - Yarn,Flink 的计... Java 版本 Name Node 采用 Java 语言开发,在 INode 规模上亿时,不可避免的会带来严重的 GC 问题; - Java 版本 Name Node 将 INode meta 信息完全放置于内存,10 亿 INode 大约占用 800GB 内存(包含 JVM 自身占...
如何在大背景下降本增效,构建超大规模存储架构?
在日新月异的大数据服务不断涌现的今天,我们可以看到作为数据基础底座的存储服务面临了越来越多的复杂环境和需求的挑战。无论是离线大数据存储,还是在线 KV 类存储,都服务了越来越多的数据应用场景。存储业务形态的... 和火山大数据存储加速产品等,涉及数十 EB 数据的管理和治理。# 演讲日程**毛琦 小红书基础架构存储负责人****个人介绍:** 先后在 EMC、华为、阿里云从事存储产品的核心开发和架构师角色,目前在小红书负责 No...
特惠活动
存储服务器开发-优选内容
存储服务器开发-相关内容
焱融文件存储系统部署及性能验证
作为存储性能测试的读写客户端。该3台高性能ECS测试机为可选部署。在实际的业务部署中,业务系统可以直接在同一VPC中访问焱融的文件系统服务。 部署示意图如下图所示。 前提条件注册火山引擎账号,并完成企业实名认证。您可以登录火山引擎控制台查看是否已经完成实名认证。 已创建1个VPC实例,详细步骤参见创建私有网络。 已创建4台本地SSD型ECS实例和3台高性能ECS实例,创建步骤参见购买云服务器,各实例的配置数据参见数据规划。 数...
字节跳动极高可用 KV 存储系统详解
服务端需要记录已经给用户推荐过的视频列表,再推荐给用户更符合需求的其他视频,用户的浏览历史列表就存储在 Abase 内。都统一部署在数据中心机房内。这些硬件通过网络进行连接,专门的IT架构设计和维...
9年演进史:字节跳动 10EB 级大数据存储实战
HDFS 平台在公司内部已经成长为总数十万台级别服务器的大平台,支持了 10 EB 级别的数据量。**当前在字节跳动,** **HDFS** **承载的主要业务如下:**- Hive,HBase,日志服务,Kafka 数据存储 - Yarn,Flink 的计... Java 版本 Name Node 采用 Java 语言开发,在 INode 规模上亿时,不可避免的会带来严重的 GC 问题; - Java 版本 Name Node 将 INode meta 信息完全放置于内存,10 亿 INode 大约占用 800GB 内存(包含 JVM 自身占...
如何在大背景下降本增效,构建超大规模存储架构?
在日新月异的大数据服务不断涌现的今天,我们可以看到作为数据基础底座的存储服务面临了越来越多的复杂环境和需求的挑战。无论是离线大数据存储,还是在线 KV 类存储,都服务了越来越多的数据应用场景。存储业务形态的... 和火山大数据存储加速产品等,涉及数十 EB 数据的管理和治理。# 演讲日程**毛琦 小红书基础架构存储负责人****个人介绍:** 先后在 EMC、华为、阿里云从事存储产品的核心开发和架构师角色,目前在小红书负责 No...
弹性块存储-火山引擎
火山引擎弹性块存储EBS(Elastic Block Storage)是火山引擎提供的高可用、高可靠、高性能的块存储设备,可以作为云服务器和弹性容器服务的可扩展硬盘使用
物联网IOT发展重启嵌入式开发热度
服务器体系结构等。物联网嵌入式开发的主要目的是创建一个安全、可靠的物联网解决方案,可以实现物理世界和虚拟世界的无缝结合,形成一个能够动态交互的系统。它不但可以节约成本,提高效率,还可以改善生活质量,实现智能管理。第一步是硬件开发。物联网嵌入式开发开发商要考虑比IT相关的科技更多的问题。由于物理和虚拟的差异,它必须考虑到一系列的测试因素,从而确认硬件的可靠性。它还要考虑到材料性能,可用部件的协调,储存介质的...
