在大规模数据库自动化、平台化方面有较资深的落地经验。# 导语市场上有很多数据库产品,如Oracle、MySQL、SQLServer、NoSQL、NewSQL等,那么目前数据库圈最火的分布式关系型数据库之一TiDB你了解吗?相信很多同学以前听说过TiDB,也知道是一款国人研发的数据库,但你知道TiDB到底是如何实现的?它跟其他数据库产品相比,它的核心优势是什么?此次夜校分享,xiaoyu向大家介绍了数据库发展史、TiDB 设计、架构及生态及TiDB在得物的应用...
导语市场上有很多数据库产品,如Oracle、MySQL、SQLServer、NoSQL、NewSQL等,那么目前数据库圈最火的分布式关系型数据库之一TiDB你了解吗?相信很多同学以前听说过TiDB,也知道是一款国人研发的数据库,但你知道TiDB到底是如何实现的?它跟其他数据库产品相比,它的核心优势是什么?此次夜校分享,xiaoyu向大家介绍了数据库发展史、TiDB 设计、架构及生态及TiDB在得物的应用。数据库技术发展演进**2008年以前**2008 年以前应用...
> 日前,字节跳动技术社区 ByteTech 举办的第四期字节跳动技术沙龙圆满落幕,本期沙龙以《字节云数据库架构设计与实战》为主题。在沙龙中,字节跳动基础架构数据库资深工程师张雷,跟大家分享了《[字节跳动数据库的过去、现状与未来](https://mp.weixin.qq.com/s/4Bvo0EBo_xtKdVcqhGynCQ)》,本文根据分享整理而成。数据库技术一直是信息技术中极其重要的一环,在步入云原生时代后,云基础设施和数据库进一步整合,弥补了传统数据库的痛...
## 分布式数据库架构简介![image.png](https://p1-juejin.byteimg.com/tos-cn-i-k3u1fbpfcp/9ca5ef2ef9af4cedb544547a86a09a3e~tplv-k3u1fbpfcp-5.jpeg?)相信对数据库感兴趣的同学对上面这张图也不会陌生。这... 我们构建这个分布式数据库,由始至终贯彻的一个非常重要的理念是:log is the database。我们最终落地的数据是 Page,这个 Page 就要从 log 中来。![image.png](https://p3-juejin.byteimg.com/tos-cn-i-k3u1fbpfc...
# 向量数据库的崛起与多元化场景创新## 前言:> 在如今的数字时代,数据被称作金子,对企业、科学家和管理者都有很大价值。但是,随着数据规模的不断增长,高效的管理、存储和检索数据变得越来越复杂。这引进了当今... 数据库服务架构下,向量数据库可以完全依托于亚马逊云科技平台的数据库服务并深度结合了亚马逊云科技的多元化产品线来实现高效安全的生产开发,不断地适应新的业务场景和需求。比如:· **图像和音频、视频分析**:向量...
PostgreSQL是一个功能非常强大、开源的对象关系型数据库管理系统,本文介绍如何在Linux实例上搭建并使用PostgreSQL。 PostgreSQL可靠性高,支持NoSQL数据类型(JSON/XML/hstore)、GIS地理信息处理,适用于位置应用系统、在线事务处理等场景。 软件版本操作系统:本文以CentOS 7.6为例,您也可以按需替换为CentOS 7.9、veLinux 1.0(CentOS兼容版)等CentOS 7系镜像。 PostgreSQL:本文以为PostgreSQL 11为例。 前提条件您已购买Linux实例。...
点击上方👆蓝字关注我们! 伴随着云计算、分布式技术的逐步落地,急剧膨胀的数据规模、多样化的数据类型、更复杂的业务特征给数据存储、计算等带来了更严峻的挑战;数据库的形态也随之发生了... **《云原生数据库 veDB 核心技术剖析与展望》**张雷|火山引擎数据库技术负责人veDB 是一款分布式数据库,采用了云原生计算存储分离架构。本次演讲将为大家介绍火山引擎这款云原生数据库的核心技术原理,并对未...
> **火山引擎存储&数据库产品解决方案团队**,由资深的存储&数据库解决方案架构师组成。团队致力于帮助企业与组织更好的使用火山引擎云存储与云数据库产品,针对实际业务场景设计最优的解决方案,用专业技术助力组织和企业实现业务成功。## 为什么要做数据库选型### 数据库选型的重要性与难点发展数字经济是当下各行各业的重要方向。支撑数字经济的底座是软件,特别是基础软件,可以说基础软件是整个数字经济的坚实底座。在基础软...
**veDB 主体架构**veDB 自身即一个较大的产品矩阵。它除了提供 MySQL、PG、MongoDB,也在字节跳动内部研发扩展了 Elastic Search 服务,包括自研的、用于处理 TP/AP 相关事务的产品 HTAP。数据库团队在设计上采用了分层式架构,由高性能网络连接上层的数据库和底层的分布式存储引擎平台。整个 veDB 的架构遵循的基本哲学是分离。首先是 **计算和存储的分离** 。如下图所示,veDB 分为计算层和存储层,其中计算层又被拆分出...
Master-Slave 架构一般用于备份或者做读写分离,一般是一主一从设计和一主多从设计。Master-Slave 由主从角色构成:**Master ( 主 )**可读可写,当数据有修改的时候,会将 Oplog 同步到所有连接的 Salve 上去。**Slave ( 从 )**只读,所有的 Slave 从 Master 同步数据,从节点与从节点之间不感知。**如图:**![picture.image](https://p3-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/caab487646094fb880ff11a65...
火山引擎向量数据库高级工程师 VikingDB 简介 ![picture.image](https://p6-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/8830cd001d2c4694b5e623cc645246af~tplv-tld... VikingDB 基于大规模云原生架构设计,在基础设施层面做了大量开发工作,以降低用户的使用、运维成本:* 弹性调度:单租户支持千级别数量的索引,单库百亿候选,用户在使用中无需关心扩容,VikingDB 会自动跟随数据量和请...
火山引擎表格数据库 HBase 版是基于 Apache HBase 提供的全托管 NoSQL 服务,兼容标准 HBase 访问协议,具备低成本存储、高扩展吞吐等优势。 产品架构 如上图所示,表格数据库 HBase 版主要由 Master、RegionServer、ZooKeeper、HDFS 四部分组成: Master:Master 负责管理和协调 RegionServer,以及管理表的增删改查操作。每个 HBase 实例默认只能创建 2 个 Master 节点(主备)。 RegionServer:RegionServer 负责存放和管理 HRegion,以...
# 前言从 on-premise 数据库迁移到火山引擎(ECS 自建或是RDS),您可能希望做一次全面的性能测试,本文主要说明在测试前,我们需要提前考虑哪些先决条件。在测试之前,需要尽可能的保证二者具有相同的环境,如网络,实例规格,部署架构,数据库版本,参数配置等。# 网络环境由于公网网络环境的不可预测性,在性能测试时,不论 ECS 自建数据库还是 RDS,请均使用内网环境,即客户端和数据库实例在同一可用区。常见的部署架构有:1. 应用...