国产数据库中间件
社区干货
一文读懂火山引擎云数据库产品及选型
团队致力于帮助企业与组织更好的使用火山引擎云存储与云数据库产品,针对实际业务场景设计最优的解决方案,用专业技术助力组织和企业实现业务成功。## 为什么要做数据库选型### 数据库选型的重要性与难点发展数字经济是当下各行各业的重要方向。支撑数字经济的底座是软件,特别是基础软件,可以说基础软件是整个数字经济的坚实底座。在基础软件领域,有三大基础软件,分别是操作系统、数据库系统和中间件。我们每天日常生活中的方...
一文读懂火山引擎云数据库产品及选型
支撑数字经济的底座是软件,特别是基础软件,可以说基础软件是整个数字经济的坚实底座。在基础软件领域,有三大基础软件,分别是操作系统、数据库系统和中间件。我们每天日常生活中的方方面面,背后都离不开这些基础软件... 可以获得更强的数据库能力,也可以聘请更专业的DBA进行数据库维护,保障数据库系统稳定运行。企业组织中越是重要核心的数据库系统,会获得更多的资源投入。DBA,Database Administrator,是数据库管理员的简称。从名字...
一文读懂火山引擎云数据库产品及选型
支撑数字经济的底座是软件,特别是基础软件,可以说基础软件是整个数字经济的坚实底座。在基础软件领域,有三大基础软件,分别是操作系统、数据库系统和中间件。我们每天日常生活中的方方面面,背后都离不开这些基础软件... 可以获得更强的数据库能力,也可以聘请更专业的 DBA 进行数据库维护,保障数据库系统稳定运行。企业组织中越是重要核心的数据库系统,会获得更多的资源投入。DBA,Database Administrator,是数据库管理员的简称。从...
云原生中间件 MongoDB 的集群架构与设计 |社区征文
`Primary`节点需要记录所有改变数据库状态的操作,这些记录保存在 `oplog` 中,这个文件存储在 `local` 数据库,各个`Secondary` 节点通过此 `oplog` 来复制数据并应用于本地,保持本地的数据与主节点的一致。`oplog` ... dropDatabase)n:空操作,特殊用途ns:操作针对的集合o:操作内容 o2:更新查询条件,仅update操作包含该字段```副本集数据同步分为`初始化同步`和`keep复制同步`。初始化同步指全量从主节点同步数据,如果`Primar...
特惠活动
国产数据库中间件-优选内容
国产数据库中间件-相关内容
中间件监控
中间件监控,将应用内部访问中间件的数据进行汇总,从中间件视角统一观测,方便中间件维护人员对中间件进行问题排查。 前提条件访问中间件需要应用接入Trace能力。具体请参见应用接入。 SQL类监控SQL数据库包括Oracle、MySQL等。 数据库列表 对于访问的数据库按照database粒度进行划分,展示错误率、平均QPS、延时均值分位值、以及慢查询占比。 所有指标均支持排序。 支持按照数据库名称搜索。 支持按需订阅数据库。 数据库总览 通过...
分布式数据库在抖音春晚活动中的应用
上图是现有的或者主流的大型数据库系统的架构,它分为三层:- 最上一层是应用,今日头条,抖音,西瓜视频等都是应用。- 中间层是数据库中间件层。- 底层是数据库层以及数据库下面的单机存储。这个架构应该是... 我们构建这个分布式数据库,由始至终贯彻的一个非常重要的理念是:log is the database。我们最终落地的数据是 Page,这个 Page 就要从 log 中来。。把 Redis 作为缓存组件,需要防止出现以下的一些问题,否则可能会造成生产事... 三次都失败则记录日志到数据库,使用分布式调度组件 xxl-job 等实现后续的处理。在高并发的场景下,**重试最好使用异步方式**,比如发送消息到 mq 中间件,实现异步解耦。亦或是利用 Canal 框架订阅 MySQL binlog ...
火山引擎上云迁移指南(二):迁移实施
中间件迁移和数据库迁移等部分为您介绍上云迁移的实施流程。## 云上网络改造### 云上网络规划 火山引擎提供私有网络VPC、公网 IP、NAT 网关、VPN 网关、专线、负载均衡CLB、云企业网CEN等网络产品,支持用户搭... 火山引擎数据库传输服务 DTS(Database Transmission Service)提供了数据迁移、数据订阅于一体的数据库数据传输管理服务,支持关系型数据库、非关系型数据库数据源间的数据传输,降低数据库之间数据流通复杂性,可...
字节跳动 NoSQL 的探索与实践
我们知道关系型数据库强调 CAP 理论:Consistency,Availability 和 Partition Tolerance,这三者不可兼得。谈到 NoSQL,我们会引入 BASE 概念:- Basically Available:分布式系统在出现故障时允许损失部分可用性,以保证核心功能可用。比如在电商场景中,有时交易付款出现了问题,但用户仍可以正常浏览商品。- Soft State:由于不要求强一致性,BASE 允许系统中存在一种不影响系统可用性的中间状态,比如订单支付中、数据同步中等,在数据...
火山引擎上云迁移指南(一):上云迁移背景与流程
**跨云迁移**:目前国内云商百家争鸣,各个云厂商还有一些差异化的产品服务,另外相同的产品价格也会有差异。企业无论是出于成本考虑,还是业务需求考虑,都是有可能需要把已经在云上的业务,迁移到其他云上。 ![alt]... 例如将关系型数据库替换成云服务商提供的数据库服务、将自建消息中间件替换成云服务提供的消息队列服务、将 HAProxy 更换成云服务商提供的负载均衡服务,以此来降低部分管理成本提升效率。 || 重新购置 | 中 | 也称...
新建消费组
成功创建数据订阅任务之后,需要根据消费端的类型在 DTS 控制台或通过开源 Kafka SDK 创建消费组。本文介绍如何通过数据库传输服务 DTS 控制台为内置中间件新建消费组。 背景信息消费组是一组具有相同消费组 ID 的消费者。当一个 Topic 被同一个消费组的多个消费者消费时,每一条消息都只会被投递到一个消费者,实现消费的负载均衡。通过消费组,您可以确保一个 Topic 的消息被并行消费。创建数据订阅任务之后,数据库的数据更新和结构...
预检查项(Kafka & RocketMQ)
数据库传输服务 DTS 将消息订阅到自有中间件 Kafka 或 RocketMQ 时,会先对数据库进行各项检查。本文介绍检查项的详细信息。 检查项 数据库类型 检查范围 级别 检查内容 备注 Topic 和权限 目标库 订阅 Error 检查消息队列 Kafka 版或消息队列 RocketMQ 版中是否存在给定 Topic 且拥有该 Topic 的写权限。 当将数据订阅到火山引擎 ECS 自建 Kafka 时,级别为 Warning。
字节跳动数据库的过去、现状与未来
代理层主要负责数据库的一些接入工作,比如鉴权、流量染色、流量分发等;* **Database 层**:这一层部署着数据库的一些实例,通过数据库的 Binlog 实现数据的同步、高可用。整体来讲,第一代数据库系统架构以开源 MySQL 为主,通过分库分表中间件为用户提供较好的服务,以人工为主、脚本为辅进行运维。它主要存在以下三个问题:* **系统弹性较差。**首先是容量难以得到灵活扩展,抖音这类 App 通常都由数万个微服务构成,当微服务...
