每一部分数据由不同的 Redis 实例承担。Redis 的典型应用场景有以下 3 种:- **缓存**:因为 Redis 是基于内存的存储,它的读写请求会在内存执行,请求响应的延迟很低,所以很多场景下会把 Redis 当做缓存使用。- **数据库**:Redis 支持持久化,可以把它当做 KV 数据库使用。- **消息队列**:Redis 支持 stream 数据,在 stream 数据结构基础上封装了 pub-sub 命令,实现了数据的发布和订阅,即提供了消息队列的基本功能。Re...
> 更多技术交流、求职机会,欢迎关注**字节跳动数据平台微信公众号,回复【1】进入官方交流群** 近年来,基于云原生架构的新一代消息队列和流处理引擎 Apache Pulsar 在大数据领域发挥着愈发重要的作用,其应用场... Apache Pulsar 是一个开源的基于发布 / 订阅模式的分布式、云原生、多租户的高性能消息与流平台,提供消息队列和计算服务,解决服务器间的消息传输与队列问题。 Pulsar 具有很多令人瞩目的特性和优势,下面选取...
.svc`指向其 VIP。**Etcd**就是 K8S 的数据库,保存了所有资源的信息。*每个 Pod 会被分配一个 IP,并写入 Pod 资源中。每个 Service 对应一个 Endpoint 资源,Endpoint 中维护 Service 后端 Pod 的 IP 列表。*通过**Etcd 的 watch 机制**,监听 Endpoint 资源即可实现服务发现。## 负载均衡![picture.image](https://p3-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/16d2cdf85d104cbeb34116470cbb9f51~tplv-tldd...
作者:王佳毅|火山引擎存储&数据库解决方案负责人> 本文整理自火山引擎开发者社区技术大讲堂第三期演讲,主要为大家介绍了 NoSQL 的前世今生和发展脉搏,以及字节跳动 NoSQL 的实践。## NoSQL 应用的现状什么是... 数据生态同步:支持数据的备份/回滚,FaaS 数据订阅,支持 ABase to Hive, Hive to ABase,方便用户在线查询和分析的转换 - 跨地区同步:支持多活 - 边缘存储:给边缘机房提供近地读写服务对于上述这些要求,第...
本文介绍数据订阅功能的使用流程,帮助您快速掌握创建和管理数据订阅任务的操作。 订阅流程 步骤 说明 1. 准备工作 在使用 DTS 订阅数据前,您需要对源库或目标库做一些准备工作,以满足 DTS 对环境的要求。 2. 创建订阅任务 您只需在控制台上进行简单操作,即可创建并启动订阅任务。 管理订阅通道 新增消费组 成功创建数据订阅任务之后,需要根据消费端的类型在 DTS 控制台或通过开源 Kafka SDK 创建消费组。 管理消费组 在数据库传...
本场景介绍如何通过数据库传输服务 DTS 创建公网自建 MySQL 数据订阅任务。 前提条件已注册火山引擎账号并完成实名认证。关于账号的创建方法和实名认证,请参见如何进行账号注册和实名认证。 已自主搭建 MySQL 数据... 订阅任务即可自动恢复。取值范围:600~86400,单位:秒(s)。默认值为 7200 秒。 单击预检查。 当预检查结果存在告警或失败时,您可以根据结果提示执行以下操作: 单击操作列的详情,查看详细的告警和失败信息,并根据告警...
本场景介绍如何通过数据库传输服务 DTS 创建公网自建 PostgreSQL 数据订阅任务。 前提条件已注册火山引擎账号并完成实名认证。关于账号的创建方法和实名认证,请参见如何进行账号注册和实名认证。 已自主搭建 Post... 验证数据处理语句是否正确。 错误重试时间 源库或目标库断连后,若能在该时间内重新连上,订阅任务即可自动恢复。取值范围:600~86400,单位:秒(s)。默认值为 7200 秒。 单击预检查。 当预检查结果存在告警或失败时...
本场景介绍如何通过数据库传输服务 DTS 创建火山引擎版 PostgreSQL 数据订阅任务。 前提条件已注册火山引擎账号并完成实名认证。关于账号的创建方法和实名认证,请参见如何进行账号注册和实名认证。 已创建火山引擎... 配置数据订阅任务基本配置信息,如下表所示。 参数 说明 实例类型 选择 PostgreSQL。 接入方式 选择火山引擎版 PostgreSQL。 是否跨火山引擎账号 按需选择是否跨账号传输数据,取值如下: 本账号:选择本账号时,表...
通过数据订阅,您可以实时获取源数据库(例如公网自建 MySQL、RDS MySQL、veDB MySQL、自建 PostgreSQL、PosrgreSQL)的增量数据,并可以按需自由消费增量数据,适用于业务异步解耦等场景。本文介绍火山引擎数据库传输服务 DTS 支持的源数据库的类型、版本、接入方式和支持订阅的数据类型等。 订阅类型说明订阅类型 说明 全量订阅 全量读取源表内容转化成 ProtoBuf 结构,当前支持火山引擎 Proto 、 Canal Proto 和 Canal JSON 订阅格式...
密切跟进数据近况。同时产品提供的订阅管理功能,可以协助用户管理自己的订阅记录,并支持对有管理权限的仪表盘下的订阅进行修改。 注意 邮件方式订阅前提:管理员需要先完成邮箱配置服务,并且新增用户需要添加邮箱信息 IM方式订阅前提:完成办公软件集成对接(飞书、钉钉、企业微信、自建IM) 2. 快速入门 2.1 新建订阅第一步:在仪表盘查看页面,点击页面右上角选项,点击「新建订阅」即可新建推送。第二步:选择订阅的范围、订阅标题、...
本文介绍数据库传输服务 DTS 支持的数据订阅格式。 订阅格式数据库传输服务 DTS 支持订阅格式如下表所示。 说明 Avro 格式订阅格式当前属于邀测阶段,如需使用请提交工单联系技术支持。 订阅格式 说明 火山引擎 Pr... Canal JSON下文介绍火山引擎数据库传输服务 DTS 如何实现 Canal JSON 的数据格式。 字段说明字段 类型 说明 示例 id Integer 操作的序列号。默认取值为 0。 0 database String 数据库的名称。 dts_test table St...
数据混音 openWithCustomSource 推送用于混音的 PCM 音频帧数据 pushExternalAudioFrame 获取时间戳。参看: 功能简述 Electron 获取时间戳, 单位毫秒 getTimestampMs 获取时间戳, 单位微秒 getTimestampUs 转推... 订阅所有用户和取消订阅所有用户。在上麦人数固定的场景中,可以快速实现麦位切换。 SubscribeAllStreams UnsubscribeAllStreams 范围语音 增加音量衰减模式的选择接口,可根据场景需要,选择音量根据距离线性衰...
数据库传输服务 DTS 支持变更数据订阅任务中的订阅对象。本文介绍如何通过数据库传输服务 DTS 控制台变更订阅对象。 前提条件已创建订阅任务且任务状态为执行中。关于创建订阅任务的操作步骤,请参见订阅方案概览。... 订阅到客户自由中间件时,可以直接单击目标任务右侧的配置;当您将数据订阅到内置中间件时,您需要单击任务进度右侧的 ... > 配置 在配置订阅对象页面,您可以修改订阅范围和订阅对象。 在页面右下角,单击启动任务即...