消息队列即 Message+Queue,消息可以说是一个数据传输单位,它包含了创建时间、通道/主题信息、输入参数等全部数据;队列(Queue)是一种 FIFO(先进先出)的数据结构,编程语言一般都内置(内存中的)队列实现,可以作为进程... 其次通过使用消息队列,发送方和接收方可以解耦,彼此之间不直接通信。发送方只需将消息发送到队列中,而不需要关心消息的具体处理方式和接收方的可用性。![picture.image](https://p6-volc-community-sign.byteim...
分布式系统中必备的一个中间件就是消息队列,通过消息队列我们能对服务间进行异步解耦、流量消峰、实现最终一致性。目前市面上已经有 `RabbitMQ、RochetMQ、ActiveMQ、Kafka`等,有人会问:“Redis 适合做消息队列么... 同样的消息重复多次的话可能会造成一业务逻辑多次执行,需要确保如何避免重复消费问题。**可靠性**一次保证消息的传递。如果发送消息时接收者不可用,消息队列会保留消息,直到成功地传递它。当消费者重启后,可...
多数公司都会选择将消息队列作为削峰填谷的关键工具。字节跳动的消息队列团队不仅要支撑公司内部消息队列系统的设计、开发和维护工作,还要解决诸多技术难题和痛点,例如如何稳定高效地处理海量数据、如何降低运... 包括存储空间、写入吞吐量以及消费吞吐量等。此外,热点问题也是一个值得注意的问题,因为每个 Partition 的负载可能并不一致,有一些 IO 开销大,有一些存储空间占用较多,这就导致了调度的复杂度很高。![picture...
作者|字节跳动消息队列研发工程师-雷丽媛上文我们了解了在字节跳动内部业务快速增长的推动下,经典消息队列 Kafka 的劣势开始逐渐暴露,在弹性、规模、成本及运维方面都无法满足业务需求。因此字节消息队列团队... 因此无需管理数据副本,相较于 Kafka 省去了 ISR 相关的管理。Controller 可以更加专注地关注集群整体流量均衡及故障检测。在 BMQ 中用户所有请求都会由 Proxy 接入,因此 BMQ 的 Metadata 中的 ‘Broker’ 信息...
消息队列 RabbitMQ版支持配置云监控告警规则,帮助您实时关注实例的运行状态。本文档介绍典型场景下的告警规则配置示例,建议参考这些推荐的告警策略,配置监控指标的告警规则。 实例维度 实例磁盘使用率超过 85%告警... 实例内存使用率超过 85%告警规则配置告警规则的核心配置如下。创建告警规则的操作步骤请参考设置告警规则。 配置 取值 维度 实例 触发条件 监控指标:内存使用率 持续周期:持续3个周期 取值方式:最大值 比较...
应用接入消息队列 RabbitMQ版之前,需要在控制台创建 RabbitMQ 实例。消息队列 RabbitMQ 版提供多种实例规格,对应不同的计算能力和存储空间,您可以根据实际业务需求选择不同的实例规格。本文档介绍创建 RabbitMQ 实... 并使用多副本类型的队列,即镜像队列或 Quorum 队列。 部署方式 实例在当前地域的部署方式。支持设置为: 单可用区部署:在当前地域下的指定可用区创建 RabbitMQ 实例。单可用区部署可降低网络延时,提高访问速度。...
字节跳动消息队列研发工程师-雷丽媛在字节跳动内部业务快速增长的推动下,经典消息队列 Kafka 的劣势开始逐渐暴露,在弹性、规模、成本及运维方面都无法满足业务需求。因此字节消息队列团队研发了计算存储分离的云... 因此无需管理数据副本,相较于 Kafka 省去了 ISR 相关的管理。Controller 可以更加专注地关注集群整体流量均衡及故障检测。在 BMQ 中用户所有请求都会由 Proxy 接入,因此 BMQ 的 Metadata 中的 ‘Broker’ 信息...
应用接入消息队列 Kafka版之前,需要在控制台创建 Kafka 实例。消息队列 Kafka版提供多种实例规格,对应不同的计算能力和存储空间,您可以根据实际业务需求选择不同的实例规格。本文介绍创建 Kafka 实例的操作步骤。 ... 支持设置为: 单可用区部署:在当前地域下的指定可用区创建 Kafka 实例。单可用区部署可降低网络延时,提高访问速度。此时需要为实例指定 1 个可用区。 多可用区部署:在当前地域下的多个可用区创建 Kafka 实例。跨可用...
应用接入消息队列 RabbitMQ版之前,需要在控制台创建 RabbitMQ 实例。消息队列 RabbitMQ 版提供多种实例规格,对应不同的计算能力和存储空间,您可以根据实际业务需求选择不同的实例规格。本文档介绍创建 RabbitMQ 实... 并使用多副本类型的队列,即镜像队列或 Quorum 队列。 部署方式 实例在当前地域的部署方式。支持设置为: 单可用区部署:在当前地域下的指定可用区创建 RabbitMQ 实例。单可用区部署可降低网络延时,提高访问速度。...
本文介绍了消息队列 RocketMQ版各特性版本的功能发布动态,新特性将在各个地域(Region)陆续发布,欢迎体验。 2024年3月功能名称 功能描述 发布地域 相关文档 云监控指标 增加实例维度的监控指标。 全部地域 查... 2023-1-4 全部地域 查看监控数据 2023年12月功能名称 功能描述 发布时间 发布地域 相关文档 白名单管理 正式开放白名单相关的 OpenAPI。 2023-12-14 全部地域 白名单管理 2023年11月功能名称 功...
调用CreateInstance创建消息队列 Kafka版实例。 使用说明实例是消息队列 Kafka版服务的虚拟机资源,用于管理和存储 Topic、Group 等资源。 注意事项如果是首次创建 Kafka 实例,您需要先完成跨服务访问授权,建议通过... 请求参数参数 参数类型 是否必选 示例值 说明 ZoneId String 是 cn-beijing-a 实例所在的可用区ID。消息队列 Kafka版实例支持跨AZ部署,查看指定可用区下提供哪些计算规格时,可以指定多个可用区。多个可...
应用接入消息队列 RocketMQ版之前,需要在控制台创建 RocketMQ 实例。消息队列 RocketMQ版提供多种实例规格,对应不同的计算能力和存储空间,您可以根据实际业务需求选择不同的实例规格。本文档介绍创建 RocketMQ 实例... 支持设置为: 单可用区部署:在当前地域下的指定可用区创建 RocketMQ 实例。单可用区部署可降低网络延时,提高访问速度。此时需要为实例指定 1 个可用区。 多可用区部署:在当前地域下的多个可用区创建 RocketMQ 实例。...
在这种场景下需要一种消息追踪的机制,用于定位消息失踪的具体原因,便于异常场景下的功能调试与问题排查。消息队列 RabbitMQ版通过 rabbitmq_tracing 插件提供消息追踪功能,开启插件并添加 Trace 后,后台会自动创建一个 Exchange,每个队列会自动绑定该 Exchange,绑定后发送到这些队列的消息都会记录到 Trace 日志。查看 Trace 文件即可查看指定消息的跟踪信息。 说明 消息追踪功能会消耗一定的性能和存储空间,消耗的存储空间大小与...