消息队列的性能报告
社区干货
Redis 使用 List 实现消息队列有哪些利弊?|社区征文
分布式系统中必备的一个中间件就是消息队列,通过消息队列我们能对服务间进行异步解耦、流量消峰、实现最终一致性。目前市面上已经有 `RabbitMQ、RochetMQ、ActiveMQ、Kafka`等,有人会问:“Redis 适合做消息队列么... [List队列](https://magebyte.oss-cn-shenzhen.aliyuncs.com/clean-codeList队列.png)## 实时消费问题> 65 哥:这么简单就实现了么?别高兴的太早,`LPUSH、RPOP` 存在一个性能风险,生产者向队列插入数据的时候...
消息队列选型之 Kafka vs RabbitMQ
在面对众多的消息队列时,我们往往会陷入选择的困境:“消息队列那么多,该怎么选啊?Kafka 和 RabbitMQ 比较好用,用哪个更好呢?”想必大家也曾有过类似的疑问。对此本文将在接下来的内容中以 Kafka 和 RabbitMQ 为例分... 消息跟踪;消息过滤;消息顺序性;安全机制;消息幂等性;事务性消息等。2. **性能:** 时延;吞吐率等。3. **运维:** 高可用;异地容灾;集群扩容;使用成本等。4. **业务需求:** 要明确你的业务需要什么样的消息队列功能...
一文了解字节跳动消息队列演进之路
多数公司都会选择将消息队列作为削峰填谷的关键工具。字节跳动的消息队列团队不仅要支撑公司内部消息队列系统的设计、开发和维护工作,还要解决诸多技术难题和痛点,例如如何稳定高效地处理海量数据、如何降低运... 高并发的数据请求时性能不尽如人意。因为 Kafka 对 Page Cache 的使用是不可控的,又由于缓存机制的运行原理,我们无法规定哪些流量可以进入缓存,哪些流量不允许进入缓存。例如某个高负载的业务在高峰期决定升级...
字节跳动新一代云原生消息队列实践
作者|字节跳动消息队列研发工程师-雷丽媛上文我们了解了在字节跳动内部业务快速增长的推动下,经典消息队列 Kafka 的劣势开始逐渐暴露,在弹性、规模、成本及运维方面都无法满足业务需求。因此字节消息队列团队... 高吞吐的 IO 会影响磁盘的性能,在 Kafka 存储模型中与 Partition 1 Leader 同在一块磁盘的 Partition 3 Follower 就会受到影响,使得 Partition 3 处于 Under Replica 的状态。这个状态会持续到用户将 Partition 全...
特惠活动
消息队列的性能报告-优选内容
消息队列的性能报告-相关内容
字节跳动新一代云原生消息队列实践
字节跳动消息队列研发工程师-雷丽媛在字节跳动内部业务快速增长的推动下,经典消息队列 Kafka 的劣势开始逐渐暴露,在弹性、规模、成本及运维方面都无法满足业务需求。因此字节消息队列团队研发了计算存储分离的云... 高吞吐的 IO 会影响磁盘的性能,在 Kafka 存储模型中与 Partition 1 Leader 同在一块磁盘的 Partition 3 Follower 就会受到影响,使得 Partition 3 处于 Under Replica 的状态。这个状态会持续到用户将 Partition 全...
什么是消息队列 Kafka版
消息队列 Kafka版是一款基于 Apache Kafka 构建的分布式消息中间件服务,具备高吞吐、高可扩展性等特性,提供流式数据的发布/订阅和多副本存储机制,广泛应用于日志压缩收集、流式数据处理、消息解耦、流量削峰去谷等... 地发送到消息队列 Kafka版的集群,日志分析系统可随时使用 Hadoop 等其他系统化的存储和分析系统拉取日志进行统计分析。消息队列 Kafka版的低延迟特性,保证日志采集时业务无感知,与开源 Kafka 相比,在同样性能条件下...
产品优势
消息类型丰富消息队列 RocketMQ版提供丰富的消息类型,支持顺序消息(全局顺序 / 分区顺序)、事务消息、定时消息、延时消息等多种消息类型,满足各类场景下的数据消费需求。 顺序消息:按照消息的发布顺序进行顺序消费... 消息重试与死信管理:支持对未成功消费消息自动投递重新消费,达到最大重试次数后,将消息投递至该消费者的死信队列,辅助排查生产或消费问题。 性能稳定消息队列 RocketMQ版采用分布式架构存储,支持横向扩容来增强集...
产品优势
开源完全兼容消息队列 RabbitMQ版支持 AMQP 标准协议,完全兼容开源 RabbitMQ 社区和 Queue、Exchange、Vhost 组件,具备原生 RabbitMQ 的所有消息处理特性,业务代码无需改造,轻松实现快速上云。 插件生态丰富消息队列 RabbitMQ版支持多种类型插件,可通过插件形式开启消息延迟功能、兼容 TCP 和 WebSocket 方式的 MQTT 协议。 性能稳定消息队列 RabbitMQ版实现生产者和消费者隔离,可作为缓存器暂时缓存生产者在大量并发时产生的海量...
新功能发布记录
本文介绍了消息队列 RocketMQ版各特性版本的功能发布动态,新特性将在各个地域(Region)陆续发布,欢迎体验。 2024年3月功能名称 功能描述 发布地域 相关文档 云监控指标 增加实例维度的监控指标。 全部地域 查... 支持自动扩容 Topic 队列数,后台服务会自动为每个 Topic 按比例增加队列数量,以便提升 Topic 的整体消费性能。 2023-05-12 全部地域 升级实例规格 自定义接入点域名前缀 支持自定义修改实例的公网和私网接入点...
限制说明
消息队列 RocketMQ版对一些指标和性能进行了限制,请您在使用过程中注意不要超过相应的限制值,避免出现异常。 限制类型 配额 说明 实例数量 5 个 单个地域(Region)内的消息队列 RocketMQ版实例数。您也可以通过配额中心申请提高每个地域下的最大实例数量(InstanceNum),最高可调整至 10 个。 存储容量总和 10TiB 单个地域(Region)内,所有消息队列 RocketMQ版实例的存储容量总和。您也可以通过配额中心申请提高每个地域下的...
消息顺序性与可靠性
使用消息队列 Kafka版收发消息时,往往需要关注消息的顺序性与可靠性,本文档介绍实现消息顺序性、保证消息可靠性的推荐方式。 消息顺序性Kafka 的消息在单个分区中可以保证数据的先入先出,即写入同一分区的消息,若消... 服务端收到消息的顺序与生产者客户端发送的消息顺序严格一致。从单个 Topic 的角度来看,1 分区的 Topic 在消息的写入和读取中都无法发挥集群完整集群性能,只有多个 1 分区的 Topic 同时使用时,才有可能最大限度的发...
计费项
本文介绍消息队列 RocketMQ版提供的计费项。 计费项消息队列 RocketMQ版的计费项包括计算规格费用和存储规格费用。 计费项 说明 计算规格 按支持的业务流量峰值提供不同性能的计算规格。计费类型为包年包月或按量计费。 存储规格 消息队列 RocketMQ版实例存储空间的费用。计费类型为包年包月或按量计费。 说明 关于计费类型的信息,详情请参见计费类型。 实例价格消息队列 RocketMQ版实例支持多种实例规格配置,按计算规格...
实例管理
消息队列 Kafka版提供以下实例管理相关的常见问题供您参考。 FAQ 列表如何选择计算规格和存储规格 如何选择云盘 如何删除或退订实例 是否支持压缩消息? 是否支持多可用区部署 Kafka 实例? 单 AZ 实例如何切换为多 ... ESSD_FlexPL 拥有更高的 IOPS 性能,在消息高吞吐以及大量堆积等场景下性能更加稳定。关于不同存储类型的性能说明,请参考云盘规格。 对于峰值流量超过 100MB/s 的规格,应使用 ESSD_FlexPL。 创建实例后不支持修改存...
