消息队列定时
社区干货
消息队列选型之 Kafka vs RabbitMQ
在面对众多的消息队列时,我们往往会陷入选择的困境:“消息队列那么多,该怎么选啊?Kafka 和 RabbitMQ 比较好用,用哪个更好呢?”想必大家也曾有过类似的疑问。对此本文将在接下来的内容中以 Kafka 和 RabbitMQ 为例分... **消息的超时**以电商业务中下单后 15 分钟内未支付则自动取消订单为例。有些朋友可能会觉得奇怪,在单一的服务系统可以通过定时任务就能解决这个问题吧,为什么会用到消息队列呢?但是在 SOA 或者微服务架...
一文了解字节跳动消息队列演进之路
本文相关产品:云原生消息引擎 BMQ https://www.volcengine.com/product/bmq随着“万物”互联网化的发展,许多公司内部服务间面对的数据流量也越来越大,在应对大量的数据通信需求时,多数公司都会选择将消息队列作为削峰填谷的关键工具。字节跳动的消息队列团队不仅要支撑公司内部消息队列系统的设计、开发和维护工作,还要解决诸多技术难题和痛点,例如如何稳定高效地处理海量数据、如何降低运维成本等。目前经过技术优化...
字节跳动新一代云原生消息队列实践
点击上方👆蓝字关注我们! 作者|字节跳动消息队列研发工程师-雷丽媛在字节跳动内部业务快速增长的推动下,经典消息队列 Kafka 的劣势开始逐渐暴露,在弹性、规模、成...
Redis 使用 List 实现消息队列有哪些利弊?|社区征文
分布式系统中必备的一个中间件就是消息队列,通过消息队列我们能对服务间进行异步解耦、流量消峰、实现最终一致性。目前市面上已经有 `RabbitMQ、RochetMQ、ActiveMQ、Kafka`等,有人会问:“Redis 适合做消息队列么?”在回答这个问题之前,我们先从本质思考:- 消息队列提供了什么特性?- Redis 如何实现消息队列?是否满足存取需求?今天,码哥结合消息队列的特点一步步带大家分析使用 Redis 的 List 作为消息队列的实现原理,并...
特惠活动
消息队列定时-优选内容
消息队列定时-相关内容
产品优势
消息类型丰富消息队列 RocketMQ版提供丰富的消息类型,支持顺序消息(全局顺序 / 分区顺序)、事务消息、定时消息、延时消息等多种消息类型,满足各类场景下的数据消费需求。 顺序消息:按照消息的发布顺序进行顺序消费(FIFO),支持全局顺序与分区顺序。 事务消息:实现系统间解耦的同时,保证数据的最终一致性。 定时/延时消息:消息可在指定的时间点或延迟时间进行投递。 消息免运维消息队列 RocketMQ版支持消息查询和回溯、消息重试与死...
死信消息管理
在消息队列 RocketMQ版控制台中,您可以在线查询死信消息,并在消息被过期清理前,及时导出未正常消费的信息,排查消息生产或消费问题,避免消息丢失。 注意事项一个死信队列对应一个 Group ID, 而不是对应单个消费者实例。一个死信队列包含了对应 Group ID 产生的所有死信消息,不论该消息属于哪个 Topic。 创建 Group 时,消息队列 RocketMQ版会自动为其创建一个对应的死信队列。 死信消息将会根据存储时长被系统定时删除,在查看或导出...
队列定时扩缩容
1. 概述 弹性独占队列可根据用户需求,在用户配置的弹性队列规模的最小值和最大值间调整资源规模,更高效地利用资源,节约成本开支。数据处理资源单元(Spark)可随负载动态伸展,无需用户配置,而针对交互式查询资源单元(Presto),需要配置定时任务,根据用户需求定时在最小值(MIN)和最大值(MAX)之间调整资源。下面是对弹性独占队列交互式查询资源单元(Presto)定时扩缩容的介绍。 2. 创建独占队列 进入队列管理,点击 创建独占队列,确认开...
限制说明
所有消息队列 RocketMQ版实例的存储容量总和。您也可以通过配额中心申请提高每个地域下的实例存储容量总和(StorageSum),最高可调整至 30TiB。 TPS总和 600,000 单个地域(Region)内,所有消息队列 RocketMQ版实例的 TPS 总和。您也可以通过配额中心申请提高每个地域下 TPS 总和(TpsSum),最高可调整至1,200,000。 消息大小 普通和顺序消息:4MB 事务和定时/延时消息:64KB 服务端可接收的各种类型消息大小。超出限制的消息无法推...
相关概念
队列(Queue)在消息队列 RocketMQ版中,消息存储在每个 Topic 的一个或多个队列中。 位点(Offset)最大位点(MaxOffset):一个分区中统计的当前消息的总条数。 起始位点(MinOffset):分区的起始位置。 消费位点(ConsumerOffset):记录按顺序依次消费分区内的消息时,已被消费的消息条数。 定时消息生产者将消息发送到消息队列 RocketMQ版服务端后,不能立刻被消费者消费,仅能到达指定期望被消费时间才会被投递到 Consumer 进行消费。 延时...
消息队列选型之 Kafka vs RabbitMQ
在面对众多的消息队列时,我们往往会陷入选择的困境:“消息队列那么多,该怎么选啊?Kafka 和 RabbitMQ 比较好用,用哪个更好呢?”想必大家也曾有过类似的疑问。对此本文将在接下来的内容中以 Kafka 和 RabbitMQ 为例分... **消息的超时**以电商业务中下单后 15 分钟内未支付则自动取消订单为例。有些朋友可能会觉得奇怪,在单一的服务系统可以通过定时任务就能解决这个问题吧,为什么会用到消息队列呢?但是在 SOA 或者微服务架...
一文了解字节跳动消息队列演进之路
本文相关产品:云原生消息引擎 BMQ https://www.volcengine.com/product/bmq随着“万物”互联网化的发展,许多公司内部服务间面对的数据流量也越来越大,在应对大量的数据通信需求时,多数公司都会选择将消息队列作为削峰填谷的关键工具。字节跳动的消息队列团队不仅要支撑公司内部消息队列系统的设计、开发和维护工作,还要解决诸多技术难题和痛点,例如如何稳定高效地处理海量数据、如何降低运维成本等。目前经过技术优化...
RocketMQ 生产者使用建议
本文档介绍 RocketMQ 生产者的使用建议,推荐在使用消息队列 RocketMQ版进行消息生产与消费之前,阅读以下使用建议,提高接入效率和业务稳定性。 消息 Tag建议组合使用 Topic 和 tags,以减少 Topic 的使用。 Tag 可以... 以上策略在一定程度上可保证消息成功发送。如果业务对消息可靠性要求比较高,建议应用增加相应的重试逻辑。例如调用 send 同步方法发送失败时,则尝试将消息存储到数据库,然后由后台线程定时重试,确保消息一定到达 ...
消息队列 Kafka版-火山引擎
消息队列 Kafka版是一款基于 Apache Kafka 构建的分布式消息中间件服务。具备高吞吐、高可扩展性等特性,提供流式数据的发布/订阅和多副本存储机制,广泛应用于日志压缩收集、流式数据处理、消息解耦、流量削峰去谷等应用场景
