rocketmq怎么设置
社区干货
如何解决使用RocketMQ的消息轨迹信息无法查看问题
# 问题描述RocketMQ 正常生产和消费消息,但是消费轨迹无法查看的问题该如何排查?# 问题分析此类问题原因一般如下:1. 客户端 SDK 使用的版本不对, 需要使用 SDK 版本为 4.8.0, 4.7 和 4.9 的版本均会导致前端页面报错如下图:2. 生产端和消费端没有开启消费轨迹功能,enableMsgTrace 需要设置为 true,* ...
RocketMQ 存储机制浅析
ActiveMQ(默认采用的 KahaDB 做消息存储)可选用 JDBC 做消息持久化,通过简单的 xml 配置信息即可实现 JDBC 消息存储。使用文件系统做持久化的情况下,可获得更高效的 I/O 读写。* Broker Store 目录结构``` storePathRootDir=/cache1/rocketmq/broker/data ├── abort // 该文件在 Broker 启动后会自动创建,正常关闭 Broker,该文件会自动消失。若在没有启动 Broker 的情况下,发现这个文件是存...
使用golang调用RocketMQ SDK
# 前言本文档介绍使用go语言调用火山引擎RocketMQ SDK。# 关于实验- 预计部署时间:30分钟- 级别:初级- 相关产品:中间件-RocketMQ- 受众: 通用# 实验说明## 第一步、创建RocketMQ实例在控制台创建RocketMQ... //此处填写控制台RocketMQ实例概览中的TCP内网接入点,目前不支持公网接入,示例http://MQ_INST_50392uo8m9em_xxxxx.rocketmq.ivolces.com:9876 producer.WithRetry(2), producer.WithCredentials(primitive.Cre...
干货|字节跳动流式数据集成基于Flink Checkpoint两阶段提交的实践和优化(2)
> > > 字节跳动开发套件数据集成团队(DTS ,Data Transmission Service)在字节跳动内基于 Flink 实现了流批一体的数据集成服务。其中一个典型场景是 Kafka/ByteMQ/RocketMQ -> HDFS/Hive 。Kafka/ByteMQ/RocketMQ... 所以可以根据正式目录下的文件名知道其是哪个 task 在哪个 Checkpoint 期间创建的)。故初步确定的原因是某些文件被误删造成数据丢失。Task 2/3/6/7 在文件删除后由于没有文件的写入和关闭操作,task 正常运行;而 ta...
特惠活动
rocketmq怎么设置-优选内容
rocketmq怎么设置-相关内容
配置 RocketMQ 数据源
RocketMQ 数据源为您提供实时读取 RocketMQ 的单向通道能力,实现从 RocketMQ 读取数据,实时同步至不同目标数据源中,进行数据传输。本文为您介绍 DataSail 的 RocketMQ 数据同步的能力支持情况。 1 支持的 RocketMQ... 您需将独享集成资源组和 RocketMQ 数据库节点网络打通,详见网络连通解决方案。 若通过 VPC 网络访问,则独享集成资源组所在 VPC 中的 IPv4 CIDR 地址,需加入到 BMQ 访问白名单中:确认集成资源组所在的 VPC: 查看 VP...
设置 Topic 队列数
多队列可以提高单个 Topic 的生产消费性能,消息队列 RocketMQ版支持设置每个 Topic 的队列数量,在保证分区有序的情况下提高生产和消费性能。 背景信息在 RocketMQ 中,队列数量越大,消费的并发度越大。您可以通过增... 设置队列数量,只支持增加,不支持减少。 注意事项实例中所有 Topic 的总队列数量与当前实例规格有关。每个实例的队列数量限制请参考产品规格。 成功创建 Topic 之后,队列数量只能调大,不能调小,请合理规划队列数量...
CreateAccessKey
调用 CreateAccessKey 创建 RocketMQ 密钥。 注意事项请求频率:该接口请求频率限制为 10 次/秒;单用户请求频率限制为 2 次/秒。 使用说明火山引擎消息队列 RocketMQ版通过密钥管理 Topic 权限,密钥由 AccessKey ID 与对应的 AccessKey Secret 组成,用于访问实例、生产消费时的鉴权与身份认证。此接口用于创建密钥。 说明 所有 RocketMQ 实例默认开启 ACL 访问控制,无需手动开启或关闭。 创建密钥后,密钥默认为已启用状态。若不再...
RocketMQ 客户端使用建议
本文档介绍 RocketMQ 客户端的使用建议,推荐在使用消息队列 RocketMQ版进行消息生产与消费之前,阅读以下使用建议,提高接入效率和业务稳定性。 日志配置RocketMQ 的日志一般是单独配置的,业务日志独立管理。日志默认保存在 ${user.home}/logs/rocketmqlogs 目录的 10 个文件中,每个文件大小为 1G,日志文件名为 rocketmq_client.log。有些业务的用户目录的磁盘空间不大,很容易造成磁盘空间不足。您可以通过设置系统变量的方式配置 ...
CreateInstance
调用 CreateInstance 接口创建 RocketMQ 实例。 注意事项请求频率:该接口请求频率限制为 100 次/秒;单用户请求频率限制为 20 次/秒。 使用说明实例是消息队列 RocketMQ版的基本服务单位,用以管理和存储 Topic、Group 资源。 说明 通过 API 创建接口时暂不支持同时开启公网访问功能,如果需要开启实例的公网访问,建议在创建实例完成后,实例状态为运行中(Running)时,调用 EnablePublicNetwork 开启实例的公网访问。 默认情况下,您可...
CreateInstance
调用 CreateInstance 接口创建 RocketMQ 实例。 注意事项请求频率:该接口请求频率限制为 100 次/秒;单用户请求频率限制为 20 次/秒。 使用说明实例是消息队列 RocketMQ版的基本服务单位,用以管理和存储 Topic、Gr... 如果需要通过私有网络访问消息队列 RocketMQ版实例,请先在相同地域创建 ECS 云服务器、私有网络和子网。创建实例后,不可更改实例所在的私有网络和子网。 如果需要通过公网访问消息队列 RocketMQ版实例,请先申请同...
设置 Topic 密钥权限
消息队列 RocketMQ版的 ACL 权限管理功能支持不同逻辑维度的策略权限,默认对实例中所有的 Topic 生效;也可以从 Topic 角度设置 Topic 的自定义密钥权限,仅对当前 Topic 生效。本文介绍为 Topic 设置自定义密钥权限... 设置自定义权限为发布,创建 Topic 成功后,密钥 A 对于此 Topic 的权限为发布。 支持批量设置权限。选中批量设置权限,然后选择多个密钥,再设置对于此 Topic 需要的自定义权限。 说明 调整密钥权限时不会同步修改密钥...
创建密钥
消息队列 RocketMQ版支持开源 ACL 权限控制,通过密钥提供 Topic 资源级别的访问控制与权限管理,不同的密钥具备不同的 Topic 访问权限。 背景信息权限控制(ACL)主要为 RocketMQ 实例提供 Topic 资源级别的用户访问控... 设置该密钥对于指定 Topic 的权限策略。详细说明请参考配置密钥权限。火山引擎消息队列 RocketMQ版与开源 RocketMQ 的 ACL 权限逻辑相同,同样将 ACL 权限类型定义为以下四种: 权限 说明 拒绝(DENY) 不具备发布或...
ModifyAccessKeyAuthority
调用 ModifyAccessKeyAuthority 接口设置 RocketMQ 密钥的自定义权限。 注意事项请求频率:该接口请求频率限制为 20 次/秒;单用户请求频率限制为 4 次/秒。 使用说明如果您需要更为精细的权限粒度管控,推荐通过此接口为密钥添加自定义权限,设置该密钥对于指定 Topic 的权限策略。为密钥添加自定义权限之后,密钥的默认权限仅对自定义权限之外的 Topic 生效。例如某密钥的默认权限为发布,对于指定 Topic 的自定义权限为发布、订阅,则...
