Spring Cloud Stream Kafka每分钟打印Found no committed offset日志问题
问题原因
该日志是消费者组从未提交过偏移量导致的,和你配置的自动提交参数没有直接关联,核心原因有两点:
- 消费者启动后,目标topic
Kafka-stream从未产生新消息、也没有产生过任何消费行为。不管是Kafka原生的自动提交逻辑,还是Spring Cloud Stream默认的偏移量管理逻辑,都只会在实际消费到消息后才会触发偏移量提交。没有消费行为的情况下,偏移量始终不会被写入Kafka的__consumer_offsets主题,协调器每次巡检自然会打印找不到已提交偏移量的INFO日志。 - Spring Cloud Stream Kafka Binder默认会接管偏移量管理,你配置的Kafka原生
enable.auto.commit=true并未实际生效。默认情况下Binder会强制将原生的enable.auto.commit设为false,自行在消息处理完成后提交偏移量,仅配置原生参数不会生效。
解决方案
你可以根据自己的需求选择对应方案:
- 仅屏蔽日志,不修改业务逻辑
直接调整对应日志包的级别即可,在配置文件中添加:
logging.level.org.apache.kafka.clients.consumer.internals.ConsumerCoordinator=WARN
- 要让Kafka原生自动提交配置生效
需要额外添加两个Binder配置覆盖默认行为:
# 开启Binder层面的自动提交开关 spring.cloud.stream.kafka.binder.enable-auto-commit=true # 关闭Spring侧的ack逻辑,完全交给Kafka管理偏移量 spring.cloud.stream.kafka.binder.ack-mode=none
配置完成后只要消费者启动时长超过你设置的auto.commit.interval.ms,哪怕没有消费消息也会自动提交一次初始偏移量,日志就会消失。
- 继续使用Spring默认的偏移量管理
只要往Kafka-stream主题发送一条消息触发一次消费,偏移量提交后日志就不会再打印。
内容的提问来源于stack exchange,提问作者Swapnil
相关产品推荐
相关产品推荐

