Spring Kafka配置无限重试却终止，消息未消费问题排查

1. 偏移量是否已移动？ #

没有。在AckMode=RECORD的默认配置下，只有当消息被成功处理时才会提交偏移量。而MessageConversionException属于消息格式错误，DefaultErrorHandler默认将其判定为不可重试异常，不会执行重试，直接抛出异常。此时因为处理失败，偏移量不会被提交，消费者会一直停留在这条坏消息的偏移量位置，重启后依然会尝试消费这条消息，导致后续正常消息无法被处理。

2. 这类错误的引发行为 #

• 重试逻辑不生效：MessageConversionException是无法通过重试修复的致命错误（消息本身格式不对，再重试也解析不了），DefaultErrorHandler默认会跳过你配置的指数退避重试流程，直接进入最终错误处理。
• 消费阻塞：因为偏移量未提交，消费者会反复尝试消费这条坏消息，抛出异常，陷入死循环，后续的正常消息完全无法被消费。
• 无手动干预则持续循环：如果没配置死信队列（DLQ），这个循环会一直持续，直到手动删除坏消息或强制提交偏移量跳过它。

3. 容器线程会被销毁吗？ #

不会。Spring Kafka的消费者容器线程是守护线程，遇到未处理的异常时，默认会按照recoveryInterval（默认5秒）自动重启消费者线程，而不是销毁线程。但因为每次重启后都会回到未提交的偏移量位置消费坏消息，所以看起来像是线程“卡住”，实际是在重启-重试-失败的循环中。

无限重试配置未生效的原因 #

你配置的指数退避仅对可重试异常生效，而MessageConversionException默认被DefaultErrorHandler排除在重试范围外。如果硬要让这类异常参与重试（无实际意义，不推荐），可以手动添加并设置无限重试：

@Bean
fun commonErrorHandler() = DefaultErrorHandler(
    ExponentialBackOff(2000, 1.1).apply {
        maxInterval = 60 * 1000 // 1分钟
    }
).apply {
    addRetryableExceptions(MessageConversionException::class.java)
    maxAttempts = Long.MAX_VALUE // 设置无限重试
}

正确处理方案 #

针对这类无法修复的消息错误，建议配置死信队列，将坏消息转发到DLQ后，继续消费后续正常消息：

@Bean
fun commonErrorHandler(kafkaTemplate: KafkaTemplate<Any, Any>) = DefaultErrorHandler(
    DeadLetterPublishingRecoverer(kafkaTemplate), // 转发到死信队列
    ExponentialBackOff(2000, 1.1).apply {
        maxInterval = 60 * 1000
    }
).apply {
    maxAttempts = 3 // 重试3次后进入死信队列
}

内容的提问来源于stack exchange，提问作者Kirill Kurdyukov