Spring 5环境下手动设置Spring Kafka消费者日志级别

我之前也碰到过类似的Kafka日志泛滥的问题，结合你的场景，给你几个排查和解决的思路：

1. 先确认项目实际使用的日志框架 #

有时候项目依赖会混入多种日志实现（比如logback和log4j共存），或者WebSphere自带的日志体系会覆盖你的应用配置：

• 用mvn dependency:tree（Maven项目）或gradle dependencies（Gradle项目）查看依赖树，检查是否有log4j、log4j-core这类依赖被引入，导致logback没有生效。如果有，可以通过exclusions排除掉冲突的日志依赖。
• WebSphere默认使用IBM的日志实现，可能会优先加载服务器端的配置，而非应用内的logback.xml。

2. 验证logback.xml的加载状态 #

先确认你的配置文件是否被正确加载：

• 在启动应用时添加JVM参数-Dlogback.debug=true，启动后会输出logback加载配置的详细日志，你可以看到它是否找到了你的logback.xml，有没有加载错误（比如XML语法问题）。
• 确保logback.xml在src/main/resources目录下，打包后存在于classpath的根目录中（如果是多模块项目，要确认配置文件被正确打包到主应用模块）。

3. 修正logback.xml的配置错误 #

你的配置里root标签的写法有问题，而且部分logger缺少additivity="false"属性（可能导致日志重复输出），调整后的配置可以参考：

<?xml version="1.0" encoding="UTF-8"?>
<configuration name="default">
    <appender name="STDOUT" class="ch.qos.logback.core.ConsoleAppender">
        <encoder>
            <pattern>%d{HH:mm:ss.SSS} [%thread] %-5level %logger{36} - %msg%n</pattern>
        </encoder>
    </appender>

    <!-- 单独设置Kafka相关包的日志级别，关闭additivity避免重复输出 -->
    <logger name="org.apache.kafka" level="error" additivity="false"/>
    <logger name="org.apache.kafka.common.metrics" level="error" additivity="false"/>
    <logger name="org.apache.kafka.clients" level="error" additivity="false"/>
    <logger name="org.apache.kafka.clients.consumer.internals" level="error" additivity="false"/>
    <logger name="org.apache.kafka.clients.consumer.internals.Fetcher" level="error" additivity="false"/>

    <!-- 根日志配置，这里可以根据项目需求调整级别，比如info -->
    <root level="info">
        <appender-ref ref="STDOUT" />
    </root>
</configuration>

4. WebSphere环境的特殊处理 #

如果是部署在WebSphere上，服务器的日志配置可能会覆盖应用的设置：

• 登录WebSphere控制台，找到应用程序 > 你的应用 > 日志记录和跟踪，手动添加org.apache.kafka及其子包的日志级别为ERROR。
• 或者修改WebSphere的server.xml，添加日志配置：

  <logging>
      <logger name="org.apache.kafka" level="ERROR"/>
      <logger name="org.apache.kafka.clients" level="ERROR"/>
  </logging>
  

• 另外，检查WebSphere的类加载顺序，确保应用的logback jar包优先级高于服务器自带的日志类（可以在应用的类加载策略里设置应用程序优先）。

5. 尝试用Spring Boot配置简化设置（如果是Spring Boot项目） #

如果你的项目是Spring Boot，直接在application.properties或application.yml里配置日志级别可能更高效：

# 关闭Kafka相关的冗余日志
logging.level.org.apache.kafka=ERROR
logging.level.org.apache.kafka.clients=ERROR
logging.level.org.apache.kafka.common.metrics=ERROR

Spring Boot会自动整合日志配置，这种方式通常比手动写logback.xml更不容易出问题。

如果以上方法都没解决问题，可以提供项目的依赖树、WebSphere版本，以及添加-Dlogback.debug=true后的启动日志，这样能更精准地定位问题。

内容的提问来源于stack exchange，提问作者Ganesh