Log4j配置从基于大小触发改为每5分钟时间触发的可行性咨询

你的修改方向是对的，但存在几处遗漏和需要调整的地方，以下是修正后的完整配置及说明：

修正后的完整配置 #

# 根日志配置，指定日志级别和关联的appender
log4j.rootLogger=INFO, rolling

# RollingFile Appender核心配置
log4j.appender.rolling.type = RollingFile
log4j.appender.rolling.name = RollingFile
# 实时写入的日志文件路径，需指定YARN容器日志目录
log4j.appender.rolling.fileName = ${spark.yarn.app.container.log.dir}/spark.log
# 滚动归档的日志文件名模板，按5分钟分割并压缩
log4j.appender.rolling.filePattern = ${spark.yarn.app.container.log.dir}/spark-%d{yyyy-MM-dd-HH-mm}-%i.log.gz
# 日志编码，保留原配置的UTF-8
log4j.appender.rolling.encoding = UTF-8

# 日志格式配置
log4j.appender.rolling.layout.type = PatternLayout
log4j.appender.rolling.layout.pattern = %d %p %t %c - %m%n

# 滚动策略配置
log4j.appender.rolling.policies.type = Policies
# 基于时间的触发策略，每5分钟滚动一次
log4j.appender.rolling.policies.time.type = TimeBasedTriggeringPolicy
log4j.appender.rolling.policies.time.interval = 5
# 开启时间调制，让滚动时间对齐到5分钟的整数倍（比如00:00、00:05）
log4j.appender.rolling.policies.time.modulate = true

# 备份文件数量限制，对应原配置的MaxBackupIndex
log4j.appender.rolling.strategy.type = DefaultRolloverStrategy
log4j.appender.rolling.strategy.max = 100

关键修正点说明 #

• 根日志关联：新增log4j.rootLogger=INFO, rolling，将根日志级别和新的RollingFile appender关联，否则配置的appender不会生效。
• 日志文件路径：fileName需要加上${spark.yarn.app.container.log.dir}/，确保实时日志生成在YARN容器的指定日志目录下，而非当前工作目录。
• 编码配置：补充log4j.appender.rolling.encoding = UTF-8，保留原配置的编码格式，避免乱码问题。
• 备份数量限制：添加DefaultRolloverStrategy并设置max=100，对应原配置的MaxBackupIndex=100，防止备份日志过多占用磁盘空间。

配置验证提示 #

• 确认环境使用Log4j2而非Log4j 1.x，避免API不兼容问题。
• 测试时可缩短interval值（比如1分钟），快速验证滚动策略是否生效。

内容的提问来源于stack exchange，提问作者sojim2