如何使用sed删除日志文件中30天前的旧记录？

原命令失效原因 #

你之前用的sed命令存在两个核心问题：

1. 正则匹配错误：^[0-9]/[0-9]/[0-9]只能匹配单个数字的月/日/年（如1/1/2023），但你的日志日期是两位数字格式（如12/31/2022），完全无法匹配目标行。
2. 逻辑方向错误：该命令是替换日期字符串，而非删除过期行，根本不符合清理需求。

推荐方案：用awk处理（高效且直观） #

awk支持日期转时间戳的操作，能精准比较日志时间与阈值时间，是处理这类需求的最优选择：

# 计算30天前的时间戳（秒级，作为过滤阈值）
threshold=$(date -d "-30 days" +%s)

# 过滤并保留30天内的日志行，通过临时文件中转后覆盖原文件
awk -v thresh="$threshold" '{
    # 将日志中的MM/DD/YYYY格式转为mktime可识别的YYYY MM DD格式
    split($1, date_parts, "/");
    datetime_str = date_parts[3] " " date_parts[1] " " date_parts[2] " " $2;
    # 转换为时间戳
    log_timestamp = mktime(datetime_str);
    # 保留时间戳大于等于阈值的行
    if (log_timestamp >= thresh) print $0;
}' "$file" > temp_cleaned.log

# 合规保障：若过滤后文件为空，保留原日志最后一行（避免清空文件）
if [ ! -s temp_cleaned.log ]; then
    tail -n 1 "$file" > temp_cleaned.log
fi

# 替换原文件
mv temp_cleaned.log "$file"

说明 #

• 自动识别日志行的日期时间，仅保留30天内的记录。
• 加入空文件判断，确保即使所有记录都过期，也不会清空日志（符合合规要求）。
• 要求日志行格式统一：每行开头为MM/DD/YYYY HH:MM:SS。

备选方案：Shell逐行处理（适合对awk不熟悉的场景） #

如果更习惯基础Shell命令，可以用逐行读取+时间戳比较的方式实现：

threshold=$(date -d "-30 days" +%s)

# 逐行处理日志，筛选符合条件的行
while IFS= read -r line; do
    # 提取行首的日期时间字符串
    log_datetime=$(echo "$line" | awk '{print $1 " " $2}')
    # 尝试将日志日期转为ISO格式（避免格式识别错误）
    iso_datetime=$(date -d "$log_datetime" +"%Y-%m-%d %H:%M:%S" 2>/dev/null)
    
    if [ -n "$iso_datetime" ]; then
        # 转为时间戳并与阈值比较
        log_timestamp=$(date -d "$iso_datetime" +%s)
        if [ "$log_timestamp" -ge "$threshold" ]; then
            echo "$line"
        fi
    else
        # 格式异常的行直接保留（防止误删重要内容）
        echo "$line"
    fi
done < "$file" > temp_cleaned.log

# 合规保障：避免文件为空
if [ ! -s temp_cleaned.log ]; then
    tail -n 1 "$file" > temp_cleaned.log
fi

mv temp_cleaned.log "$file"

内容的提问来源于stack exchange，提问作者Tom