Python应用Redis键丢失与过期异常问题求助

核心问题定位 #

你的代码中**set和expire是两个独立的非原子操作**，这是导致过期时间异常的主要原因：

• 如果set执行成功，但expire因网络波动、连接中断等原因失败，键会变成永久存在，对应"应240秒过期的键留存很久"的现象；
• 另外，键名重复覆盖、异常捕获不完整、连接管理不当也可能导致键丢失或过期异常。

具体解决方案 #

1. 使用原子化的set命令设置值与过期时间 #

将分开的set和expire合并为一个原子操作，彻底避免中间环节出错。修改set_value_at_redis_with_expiration函数：

def set_value_at_redis_with_expiration(key_name, key_life_at_redis__seconds, key_value):
    if running_environment in ('SERVER', 'DEV'):
        life_at_redis_days = key_life_at_redis__seconds / 86400  # 简化日期计算逻辑
        life_at_redis_days_formatted = "%.2f" % life_at_redis_days
        key_life_at_redis__seconds = int(key_life_at_redis__seconds)
        try:
            # 用ex参数原子化设置值和过期时间
            utils_cache_redis.set(key_name, str(key_value), ex=key_life_at_redis__seconds)
            logger.debug(f'Set value at REDIS. Key name: [{key_name}]. Key life: [{life_at_redis_days_formatted} days] ({key_life_at_redis__seconds} seconds). Key value: [{key_value}]')
        except Exception as e:  # 捕获具体异常并记录详情
            logger.critical(f'Error while setting at REDIS. Key: [{key_name}], Life: [{life_at_redis_days_formatted} days], Value: [{key_value}]. Error: {str(e)}')
    else:
        logger.info('Cannot set value at REDIS: not running in SERVER/DEV environment')

2. 排查键名重复覆盖问题 #

• 检查键名生成逻辑，确保不同业务场景、不同请求的键名唯一（比如添加用户ID、请求UUID、业务模块前缀等）；
• 在set操作前新增日志，记录键名的完整生成过程，方便定位是否存在重复覆盖的情况。

3. 优化异常捕获与日志 #

• 替换裸except:为except Exception as e:，捕获并记录具体异常信息，快速定位是连接错误、权限问题还是其他Redis操作异常；
• 针对无过期时间的键丢失问题，在check_if_key_is_present_at_redis中增加TTL查询日志（utils_cache_redis.ttl(key)），确认键是被删除、过期还是被驱逐。

4. 优化Redis连接管理 #

• 使用Redis连接池而非全局单例连接，避免连接失效后无法自动重建：

if running_environment in ('SERVER', 'DEV'):
    pool = redis.ConnectionPool(host='localhost', port=6379, db=0)
    utils_cache_redis = redis.Redis(connection_pool=pool)

连接池会自动管理连接的创建、复用和销毁，提升连接稳定性。

5. 监控Redis键的生命周期 #

• 开启Redis的键空间通知（修改redis.conf中的notify-keyspace-events为Ex），监控键的过期、删除事件；
• 查看Redis的maxmemory-policy配置，确认是否因内存不足导致键被驱逐（虽硬件充足，但仍需排除该可能）；
• 使用redis-cli INFO stats查看keyspace_hits、keyspace_misses、expired_keys等指标，辅助定位问题。

内容的提问来源于stack exchange，提问作者Nanno