Docker中Sidekiq每隔数小时崩溃，求降级外的可行方案

我之前在团队里碰到过几乎一模一样的问题——Docker里的Sidekiq隔几个小时就因为Redis连接TimeoutError崩溃，重启容器完全没用，只有重启Docker daemon才能救回来。后来我们没降级Docker，靠几个方案解决了，分享给你：

1. 先给Redis“减负”，减少日志输出量 #

既然你怀疑问题和Docker日志跟不上Redis日志有关，那先从减少Redis的日志输出入手。默认的Redis日志级别可能太高，会产生大量冗余日志，压垮Docker的日志驱动：

• 如果是用docker-compose部署，直接在Redis服务的command里调整日志级别：

  redis:
    image: redis:latest
    command: redis-server --loglevel warning # 把日志级别从verbose降到warning
  

• 如果是单独启动容器，执行：docker run redis:latest redis-server --loglevel warning
• 这个调整能大幅削减Redis的日志量，缓解Docker日志系统的压力。

2. 更换Docker日志驱动，用更高效的替代方案 #

Docker默认的json-file日志驱动在高日志量场景下性能拉胯，换成专门针对性能优化的local驱动（或者Linux下的journald）会好很多：

1. 编辑Docker daemon的配置文件/etc/docker/daemon.json（如果没有就新建）：

   {
     "log-driver": "local",
     "log-opts": {
       "max-size": "10m",
       "max-file": "3"
     }
   }
   

2. 重启Docker daemon（这是最后一次需要重启它了）：sudo systemctl restart docker
local驱动是Docker官方为高性能场景设计的，不会像json-file那样频繁做磁盘写入，能有效避免日志积压导致的资源耗尽问题。

3. 给Sidekiq加“容错buff”，优化Redis连接配置 #

就算日志问题还存在，也能让Sidekiq更抗造。修改Sidekiq的Redis连接配置，延长超时时间并增加重连次数：

• 在Rails项目的config/initializers/sidekiq.rb里调整：

  Sidekiq.configure_server do |config|
    config.redis = {
      url: ENV['REDIS_URL'],
      timeout: 30, # 把超时时间从默认的几秒钟延长到30秒
      reconnect_attempts: 5 # 增加重连次数，避免一次超时就崩溃
    }
  end
  
  Sidekiq.configure_client do |config|
    config.redis = {
      url: ENV['REDIS_URL'],
      timeout: 30,
      reconnect_attempts: 5
    }
  end
  

这样Sidekiq遇到临时的Redis连接超时后，会自动尝试重连，而不是直接崩溃退出。

4. 把Redis日志绕开Docker日志驱动，直接写到宿主机 #

如果业务需要保留Redis的详细日志，那可以让Redis直接把日志写到宿主机的磁盘，完全绕过Docker的日志系统：

• 在docker-compose.yml里配置挂载日志目录：

  redis:
    image: redis:latest
    volumes:
      - ./redis_logs:/var/log/redis # 挂载宿主机目录到Redis容器内的日志目录
    command: redis-server --logfile /var/log/redis/redis.log # 指定Redis日志文件路径
  

这样Redis的日志直接写入宿主机文件，不会占用Docker日志驱动的资源，从根源上避免了日志积压导致的问题。

5. 加个监控，提前发现异常 #

最后建议加个简单的监控，提前发现日志暴增或者资源占用过高的情况：

• 用docker stats定期查看Redis和Sidekiq容器的CPU、内存、磁盘I/O占用；
• 用docker logs --tail 200 redis实时观察Redis的日志输出速率，要是突然出现大量日志，可能是业务有异常请求，得及时排查。

这些方案我们在19.03.x版本的Docker上试过，都有效，不用降级就能解决问题。

内容的提问来源于stack exchange，提问作者Taher Alkhateeb