Laravel Horizon与Supervisor性能优化及替代方案咨询

一、替代Supervisor的进程控制器选项 #

如果觉得Supervisor资源占用过高，可以考虑这些更轻量或更适配的进程管理器：

• Systemd：Linux系统原生工具，无需额外安装，资源消耗远低于Supervisor。只需编写.service配置文件就能管理Laravel Worker，自带日志、自动重启、进程监控等功能，完全满足生产环境需求。
• PM2：原本为Node.js设计，但也支持PHP进程管理。自带负载均衡、进程状态监控、日志聚合功能，资源占用可控，还能通过Web面板直观查看进程状态。
• Circus：基于Python的轻量进程管理器，配置灵活，支持多进程编排，资源消耗比Supervisor低，适合需要复杂进程调度的场景。

二、优化Cron处理队列的效率 #

Cron处理7-8k任务耗时20分钟，核心问题是它的周期性触发机制带来的进程启停开销和并行度不足，优化方向：

• 替换为常驻Worker：放弃Cron触发，改用常驻进程持续处理任务，彻底消除进程启动/销毁的资源消耗，这是提升队列处理速度的关键。
• 调整Cron策略（如果必须保留）：缩短触发间隔（比如从每分钟改为30秒），同时在Cron脚本中启动多个Worker并行处理，但要注意控制数量，避免耗尽数据库连接。
• 优化任务本身：检查任务中的MySQL查询，添加必要索引、消除N+1查询，或者把大任务拆成多个小任务，降低单任务的CPU和IO负载。

三、Horizon + Supervisor的性能优化配置 #

Horizon是Laravel队列的高级监控工具，配合Supervisor时重点在于合理控制Worker数量、并发度和资源限制：

1. Supervisor配置优化 #

示例配置文件（/etc/supervisor/conf.d/laravel-horizon.conf）：

[program:laravel-horizon]
process_name=%(program_name)s_%(process_num)02d
command=php /path/to/your/project/artisan horizon
autostart=true
autorestart=true
user=www-data
numprocs=4 ; 根据服务器CPU核心数调整，建议为核心数的1-2倍
redirect_stderr=true
stdout_logfile=/path/to/your/project/storage/logs/horizon.log
stopwaitsecs=3600 ; 给Worker足够时间完成当前任务再停止，避免任务丢失

关键注意事项：

• numprocs：不要超过CPU核心数的2倍，防止CPU过载。
• user：使用运行PHP的用户（如www-data），避免权限问题。

2. Horizon配置优化 #

修改config/horizon.php中的环境配置：

'environments' => [
    'production' => [
        'supervisor-1' => [
            'connection' => 'mysql',
            'queue' => ['high', 'default', 'low'],
            'balance' => 'auto', ; 自动根据队列长度增减Worker，避免资源浪费或任务堆积
            'processes' => 8, ; 单个Supervisor的Worker进程数，总进程数为numprocs×processes
            'tries' => 3,
            'timeout' => 60, ; 单个任务超时时间，防止卡住的任务占用资源
            'memory' => 128, ; 每个Worker的内存上限，单位MB，防止内存泄漏
        ],
    ],
],

核心优化点：

• 平衡策略：auto模式让Horizon动态调整Worker数量，忙时增、闲时减，提升资源利用率。
• 进程数控制：总Worker进程数建议为CPU核心数的2-4倍，同时要确保不超过MySQL的max_connections限制。
• 队列优先级：拆分高、中、低优先级队列，Horizon会优先处理高优先级任务，保证核心业务响应速度。

3. 额外性能提升建议 #

• 改用Redis队列驱动：相比MySQL，Redis的读写性能更高，能大幅降低队列操作的CPU和IO消耗。
• 开启队列压缩：在config/queue.php中开启compress选项，减少队列数据的传输和存储开销。
• 监控调优：通过Horizon仪表盘查看队列长度、任务执行时间、Worker状态，针对性优化慢任务；同时监控服务器CPU、内存、数据库连接数，动态调整Worker配置。

内容的提问来源于stack exchange，提问作者Ridoy Chandra Sarker