CodeIgniter登录高负载下MySQL CPU飙升、死锁问题解决方案咨询
CodeIgniter 3.1.7站点高负载场景故障分析与优化指南
现有基础设施与配置
- 应用层架构:4台同规格EC2实例挂载于负载均衡后端,运行环境为PHP 7.2.32(Ubuntu 18.04衍生版本)、Linux内核5.4.0-1028-aws、Apache/2.4.29
- 数据层配置:单实例AWS RDS MySQL Aurora,规格db.t3.medium(2vCPU、4GB内存),版本为5.6.mysql_aurora.1.22.2;根据RDS最大连接数计算公式
{DBInstanceClassMemory/12582880},该实例理论最大连接数约为340 - CodeIgniter会话配置:采用database驱动存储会话,具体参数如下:
$config['sess_driver'] = 'database'; $config['sess_cookie_name'] = 'ci_session'; $config['sess_expiration'] = 7200; $config['sess_save_path'] = 'ci_sessions'; $config['sess_match_ip'] = FALSE; $config['sess_time_to_update'] = 300; $config['sess_regenerate_destroy'] = FALSE;
故障现象
- 触发条件:10分钟内累计500名用户发起登录请求的高并发场景
- 异常表现:RDS Aurora CPU使用率飙升至100%,当前活跃连接数升至30-45(远低于最大连接数上限),同时触发1213号死锁错误
Deadlock found when trying to get lock; try restarting transaction - 错误溯源:所有死锁事件均发生在用户登录流程的会话更新环节,触发位置为
libraries/Session/drivers/Session_database_driver.php的会话写入逻辑
现有判断逻辑的修正
初步结论“负载升高导致RDS CPU过高,进而触发死锁产生致命MySQL错误”的因果顺序存在偏差:实际故障链路为高并发下会话写入逻辑的锁竞争先引发死锁,大量死锁检测、事务重试、锁等待阻塞的操作持续推高数据库CPU使用率,而非CPU使用率过高引发死锁。
已评估方案的可行性验证
- 方案1:迁移至RDS Serverless
- 局限性:死锁属于事务行锁层面的逻辑问题,Serverless的弹性扩缩仅能提升计算资源配额,无法消除会话写入的锁竞争、重试带来的额外开销,甚至可能因为扩缩过程中的连接路由波动放大会话写入失败概率,无法从根因解决问题
- 方案2:升级为更高配置的固定规格RDS
- 局限性:站点95%时段无流量,高规格固定实例的资源利用率极低;且升级配置仅能提升数据库单实例的处理QPS阈值,无法消除会话写入环节的锁竞争问题
- 方案3:将会话存储从database改为文件存储
- 局限性:负载均衡场景下采用本地文件存储时,用户请求被路由到不同EC2节点会出现会话不共享的问题,无法直接落地
- 方案4:通过PHP-FPM限制Apache并发线程数
- 适用场景:可作为兜底限流手段,通过限制单节点最大并发PHP处理量,降低同时打到RDS的会话写入请求规模,但并未解决会话存储本身的架构问题
可落地的优化方向
- 核心根因修复:将共享会话存储从RDS数据库中剥离,采用独立的内存缓存服务作为统一会话存储,彻底移除会话读写对MySQL的负载,从源头消除会话环节的死锁触发条件
- 配套兜底优化:
- 调整CodeIgniter会话配置,开启
$config['sess_regenerate_destroy'] = TRUE,减少登录流程中重复写入会话带来的锁竞争 - 通过PHP-FPM的进程管理规则,将单EC2节点的并发处理数控制在RDS可稳定承载的范围内,避免突发流量打满数据库CPU
- 为数据库驱动的会话写入逻辑增加死锁自动重试机制(针对1213错误执行1-2次轻量级重试),降低瞬时锁竞争引发的用户可见错误率
- 调整CodeIgniter会话配置,开启
完整错误日志
A Database Error Occurred Error Number: 1213 Deadlock found when trying to get lock; try restarting transaction UPDATE `ci_sessions` SET `timestamp` = 1604298368 WHERE `id` = 'fqi83a50dfknbvl9h2r98mtgn2f3j2j6' Filename: libraries/Session/drivers/Session_database_driver.php Line Number: 260 A PHP Error was encountered Severity: Warning Message: Unknown: Cannot call session save handler in a recursive manner Filename: Unknown Line Number: 0 Backtrace: A PHP Error was encountered Severity: Warning Message: Unknown: Failed to write session data using user defined save handler. (session.save_path: /var/lib/php/sessions) Filename: Unknown Line Number: 0 Backtrace
内容的提问来源于stack exchange,提问作者rjbathgate
相关产品推荐
相关产品推荐

