Ubuntu18.04下MySQL5.7长运行进程占满swap需重启,如何排查优化?
故障排查与优化方案
分阶段排查思路
1. 定位MySQL挂起进程的核心来源
- 登录MySQL执行
SHOW FULL PROCESSLIST;,筛选所有运行时长超过10分钟的进程,重点核对State字段状态(是否存在锁等待、慢查询、僵尸连接)、对应执行的SQL语句、连接来源IP - 对筛选出的可疑SQL用
EXPLAIN分析执行计划,确认是否存在全表扫描、缺失索引、逻辑死循环导致的长期执行 - 查看MySQL默认错误日志(路径
/var/log/mysql/error.log),检索是否存在进程无响应、死锁、IO超时类报错
2. 定位swap耗尽的触发逻辑
- 通过
free -h、vmstat 1实时观测内存换入换出速率,确认是物理内存被占满触发被动swap换出,还是系统swap倾向配置过高导致主动换出 - 检查
/etc/sysctl.conf中vm.swappiness参数值,Ubuntu 18.04默认值为60,对数据库场景过高,会主动将不活跃内存页转移到swap - 核算MySQL内存配置:执行命令查询
innodb_buffer_pool_size、key_buffer_size等核心内存参数的配置值,确认MySQL预留内存总和是否超过服务器物理内存的70%,与Apache、PHP服务产生内存抢占
3. 确认进程无法终止的根因
- 对MySQL内执行
KILL <进程ID>无响应的进程,到系统层匹配对应MySQL线程状态:执行ps -T -p <MySQL主进程PID>,确认线程是否处于D状态(不可中断的磁盘IO等待),这类状态无法被普通终止信号结束 - 通过
iostat -x 1观测磁盘利用率,确认是否存在磁盘IO长期打满、请求排队的情况,拖慢MySQL所有读写操作导致进程假死
落地优化方案
- MySQL参数优化
- 调整
wait_timeout、interactive_timeout参数为300秒(默认8小时过长),自动清理闲置挂起的连接,配置写入/etc/mysql/my.cnf的[mysqld]配置块后重启生效 - 开启慢查询日志,设置
long_query_time = 2,定期归档分析慢SQL并做索引、逻辑优化 - 合理设置
max_connections上限,避免连接数无上限增长占满系统内存
- 调整
- 系统内存配置优化
- 将
vm.swappiness调整为10,临时生效执行sysctl -w vm.swappiness=10,再将配置写入/etc/sysctl.conf永久生效,降低系统主动换出数据库内存的概率 - 重新分配内存配额:将
innodb_buffer_pool_size设置为物理内存的50%-60%,剩余内存预留予Apache、PHP及系统基础进程,避免单一服务占满物理内存
- 将
- 应用逻辑优化
- 核查PHP代码的数据库连接逻辑,关闭不必要的持久长连接,脚本执行完成主动释放MySQL连接,避免PHP-FPM进程长期持有未释放的数据库连接
- 给所有高频访问的业务表补齐缺失索引,减少全表扫描导致的慢查询长期挂起
- 对长耗时批处理脚本增加执行超时判断,主动中断运行过久的数据库连接,避免占用资源
内容的提问来源于stack exchange,提问作者Camilo Castilla
相关产品推荐
相关产品推荐

