RAID10架构NVMe SSD上MariaDB 10.4读取速度过慢求助

算力阿峰

2026-8-4

优化NVMe RAID10下MariaDB 10.4磁盘读取性能方案

一、先排查硬件与RAID层性能瓶颈

首先排除数据库之外的硬件问题，直接测试RAID阵列的裸盘性能：

随机读测试（验证小文件IO能力）：

fio --name=randread_test --ioengine=libaio --iodepth=64 --rw=randread --bs=4k --size=10G --numjobs=8 --runtime=60 --group_reporting

顺序读测试（验证大文件读取能力）：

fio --name=seqread_test --ioengine=libaio --iodepth=64 --rw=read --bs=128k --size=100G --numjobs=8 --runtime=60 --group_reporting

如果测试结果仍远低于NVMe理论值，需检查：

修改my.cnf后重启数据库，调整以下关键参数：

启用直接IO绕过系统缓存
```
innodb_flush_method = O_DIRECT
```
避免操作系统页缓存与InnoDB缓冲池的双重缓存，释放内存同时提升磁盘IO效率。
增大重做日志文件大小
当前128M过小，会导致频繁Checkpoint阻塞IO，调整为4G（需先停库删除旧日志文件ib_logfile0/ib_logfile1再启动）：
```
innodb_log_file_size = 4G
innodb_log_buffer_size = 128M
```
调高IO能力阈值
告知InnoDB磁盘的实际IO处理能力，避免后台刷新任务抢占业务IO：
```
innodb_io_capacity = 5000
innodb_io_capacity_max = 20000
```
开启并行查询与IO线程优化
针对2亿条数据的大规模扫描，开启并行查询提升多线程读取能力：
```
optimizer_switch='parallel_query=on'
innodb_parallel_read_threads = 16
```
执行SHOW VARIABLES LIKE 'innodb_read_io_threads';确认innodb_read_io_threads=16已生效。
优化预读策略
对于顺序读取场景（如大范围索引扫描），调整预读阈值提升数据预加载效率：
```
innodb_read_ahead_threshold = 100
```

验证索引有效性
用EXPLAIN分析查询语句，确认是否走索引（避免type=ALL的全表扫描）。针对大规模数据提取，优先使用覆盖索引（包含查询所需所有字段的索引），避免回表读取数据。
分批次读取数据
一次性读取2亿条数据会导致IO队列堵塞，改用主键范围分页或LIMIT分批次提取：
```
-- 示例：按主键分批次读取
SELECT * FROM your_table WHERE id > last_id LIMIT 10000;
```
控制查询并发数
单线程查询无法利用NVMe的并行IO能力，确保业务是多并发查询模式，或通过应用层拆分查询为多个子任务并行执行。

调整IO调度器
NVMe SSD禁用CFQ调度器，改用none或mq-deadline：

# 临时生效
echo none > /sys/block/nvme0n1/queue/scheduler
# 永久生效：在/etc/default/grub中添加 elevator=none，执行update-grub后重启

关闭文件访问时间记录
挂载磁盘时添加noatime,nodiratime参数，减少不必要的写IO：
```
/dev/md0 /data ext4 defaults,noatime,nodiratime 0 0
```
调高文件描述符限制
确保系统能为数据库提供足够的文件描述符：
```
# /etc/security/limits.conf
mysql soft nofile 65536
mysql hard nofile 65536
```

内容的提问来源于stack exchange，提问作者Joséph Flames