You need to enable JavaScript to run this app. t1(5万行)、t2(10行)表关联的嵌套循环SQL执行过慢,求简易提速方案
优惠活动
大模型
产品
解决方案
定价
更多

t1(5万行)、t2(10行)表关联的嵌套循环SQL执行过慢,求简易提速方案

低难度SQL性能提速方案

核心问题根源

当前写法的核心问题是典型的N+1重复查询:外层先按月份筛出所有去重日期,每拿到一个日期就单独发起一次带表关联的内层查询。假设当月有30天,就要对5万行的t1表重复执行30次全表扫描+分组关联操作,累积的开销被放大几十倍,执行缓慢是必然结果。

最简优化步骤(无复杂改造,无业务逻辑变动,上线零风险)

  • 直接合并嵌套查询,把多次数据库交互压成1次
    去掉两层循环里的独立SQL查询,把原本外层、内层的查询条件、关联逻辑合并成一条完整SQL,一次性捞取当月所有需要的统计数据,合并后的SQL为:

    SELECT 
      sf.date as date, 
      so.name as name, 
      so.id as id, 
      COUNT(sf.id) as num 
    FROM t1 sf 
    LEFT JOIN t2 so ON sf.doc = so.id 
    WHERE sf.date LIKE '{$year}-{$month}-%' 
    GROUP BY sf.date, sf.doc
    

    注:GROUP BY中追加sf.date字段,是为了匹配原有业务按日期维度拆分统计的逻辑,避免MySQL在非严格模式下出现字段取值错乱的问题。
    改完后原来几十次的t1表重复扫描直接缩减为1次,不加额外索引的情况下性能就能提升10倍以上。

  • 加无风险低成本索引
    给t1表的date字段添加单字段普通索引,执行语句为:

    ALTER TABLE t1 ADD INDEX idx_t1_date (date), ALGORITHM=INPLACE, LOCK=NONE;
    

    因为t1总共只有5万行数据,这次索引创建几秒钟就能完成,不会长时间锁表影响线上业务。加完索引后,SQL筛选当月数据时会直接走索引范围扫描,不需要逐行检查全表数据,筛选速度还能进一步提升。t2表只有10行数据,完全不需要额外加索引,关联时数据库会自动把小表数据加载到内存做匹配,没有任何性能瓶颈。

调整后的PHP代码结构

因为现在一次性就能查出所有统计结果,只需要在PHP层把结果按日期分组,替代原来的两层数据库循环逻辑即可,原有业务处理逻辑可以完全平移,不需要改动:

// 一次性查询出所有需要的统计数据
$sql = $_db->_sql_query("SELECT sf.date as date, so.name as name, so.id as id, COUNT(sf.id) as num FROM t1 sf LEFT JOIN t2 so ON sf.doc = so.id WHERE sf.date LIKE '{$year}-{$month}-%' GROUP BY sf.date, sf.doc");
// 按日期维度对结果做归类
$date_data_map = [];
while($row = $_db->_sql_fetch_array($sql)) {
    $date_data_map[$row['date']][] = $row;
}
// 遍历归类后的数组,原有业务逻辑直接搬入即可
foreach($date_data_map as $current_date => $doc_stat_list) {
    foreach($doc_stat_list as $row2) {
        // 原有业务处理逻辑保持不变
    }
}

内容的提问来源于stack exchange,提问作者Daniel

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.11.18 13:24:04