Laravel遍历2k Product关联30w+数据性能优化求助

针对你用Product::whereBetween('id',[$num1,$num2])->get()获取2k条数据后循环调用关联导致的性能问题，给出以下优化方案：

1. 用预加载（Eager Loading）消除N+1查询 #

循环调用关联会触发N+1查询问题（1次查Product，N次查Note_voucher_line），换成预加载只需2次查询，直接把关联数据一起拉取：

// 直接预加载关联，同时指定排序逻辑
$products = Product::whereBetween('id', [$num1, $num2])
    ->with(['get_note_voucher_lines' => function ($query) {
        $query->orderBy('date')->orderBy('note_voucher_id');
    }])
    ->get();

// 后续直接访问关联，不会再触发新查询
foreach ($products as $product) {
    $lines = $product->get_note_voucher_lines;
}

如果你的get_note_voucher_lines关联方法已经固定了排序规则（比如在模型里定义了orderBy），可以简化为->with('get_note_voucher_lines')。

2. 创建复合索引优化排序查询 #

虽然已经给product_id加了索引，但关联后还要按date和note_voucher_id排序，单一索引无法覆盖排序逻辑。给note_voucher_lines表创建复合索引：

// 在Note_voucher_line的迁移文件中添加
$table->index(['product_id', 'date', 'note_voucher_id']);

这个复合索引可以让数据库直接通过索引完成product_id筛选+date/note_voucher_id排序，避免额外的排序运算，大幅提升大表查询速度。

3. 限制关联查询的字段 #

如果不需要Note_voucher_line的所有字段，只查询业务需要的字段，减少数据传输和内存占用：

->with(['get_note_voucher_lines' => function ($query) {
    $query->select('id', 'product_id', 'date', 'note_voucher_id', '需要的字段')
          ->orderBy('date')->orderBy('note_voucher_id');
}])

4. 分块处理大数据集 #

如果2k条Product数据处理时内存压力大，用chunk分批次处理，每次处理小批量数据：

Product::whereBetween('id', [$num1, $num2])
    ->chunk(200, function ($products) {
        // 对当前批次的Product预加载关联
        $products->load(['get_note_voucher_lines' => function ($query) {
            $query->orderBy('date')->orderBy('note_voucher_id');
        }]);
        
        // 处理当前批次的业务逻辑
        foreach ($products as $product) {
            // ...
        }
    });

内容的提问来源于stack exchange，提问作者softya