Laravel中Foreach批量保存多模型过慢的优化方案咨询

问题背景 #

开发电商应用时，批量保存商品变体请求耗时过长。当前实现逻辑在foreach循环中逐个创建SKU、VariantValue、SKUVariantValues模型并调用save()，每次循环触发3次数据库单条插入，随着变体数量增加，数据库连接和查询开销急剧上升。

低成本优化方法 #

1. 批量插入替代循环单条保存 #

核心思路是先收集所有待插入数据到数组，再通过Eloquent的insert()方法一次性插入，大幅减少数据库交互次数。

注意事项：

• 批量插入不会自动填充created_at/updated_at，需手动添加时间戳
• 不会触发模型事件（如creating/created），若依赖事件需额外处理
• 需修正原代码中的语法错误（如循环语法、字段拼写、VariantValue赋值覆盖问题）

优化后代码示例：

use Carbon\Carbon;
use Illuminate\Support\Facades\DB;

function insertVariant(Request $request) {
    $datas = $request->input('data'); // 仅获取变体数据，排除token等无关字段
    $skuData = [];
    $variantValueData = [];
    $skuVariantMapping = [];
    $now = Carbon::now();

    // 批量插入变体选项（修正原代码语法错误）
    $optionIds = Options::insertGetId([
        ['name' => 'color'],
        ['name' => 'size']
    ]);
    $colorOptionId = $optionIds[0];
    $sizeOptionId = $optionIds[1];

    // 遍历收集所有数据
    foreach ($datas as $index => $data) {
        // 收集SKU数据：清理价格格式，添加时间戳
        $skuData[] = [
            'name' => $data['sku'],
            'price' => str_replace('$', '', $data['price']),
            'quantity' => $data['quantity'],
            'created_at' => $now,
            'updated_at' => $now
        ];

        // 收集颜色、尺寸的VariantValue数据（原代码存在赋值覆盖，需分开插入）
        $colorVariantIndex = count($variantValueData);
        $sizeVariantIndex = $colorVariantIndex + 1;
        
        $variantValueData[] = [
            'variant_options_id' => $colorOptionId,
            'value' => $data['color'],
            'created_at' => $now,
            'updated_at' => $now
        ];
        $variantValueData[] = [
            'variant_options_id' => $sizeOptionId,
            'value' => $data['size'],
            'created_at' => $now,
            'updated_at' => $now
        ];

        // 记录SKU与VariantValue的临时关联（后续替换真实ID）
        $skuVariantMapping[] = [
            'sku_index' => $index,
            'variant_index' => $colorVariantIndex
        ];
        $skuVariantMapping[] = [
            'sku_index' => $index,
            'variant_index' => $sizeVariantIndex
        ];
    }

    // 开启单次事务，减少事务开销
    DB::beginTransaction();
    try {
        // 批量插入SKU并获取真实ID列表
        SKU::insert($skuData);
        $skuIds = SKU::whereIn('name', array_column($skuData, 'name'))
            ->orderBy('id')
            ->pluck('id')
            ->toArray();

        // 批量插入VariantValue并获取真实ID列表
        VariantValue::insert($variantValueData);
        $variantValueIds = VariantValue::whereIn('value', array_column($variantValueData, 'value'))
            ->whereIn('variant_options_id', [$colorOptionId, $sizeOptionId])
            ->orderBy('id')
            ->pluck('id')
            ->toArray();

        // 组装SKUVariantValues批量插入数据
        $skuVariantValueData = [];
        foreach ($skuVariantMapping as $mapping) {
            $skuVariantValueData[] = [
                'sku_id' => $skuIds[$mapping['sku_index']],
                'variant_value_id' => $variantValueIds[$mapping['variant_index']],
                'created_at' => $now,
                'updated_at' => $now
            ];
        }

        // 批量插入关联数据
        SKUVariantValues::insert($skuVariantValueData);

        DB::commit();
    } catch (\Exception $e) {
        DB::rollBack();
        throw $e;
    }
}

2. 统一事务管理 #

将所有批量操作包裹在单次事务中，避免每次单条插入都触发事务开启/提交，减少数据库事务开销。

3. 优化数据预处理 #

• 过滤无关请求字段：使用$request->input('data')替代$request->all()，只获取变体数据
• 清理数据格式：移除价格中的$符号，确保数值类型存入数据库
• 修正原代码逻辑错误：VariantValue需分别插入颜色和尺寸两条记录，避免字段覆盖

4. 可选：使用原生数据库查询 #

若Eloquent的批量插入仍有性能瓶颈，可直接使用DB::table()执行原生批量插入，减少Eloquent模型的实例化开销：

DB::table('skus')->insert($skuData);
DB::table('variant_values')->insert($variantValueData);
DB::table('sku_variant_values')->insert($skuVariantValueData);

内容的提问来源于stack exchange，提问作者Hau Chung