Laravel线索管理CRM去重需求：仅保存Google Sheets中不存在的记录

嘿，作为Laravel新手碰到这个问题太正常了，我来帮你搞定！你的核心困扰是每次页面刷新都把Google Sheets的所有记录往数据库插，而email字段设了唯一约束，重复插入直接触发SQL的“duplicate entry”错误——直接用集合的->unique()方法只能处理CSV内部的重复，但管不了数据库里已经存在的记录，这就是报错的原因。

下面给你几个靠谱的解决方案，按优雅程度排序：

方案一：用Laravel自带的firstOrCreate（最推荐） #

这个方法简直是为这种场景量身定做的——它会先根据你指定的唯一条件（这里就是email）查询数据库，如果不存在就创建新记录，完全不用手动写判断逻辑。

修改你Controller里的插入循环部分：

foreach ($newarray as $data) {
    auth()->user()->leads()->firstOrCreate(
        // 查询条件：根据email判断是否已存在
        ['email' => $data['your-email']],
        // 如果不存在，要创建的其他字段
        [
            'name' => $data['your-name'],
            'tel' => $data['your-tel']
        ]
    );
}

不管你刷新多少次，都只会插入数据库里没有的新记录，完美避开唯一约束错误。

方案二：先获取已有邮箱列表，过滤后插入 #

如果你想手动控制逻辑，可以先把当前用户已有的lead邮箱都查出来，遍历CSV记录时只插入不在列表里的：

// 先获取当前用户已有的所有lead邮箱
$existingEmails = auth()->user()->leads()->pluck('email')->toArray();

foreach ($newarray as $data) {
    $email = $data['your-email'];
    // 检查邮箱是否已存在
    if (!in_array($email, $existingEmails)) {
        auth()->user()->leads()->create([
            'name' => $data['your-name'],
            'tel' => $data['your-tel'],
            'email' => $email
        ]);
        // 把新插入的邮箱加入列表，避免同一次循环里重复插入（如果CSV本身有重复）
        $existingEmails[] = $email;
    }
}

方案三：批量插入优化（适合大量记录） #

如果你的Google Sheets里记录很多，循环插入效率低，可以先过滤出所有需要新增的记录，再批量插入：

$existingEmails = auth()->user()->leads()->pluck('email')->toArray();

// 过滤出数据库中不存在的记录
$newLeads = collect($newarray)
    ->reject(function ($data) use ($existingEmails) {
        return in_array($data['your-email'], $existingEmails);
    })
    ->map(function ($data) {
        return [
            'name' => $data['your-name'],
            'tel' => $data['your-tel'],
            'email' => $data['your-email']
        ];
    })
    ->toArray();

// 只有当有新记录时才执行批量插入
if (!empty($newLeads)) {
    auth()->user()->leads()->insert($newLeads);
}

补充：为什么之前用->unique()会报错？ #

你之前尝试的->unique()应该是在$newarray集合上调用的吧？它只能去掉CSV数据里的重复记录，但如果数据库里已经存在某个邮箱，插入时还是会触发SQL的唯一约束错误——因为数据库层面的约束优先级比集合去重高。上面的方案都是直接和数据库交互，从根源避免了重复插入的问题。

内容的提问来源于stack exchange，提问作者Yosef Dadya