Django多对多关联场景下筛选Job记录的优化查询咨询

方案一：使用distinct()去重 #

这是最简单的修正方式，针对原查询的重复问题，只需在结尾添加distinct()即可：

from django.db.models import Q

Job.objects.filter(Q(created_by=user) | Q(collaborators=user)).distinct()

原理：Django会在生成的SQL中加入DISTINCT关键字，自动去除多对多关联JOIN产生的重复Job行。该方案代码简洁，维护成本低，适合数据量不大的场景。

方案二：使用Exists子查询（推荐，性能更优） #

针对数据量较大的场景，Exists子查询的性能优于IN子查询或JOIN+DISTINCT，因为数据库找到第一个匹配项后就会停止检查，无需处理全量JOIN或生成冗长的IN列表：

from django.db.models import Q, Exists, OuterRef

Job.objects.filter(
    Q(created_by=user) |
    Q(Exists(Collaborator.objects.filter(job_id=OuterRef('pk'), user=user)))
)

原理：通过子查询直接检查当前Job是否存在对应用户的协作者记录，既避免了多表JOIN带来的重复数据，又借助数据库优化器对Exists的高效支持提升查询性能。

与你当前方案的对比 #

你当前使用的pk__in方案可行，但存在两个潜在不足：

• 当用户关联的协作者Job数量较多时，IN子查询会生成很长的ID列表，影响查询效率
• 相比Exists，数据库需要先查询所有匹配的job_id再执行主查询，多了一次数据处理环节

而Exists子查询直接在主查询的每一行做存在性检查，逻辑更直接，性能表现更稳定。

内容的提问来源于stack exchange，提问作者Huzaifa Qamer