Django中lt+gt组合与不等于条件查询结果差异及SQL调整问题
Django 3.0 对反向关联字段的取反条件(形如~Q(反向关联__字段=值))有特殊优化逻辑:会将这类条件下推为子查询,语义变成“排除所有存在符合条件的关联实体的主表实例”,而非直接对JOIN后的结果做行级过滤。
当前B查询生成的NOT ("eftapp_p"."id" IN (SELECT U1."c_id" FROM "eftapp_pr" U1 WHERE U1."rc" = 3))就是这个逻辑:只要P关联的pr表里有任意一条rc=3的行,就直接排除整个P实例,不管其他关联行是否符合条件。
id=104的P之所以被遗漏,就是因为它关联了pr表id=7788的行(rc=3),哪怕它还有两条rc=1的有效关联行,也被整个排除了。
方案1:范围条件替代取反(已验证可用)
利用当前rc是PositiveSmallIntegerField、非空的特性,用大小于的OR组合等价替代~Q(ps__rc=3):
B = P.objects.filter( Q(ps__rc__lt=3) | Q(ps__rc__gt=3), ps__p__cs__c=198 ).exclude(pk=198).annotate( bt=Count('ps__rc', filter=Q(ps__rc=1, ps__p__cs__rc=1)) )
Django对这类范围OR条件不会触发下推子查询的优化,会直接把pr.rc < 3 OR pr.rc > 3拼到JOIN后的WHERE子句里,完全符合预期逻辑,也就是原本查询A的写法。
方案2:FilteredRelation自定义关联(适配扩展性需求)
如果后续rc字段可能改为可空、或者需要更灵活的等值判断逻辑,可以用FilteredRelation把取反条件绑定到JOIN层级,避免生成NOT IN子查询:
from django.db.models import FilteredRelation, Q, Count B = P.objects.annotate( # 仅关联rc≠3的ps关联行,条件直接附着在JOIN逻辑上 ps_non3 = FilteredRelation('ps', condition=~Q(ps__rc=3)) ).filter( ps_non3__p__cs__c=198, ).exclude(pk=198).annotate( bt=Count( 'ps_non3__rc', filter=Q(ps_non3__rc=1, ps_non3__p__cs__rc=1) ) )
这个写法生成的SQL不会包含排除整个P实例的子查询,pr.rc !=3的条件会直接出现在WHERE或JOIN的ON子句中,id=104的有效关联行会被正常保留。
两种方案生成的WHERE子句都会符合预期逻辑:
WHERE NOT ("eftapp_pr"."rc" = 3) AND T4."c_id" = 198 AND NOT ("eftapp_p"."id" = 198)
不会再因为P存在任意rc=3的关联行就排除整个实例,id=104的结果不会再缺失。
内容的提问来源于stack exchange,提问作者bigAb

