为何从Django QuerySet获取结果列表耗时过长？

核心问题分析 #

你遇到的耗时问题主要来自三个方面：

1. 日期查询写法导致现有索引失效，数据库需扫描大量数据筛选结果
2. 查询路径存在冗余，多了一次不必要的数据库交互
3. 模型实例化过程带来的额外开销（转换为list时触发）

1. 修复日期查询，让索引生效 #

当前使用的tran_time__date__range会对tran_time字段执行DATE()函数转换，导致数据库无法利用现有tran_time相关索引，只能做全表扫描。改为直接使用tran_time__range并传入完整时间范围：

from datetime import datetime

# 明确时间范围的起始和结束（包含当天最后一秒）
start_time = datetime(2000, 1, 1, 0, 0, 0)
end_time = datetime(2000, 1, 3, 23, 59, 59)

# 修改后的查询条件
rs = AccountTransaction.objects.filter(
    account__user=request.user,
    account__account="0000000010",
    tran_time__range=(start_time, end_time)
)

2. 添加针对性索引 #

现有索引(tran_type, tran_time)对你的当前查询无帮助，因为你没有过滤tran_type字段。应创建基于account外键和tran_time的联合索引，匹配你的查询逻辑：

class AccountTransaction(models.Model):
    class Meta:
        db_table = 'account_transaction'
        ordering = ['tran_time']
        indexes = [
            models.Index(fields=['tran_type', 'tran_time', ]),
            # 添加新的联合索引
            models.Index(fields=['account', 'tran_time']),
        ]
    # ... 其他字段保持不变

执行迁移后，数据库会利用该索引快速定位指定账户的时间范围内交易记录。

3. 优化查询路径，减少数据库请求 #

原查询方式需要先获取Account对象再反向查询交易记录，会产生两次数据库请求。直接从AccountTransaction出发查询可合并为一次请求：

# 替代原链式查询
rs = AccountTransaction.objects.filter(
    account__user=request.user,
    account__account="0000000010",
    tran_time__range=(start_time, end_time)
)

4. 减少实例化开销（可选） #

如果不需要完整的AccountTransaction模型实例，仅需部分字段，可使用values()或values_list()获取数据，避免创建大量模型对象的开销：

# 获取指定字段的字典列表
result = list(rs.values('tran_amt', 'balance', 'tran_time'))

# 或者获取元组列表
result = list(rs.values_list('tran_amt', 'balance', 'tran_time', flat=False))

5. 验证查询效率 #

可通过query属性查看Django生成的SQL语句，确认索引是否被利用：

print(rs.query)

也可在数据库中用EXPLAIN分析该SQL语句，检查是否走了预期的索引。

内容的提问来源于stack exchange，提问作者Lazyer