Oracle按分钟分组获取每分钟最后一条记录的优化方案咨询

针对你处理数千条时序数据时的性能痛点，你当前的关联查询需要先分组聚合再做表连接，在数据量较大时会产生两次全表扫描的额外开销。这里分享两种更高效的实现方式：

1. 优先使用窗口函数（ROW_NUMBER()） #

这是最推荐的优化方案，只需要一次表扫描就能完成筛选，完全避免了额外的连接操作，在大数据量下性能提升非常明显。

实现SQL： #

SELECT ID, d_date, d_value
FROM (
    SELECT 
        ID, 
        d_date, 
        d_value,
        -- 按分钟分组，组内按时间倒序排，标记每条记录的位置
        ROW_NUMBER() OVER (
            PARTITION BY TO_CHAR(d_date, 'YYYY-MM-DD HH24:MI') 
            ORDER BY d_date DESC
        ) AS row_rank
    FROM d_table
) ranked_data
-- 取每个分钟组里的第一条（也就是时间最晚的那条）
WHERE row_rank = 1
ORDER BY d_date;

为什么高效？ #

• 窗口函数可以在一次表遍历过程中完成分组、排序和标记，不需要像原方案那样先聚合再连接
• 如果你的d_date字段建有索引，数据库可以直接利用索引来做分组和排序，完全跳过全表扫描，速度会更快

2. 给原查询加索引优化 #

如果你更习惯原有的关联思路，也可以通过添加索引来大幅提升查询效率：

创建针对时间字段的索引： #

CREATE INDEX idx_d_table_datetime ON d_table(d_date);

这个索引会让子查询里的MAX(d_date)计算和分组操作直接走索引，同时连接时的匹配也能利用索引，避免全表扫描，能把原查询的速度提升好几倍。

两种方案的性能对比 #

结果验证 #

以上两种优化方案都能精准返回你预期的结果：

ID d_date value #

3 1/16/2018 03:41:03 PM 30
5 1/16/2018 03:44:05 PM 50
6 1/16/2018 03:46:06 PM 60
8 1/17/2018 03:41:02 PM 80
9 1/17/2018 03:44:03 PM 90
10 1/17/2018 03:45:04 PM 100

内容的提问来源于stack exchange，提问作者Bilal Halayqa