You need to enable JavaScript to run this app. 如何用Pandas或NumPy替代分块求最大值的列表推导式
优惠活动
大模型
产品
解决方案
定价
更多

如何用Pandas或NumPy替代分块求最大值的列表推导式

分段取最大值的优化实现

NumPy 原生向量化方案

使用NumPy内置的np.maximum.reduceat方法,完全替代列表推导的逐块计算逻辑,消除Python层循环开销。
该方法会自动以传入的索引数组作为每个分段的起始位置,依次计算每个分段区间内的最大值,和原有拆分逻辑的边界完全对齐:

import numpy as np
list_ = np.array([9887.89, 9902.99, 9902.99, 9910.23, 9920.79, 9911.34, 9920.01, 9927.51, 9932.3, 9932.33, 9928.87, 9929.22, 9929.22, 9935.24, 9935.24, 9935.26, 9935.26, 9935.68, 9935.68, 9940.5])
indexes = np.array([0,10,12,14])
# 直接传入分段起始索引,一次性计算所有块的最大值
max_result = np.maximum.reduceat(list_, indexes)

计算结果和原代码的列表推导输出完全一致,在数组长度大、分段数多的场景下,向量化实现的性能远优于逐块循环计算。

Pandas 分组聚合方案

通过为每个数组元素匹配所属分段标签,再按标签分组聚合的方式实现,不需要手动拆分数组:

import pandas as pd
import numpy as np
list_ = np.array([9887.89, 9902.99, 9902.99, 9910.23, 9920.79, 9911.34, 9920.01, 9927.51, 9932.3, 9932.33, 9928.87, 9929.22, 9929.22, 9935.24, 9935.24, 9935.26, 9935.26, 9935.68, 9935.68, 9940.5])
indexes = np.array([0,10,12,14])
# 为每个数组位置匹配对应的分段ID
chunk_ids = np.digitize(np.arange(len(list_)), indexes[1:])
# 按分段分组取最大值
max_result = pd.Series(list_).groupby(chunk_ids).max().to_numpy()

方案选择参考

  • 纯追求运行性能、无额外聚合需求时,优先选择NumPy原生实现,依赖更少、运行速度更快
  • 需要同时计算多维度统计值(每段的均值、最小值、标准差等)时,优先选择Pandas分组方案,代码扩展成本更低

内容的提问来源于stack exchange,提问作者tony selcuk

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.11.07 03:24:10