You need to enable JavaScript to run this app. pandas中如何通过重采样/聚合时间间隔计算各时间点活跃物品总数?
优惠活动
大模型
产品
解决方案
定价
更多

pandas中如何通过重采样/聚合时间间隔计算各时间点活跃物品总数?

活跃物品时间序列统计实现方法
  • 核心实现思路不需要逐时间点遍历匹配活跃区间,而是通过事件差分累计的逻辑实现,天然适配pandas Interval默认的左闭右开规则,计算效率远高于逐点判断:
    1. 每个物品的活跃起始时刻记为+1的计数事件
    2. 每个物品的活跃结束时刻记为-1的计数事件
    3. 将所有事件按时间排序后做累计求和,得到的序列就是任意时间点对应的活跃物品总数
    4. 如需固定时间粒度的统计,直接对累计序列做重采样对齐即可

分步实现代码

1. 拆分原始Interval列为起止时间

直接通过pandas内置的IntervalArray属性批量提取时间边界,避免逐行遍历的性能损耗:

# 从Interval类型列提取活跃区间的左右边界
interval_arr = pd.arrays.IntervalArray(df["active"])
df["active_start"] = interval_arr.left
df["active_end"] = interval_arr.right

2. 构造差分事件序列

把每个活跃区间拆成两个独立的时间事件:

# 开始活跃事件:计数+1
start_counter = pd.Series(1, index=df["active_start"])
# 结束活跃事件:计数-1
end_counter = pd.Series(-1, index=df["active_end"])
# 合并事件并按时间从小到大排序
event_series = pd.concat([start_counter, end_counter]).sort_index()

3. 累计求和得到全时间点的活跃数

# 累计值即为对应时间点的活跃物品总数
active_total = event_series.cumsum()

可以用题目给出的两个时间点验证结果是否匹配预期:

# 验证2021-04-01 00:45:00的活跃数
print(active_total.loc[:pd.Timestamp("2021-04-01 00:45:00")].iloc[-1])
# 输出结果为2,和示例描述一致

# 验证2021-04-03 01:00:00的活跃数
print(active_total.loc[:pd.Timestamp("2021-04-03 01:00:00")].iloc[-1])
# 输出结果为1,和示例描述一致

固定粒度重采样统计

如果不需要逐事件点的精确值,需要按固定周期(比如每小时、每天)统计活跃数,直接对累计活跃序列做重采样即可。例如按1小时间隔统计每个整点的活跃数:

# 按1小时为窗口,取每个窗口结束时刻的活跃值
hourly_active_stat = active_total.resample("1H").last()

注意事项

  • 该逻辑完全匹配pandas Interval默认的左闭右开规则:即时间点 >= 活跃开始时间、< 活跃结束时间时,判定为物品处于活跃状态,不会出现边界漏算、重复计数的问题。
  • 该方法的时间复杂度为O(N log N),仅需要对所有事件点做一次排序,哪怕十万级以上的活跃区间、跨数年的时间范围也可以快速计算完成,远高于逐时间点匹配Interval的O(N*M)复杂度。

内容的提问来源于stack exchange,提问作者Michael Dorner

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.10.27 06:06:10