You need to enable JavaScript to run this app. DataFrame中如何为同地点日期匹配重叠风险区间生成warning特征
优惠活动
大模型
产品
解决方案
定价
更多

DataFrame中如何为同地点日期匹配重叠风险区间生成warning特征

核心问题定位

之前匹配逻辑失效的两个关键原因:

  • 未严格按location维度隔离风险区间,容易将跨地点的风险日期误匹配
  • 处理重叠风险区间时未对同地点的连续风险日期做去重扁平化,遍历校验时会出现冗余判断甚至边界错配
分步实现方案

1. 数据预处理

首先完成所有日期字段的格式统一,从根源上避免字符串格式导致的匹配偏差:

import pandas as pd

# 读取你的CSV数据集
df = pd.read_csv("你的数据集本地路径/对应CSV链接")

# 统一转换所有日期列为datetime格式,自动跳过空值报错
date_columns = ["date", "risk_from", "risk_to"]
for col in date_columns:
    df[col] = pd.to_datetime(df[col], errors="coerce")

2. 构建按地点隔离的风险日期映射

解决重叠区间匹配的核心:先提取每个地点下所有非空的风险区间,将区间内的连续日期展开后存入去重集合,无论多少个区间存在重叠,最终集合内的日期都会自动去重,不会影响匹配准确性。

# 提取所有带明确风险区间的有效记录
valid_risk = df.dropna(subset=["risk_from", "risk_to"])

# 按location分组生成对应风险日期集合
risk_date_mapping = {}
for location, group in valid_risk.groupby("location"):
    risk_dates = set()
    for _, row in group.iterrows():
        # 生成单条风险区间的连续日期序列
        date_range = pd.date_range(start=row["risk_from"], end=row["risk_to"], freq="D")
        risk_dates.update(date_range)
    risk_date_mapping[location] = risk_dates

3. 生成warning特征列

严格按照「同地点匹配 + 日期在对应风险集合内」的双重规则赋值:

def get_warning_label(row):
    current_loc = row["location"]
    current_date = row["date"]
    # 无对应风险记录的地点直接返回N
    if current_loc not in risk_date_mapping:
        return "N"
    return "Y" if current_date in risk_date_mapping[current_loc] else "N"

df["warning"] = df.apply(get_warning_label, axis=1)
高性能优化方案(适配万级以上大数据集)

如果数据集规模较大,可跳过展开全量日期的步骤,直接用pandas内置的区间匹配能力完成校验,自动兼容重叠区间,运行速度比逐次展开日期提升一个数量级:

# 按location构建区间索引,支持重叠区间共存
interval_mapping = {}
for location, group in valid_risk.groupby("location"):
    # 生成闭区间数组,默认包含risk_from和risk_to的边界日期
    interval_arr = pd.arrays.IntervalArray.from_arrays(
        left=group["risk_from"],
        right=group["risk_to"],
        closed="both"
    )
    interval_mapping[location] = interval_arr

def fast_get_warning(row):
    current_loc = row["location"]
    current_date = row["date"]
    if current_loc not in interval_mapping:
        return "N"
    # 只要当前日期落在任意一个同地点风险区间内,即返回匹配成功
    return "Y" if interval_mapping[current_loc].contains(current_date).any() else "N"

df["warning"] = df.apply(fast_get_warning, axis=1)
常见踩坑提示
  • 必须按location维度隔离匹配逻辑,不能构建全局风险日期集合,否则会出现跨地点的误匹配
  • 日期字段必须先转换为datetime格式,禁止用字符串直接比较匹配,避免因格式不统一导致的判断失效
  • 区间匹配需设置为闭区间规则,包含风险区间的首尾边界日期,与示例中的匹配逻辑保持一致

内容的提问来源于stack exchange,提问作者JSVJ

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.10.31 08:06:10