如何交叉校验两个Pandas DataFrame 以其中一表字段为变量动态取值
解决方案:Pandas按行动态匹配指定列取值
最优实现方案(高效易维护,支持大批量数据)
核心思路是先把存储月度映射的modal2从宽表转为长表,再通过双字段关联匹配取值,代码如下:
import pandas as pd # 1. 将modal2从宽格式转为长格式,提取月份数字方便匹配 modal2_long = modal2.melt( id_vars="Mode", var_name="month_col", value_name="dynamic_month_value" ) modal2_long["month_num"] = modal2_long["month_col"].str.extract(r"(\d+)").astype(int) # 2. 双字段关联df_ia和modal2_long,直接得到动态取值结果 df_ia = df_ia.merge( modal2_long[["Mode", "month_num", "dynamic_month_value"]], left_on=["Mode", "RevalMonth_plus"], right_on=["Mode", "month_num"], how="left" ).drop(columns="month_num") # 删除冗余辅助列
逻辑说明
- 宽转长后的
modal2_long每一行对应一个Mode的某一个月的取值,和df_ia的行结构一一对应 - 关联时同时匹配
Mode和月份数值,自动取到对应月份的取值,无需循环,性能远高于逐行遍历 - 无匹配结果时会自动填充
NaN,符合原有逻辑的default规则
小数据量快速实现方案
如果你的数据量很小,也可以用逐行apply实现,代码更简洁:
modal2_idx = modal2.set_index("Mode") # 提前把Mode设为索引加速查询 df_ia["dynamic_month_value"] = df_ia.apply( lambda row: modal2_idx.loc[row["Mode"], f"month{row['RevalMonth_plus']}"], axis=1 )
内容的提问来源于stack exchange,提问作者William
相关产品推荐
相关产品推荐

