如何不使用lambda遍历行实现pandas DataFrame列表列的元素过滤
Pandas遍历行实现area列元素过滤方案
完整实现代码
你可以先将每行的处理结果存储到列表中,再统一赋值给DataFrame列,避免遍历过程中直接修改DataFrame导致的结果异常,代码如下:
import pandas as pd # 自定义过滤函数,保留列表中长度大于3的元素 def g(x): return [e for e in x if len(e) > 3] # 构造原始DataFrame d = {'name': ['john', 'mary', 'james'], 'area':[['IT', 'Resources', 'Admin'], ['Software', 'ITS', 'Programming'], ['Teaching', 'Research', 'KS']]} df = pd.DataFrame(data=d) # 存储处理后的结果 processed_area = [] # 遍历每一行 for _, row in df.iterrows(): processed_area.append(g(row['area'])) # 赋值给目标列,可自定义列名 df['filtered_area'] = processed_area
更简洁的非遍历写法
如果不需要强制手写遍历逻辑,也可以直接将自定义函数传给apply方法,完全不需要使用lambda,运行效率更高:
df['filtered_area'] = df['area'].apply(g)
常见注意事项
- 不建议在循环中直接通过
df.loc[index, '列名']的方式逐行赋值,数据量大时性能极低 - 先收集所有处理结果再统一赋值的写法,也可以避免索引错位导致的结果异常问题
内容的提问来源于stack exchange,提问作者Victor Castro
相关产品推荐
相关产品推荐

