基于关键词列表删除pandas DataFrame行时出现TypeError如何解决
问题解决方法
错误原因
- 运算符优先级错误:
&逻辑与运算符优先级高于==比较运算符,原有代码会先执行False & df["tweet"],出现布尔值和字符串的非法运算,触发TypeError - 匹配逻辑错误:不能直接用
df["tweet"] != List2判断列内容是否包含列表内的关键词,需要和List1的匹配逻辑一致,使用str.contains拼接关键词正则实现模糊匹配 - 额外隐藏问题:
str.contains遇到空值会返回NaN,会导致布尔索引报错,需要补充na=False参数处理空值场景
正确实现代码
你的需求可以拆解为:仅删除匹配List1且完全不匹配List2的行,其余行全部保留,对应代码如下:
import pandas as pd df = pd.read_csv('/content/file.csv', usecols=['date','username','name','tweet']) List1 = ['USA','UK','IQ','KW'] List2 = ['Eygept','Cairo'] # 分别构造两个匹配规则的布尔序列 match_list1 = df["name"].str.contains('|'.join(List1), na=False) match_list2 = df["tweet"].str.contains('|'.join(List2), na=False) # 布尔索引过滤:排除匹配List1且不匹配List2的行 df_filtered = df[~(match_list1 & ~match_list2)]
如果更习惯正向写保留逻辑,也可以写成等价版本:
# 保留:不匹配List1 或 同时匹配两个列表的行 df_filtered = df[~match_list1 | (match_list1 & match_list2)]
内容的提问来源于stack exchange,提问作者Eila
相关产品推荐
相关产品推荐

