列表元素中文标点转换为英文标点的实现方案与问题排查
标点移除实现方案
我曾尝试通过Unicode识别的方式实现转换,但运行效果不符合预期。随后调整思路,打算先移除所有标点,待后续其他处理完成后再统一合并标点,已编写的实现代码如下:
import string def remove_punctuations(text): for punctuation in string.punctuation: text = str(text).replace(punctuation, '') return text lst_1 = lst_1.apply(remove_punctuations) lst_1 = lst_1.str.replace(r'[^\x00-\x7F]+', '', regex=True) # 测试样本 lst_1 = ['SRS ????','NAT ????', 'Ins ??','SRS 檢視試針', 'NAT 酒精清洗', 'Ins 目測']
代码修正&优化提示
- 原始代码存在2处语法错误:
remove_punctuations函数内的替换语句缺少缩进,return text和后续的lst_1赋值语句拼接在同一行,运行会直接报错 - 内置的
string.punctuation仅包含英文标点,如果需要移除中文标点,需要手动补充中文标点集合到遍历列表中 - 现有正则
r'[^\x00-\x7F]+'会同时移除所有非ASCII字符(包括中文),如果需要保留中文字符,需要调整正则匹配规则
内容的提问来源于stack exchange,提问作者Ahtisam Bashir
相关产品推荐
相关产品推荐

