如何去除TXT文件中的^M 特殊字符？尝试脚本未解决

Bash 端有效处理命令 #

^M本质是Windows回车符\r，之前的sed脚本无效大概率是写法不对，针对不同系统的sed给出正确命令：

• Linux（GNU sed）：直接匹配行尾的\r并删除

  sed -i 's/\r$//' your_file.txt
  

• macOS（BSD sed）：需要指定空备份后缀（避免生成备份文件）

  sed -i '' 's/\r$//' your_file.txt
  

• 若习惯输入可视化的^{M字符：按住`Ctrl+V`再按`Ctrl+M`输入实际的}M，命令为

  sed -i 's/^M$//' your_file.txt
  

Python 端修正后的处理脚本 #

之前的脚本出现残留换行，是因为错误地将\r替换成了换行符，而非直接移除。以下两种方式可解决：

方式一：一次性读取处理（适合小文件）

with open('input.txt', 'r', encoding='utf-8', newline='') as in_f:
    raw_content = in_f.read()

# 移除所有\r，同时合并多余的连续换行
clean_content = raw_content.replace('\r', '').replace('\n\n', '\n')

with open('output.txt', 'w', encoding='utf-8', newline='\n') as out_f:
    out_f.write(clean_content)

方式二：逐行处理（适合大文件）

with open('input.txt', 'r', encoding='utf-8') as in_f, open('output.txt', 'w', encoding='utf-8') as out_f:
    for line in in_f:
        # 仅移除行尾的\r，保留正常换行结构
        cleaned_line = line.rstrip('\r')
        out_f.write(cleaned_line)

从SQL导出源头规避问题 #

如果使用MySQL导出，可在导出命令中直接处理换行符，避免后续修改：

mysql -u 用户名 -p 数据库名 -e "SELECT * FROM 表名;" | tr '\r' '\n' > output.txt

使用mysqldump时，可添加--compact --skip-add-locks参数减少额外控制字符输出。

内容的提问来源于stack exchange，提问作者Roxyy