使用Pandas读取CSV文件时列分隔不一致问题求助

核心问题分析 #

你手动把原CSV里的逗号全局替换成分号的操作大概率破坏了文件结构——如果原CSV里存在带引号的字符串字段（比如"abc,def"），全局替换会把字段内部的逗号也改成分号，导致Pandas读取时错误拆分这些字段，出现部分行结构异常。另外，欧洲格式的CSV（小数用逗号、字段用分号分隔）根本不需要手动替换，Pandas自带参数就能处理。

具体解决方案 #

1. 放弃手动替换，直接读取原CSV

如果原CSV是字段用分号分隔、小数用逗号的标准欧洲格式，直接用以下代码读取：

import pandas as pd
df = pd.read_csv(path, sep=";", decimal=",")

如果原CSV是字段用逗号分隔，但小数用逗号（这种格式本身有冲突，大概率是原文件用引号包裹了小数字段），尝试指定引号参数读取：

df = pd.read_csv(path, sep=",", decimal=",", quotechar='"')

2. 修复已被错误替换的CSV文件

如果已经替换了逗号导致文件损坏，用Python的csv模块重新处理，只替换字段之间的逗号：

import csv

# 读取原CSV，重新写入为分号分隔的文件
with open("原文件路径.csv", "r", encoding="utf-8") as infile, open("修复后文件.csv", "w", encoding="utf-8", newline="") as outfile:
    # 原CSV的字段分隔符是逗号，引号包裹特殊字段
    reader = csv.reader(infile, delimiter=",", quotechar='"')
    # 写入时用分号作为字段分隔符
    writer = csv.writer(outfile, delimiter=";", quotechar='"')
    writer.writerows(reader)

# 读取修复后的文件
df = pd.read_csv("修复后文件.csv", sep=";", decimal=",")

3. 排查异常行

如果还是有问题，先定位异常行：

# 跳过错误行并打印警告
df = pd.read_csv(path, sep=";", decimal=",", error_bad_lines=False, warn_bad_lines=True)

查看警告信息里的异常行，打开原文件检查这些行是否有格式错误（比如未闭合的引号、额外的分隔符）。

内容的提问来源于stack exchange，提问作者Thomas Hordijk