合并两个CSV文件时出现多余列的技术问题求助

问题核心原因 #

合并后多出列的关键问题是两个DataFrame的列名不匹配（包括大小写、空格、特殊字符差异），concat/append会保留所有不同列名的列，导致列数增加。另外你代码里的df1.append(df2, [['Q', 'A', 'C']])属于用法错误：append不接受列名映射参数，且你写的Q/A/C和实际列名Question/Answer/Class完全不匹配，这会引发列名混乱。

修正步骤 #

1. 先确认列名一致性
   打印两个文件的列名，检查是否完全一致：

   print("df1列名:", df1.columns.tolist())
   print("df2列名:", df2.columns.tolist())
   

   如果列名不一致（比如df2列名是缩写或带空格），统一成相同列名：

   # 将df2列名对齐df1
   df2.columns = ['Question', 'Answer', 'Class']
   

2. 正确使用concat合并
   列名统一后，用concat合并并重置索引：

   dfmaster = pd.concat([df1, df2], ignore_index=True)
   

3. 废弃append的正确用法（不推荐）
   Pandas的append已被官方废弃，优先用concat。如果非要用，正确写法是：

   dfmaster1 = df1.append(df2, ignore_index=True)
   

   无需额外传列名参数，列名一致时会自动合并。

4. 检查CSV文件本身

   • 确认dffinal.csv导出时用了index=False，没有导出多余的索引列；
   • 如果TobeMerged.csv包含无列名的索引列，读取时指定跳过：

     df2 = pd.read_csv('/content/drive/TobeMerged.csv', encoding='windows-1252', index_col=0)
     

内容的提问来源于stack exchange，提问作者Viswavardhanreddy Karna