Python2.7使用unicodecsv写入CSV时数据单行合并问题求助
解决unicodecsv写入CSV时所有数据合并到一行的问题
嘿,我碰到过好多次这种问题啦!你现在的情况大概率是数据结构没处理对——你的scraped_data不是一行对应一个字典的列表,而是单个字典,每个键下面塞了所有条目的值(比如city字段是一堆电话/城市的拼接字符串,address是所有地址的集合),这就导致写入CSV时只会生成一行,把所有值一股脑塞进去。
咱们一步步来修正:
第一步:确认正确的数据结构
首先,你需要把数据整理成字典列表的格式,每个字典对应CSV里的一行数据,举个例子:
scraped_data = [ {'profile_url': '/profile/Colin-Welman/', 'city': 'New York', 'phone': '(844) 292-5128'}, {'profile_url': '/profile/andreagressinger/', 'city': 'Los Angeles', 'phone': '(310) 505-7493'}, # 剩下23条数据以此类推... ]
第二步:如果原始数据是分开的列表,先合并
如果你现在的原始数据是几个独立的列表(比如单独的profile链接列表、城市列表、电话列表),用zip()就能快速把它们整合成符合要求的字典列表:
# 假设你现在的原始数据是这样的 profile_urls = ['/profile/Colin-Welman/', '/profile/andreagressinger/', ...] cities = ['New York', 'Los Angeles', ...] phones = ['(844) 292-5128', '(310) 505-7493', ...] # 用列表推导式+zip合并成字典列表 scraped_data = [ {'profile_url': url, 'city': city, 'phone': phone} for url, city, phone in zip(profile_urls, cities, phones) ]
⚠️ 这里要注意:一定要保证几个列表的长度完全一致,不然会有数据丢失哦!
第三步:用unicodecsv正确写入CSV
数据结构对了之后,写入就简单了,用DictWriter来处理,记得先写表头再批量写入数据:
import unicodecsv # 以二进制模式打开文件,指定编码(这里用utf-8适配多语言) with open('output.csv', 'wb') as f: # 从第一个字典里提取字段名作为CSV表头 fieldnames = scraped_data[0].keys() writer = unicodecsv.DictWriter(f, fieldnames=fieldnames) # 先写入表头行 writer.writeheader() # 批量写入所有数据行 writer.writerows(scraped_data)
额外提醒:避开常见坑点
- 别搞混
writerow()和writerows():前者是写一行(传入单个字典),后者是写多行(传入字典列表),传错了也会导致格式混乱; - 如果字段值里有换行符、逗号这类特殊字符,记得提前清洗,比如把换行符替换成空格:
value.replace('\n', ' '),避免CSV格式被破坏。
内容的提问来源于stack exchange,提问作者FabricioG
相关产品推荐
相关产品推荐

