Python for循环中正确写入CSV文件 适配爬虫数据解决Excel格式错乱
爬虫CSV导出错乱问题修复方案
核心问题定位
- 子内容未拆分的根因:你当前代码完全没执行对
child.text的拆分操作,直接把含换行符的整段长文本作为单个元组元素传给writerow,CSV写入逻辑只会把这个长字符串识别为单格内容,即便内部有换行,也会被自动包裹在双引号内存为一个单元格,自然达不到拆分预期。 - 单字符乱码的根因:你移除
heading.text后如果直接将child.text字符串本身传给writerow,由于csv.writer的写入方法要求传入可迭代对象,字符串本身是逐字符可遍历的,会被自动拆分为单字符序列,每个字符占一个独立单元格,最终导致格式完全错乱。
正确实现逻辑
- 对
child.text内容按换行符\n做分割,同时清理每段文本首尾的多余空白,过滤空行 - 拼接一级标题文本和拆分后的子内容,形成一维的行数据列表,保证所有待写入的列内容是平级的、无嵌套
修改后核心代码
csvwriter = csv.writer(csvfile) for heading in All_Heading: driver.execute_script("return arguments[0].scrollIntoView(true);", heading) ChildElement = heading.find_elements_by_xpath("./../div/div") for child in ChildElement: driver.execute_script("return arguments[0].scrollIntoView(true);", child) # 按换行拆分并清理子内容 split_child = [item.strip() for item in child.text.split("\n") if item.strip()] # 拼接为一维行数据 row_data = [heading.text] + split_child csvwriter.writerow(row_data)
效果验证
你之前打印的样例数据('Flower', 'Afghani 3.5g Pre-Pack Details\nGREEN GOLD ORGANICS\nAfghani 3.5g Pre-Pack\nIndica\nTHC: 16.2%\n1/8 oz - \n$45.00'),经过上述逻辑处理后,写入的每段内容会自动拆分到独立单元格:
- 第1列存储一级标题
Flower - 后续列依次存储拆分后的商品详情、品牌、品种、THC含量、规格、价格内容,不会出现整段打包或单字符拆分的问题
注:CSV格式本身支持不同行的列数差异,若部分商品的信息项数量不同,Excel打开时会自动将空缺位置留空,不会引发格式报错。
内容的提问来源于stack exchange,提问作者T0ne
相关产品推荐
相关产品推荐

