You need to enable JavaScript to run this app. Python for循环中正确写入CSV文件 适配爬虫数据解决Excel格式错乱
优惠活动
大模型
产品
解决方案
定价
更多

Python for循环中正确写入CSV文件 适配爬虫数据解决Excel格式错乱

爬虫CSV导出错乱问题修复方案

核心问题定位

  • 子内容未拆分的根因:你当前代码完全没执行对child.text的拆分操作,直接把含换行符的整段长文本作为单个元组元素传给writerow,CSV写入逻辑只会把这个长字符串识别为单格内容,即便内部有换行,也会被自动包裹在双引号内存为一个单元格,自然达不到拆分预期。
  • 单字符乱码的根因:你移除heading.text后如果直接将child.text字符串本身传给writerow,由于csv.writer的写入方法要求传入可迭代对象,字符串本身是逐字符可遍历的,会被自动拆分为单字符序列,每个字符占一个独立单元格,最终导致格式完全错乱。

正确实现逻辑

  1. 对child.text内容按换行符\n做分割,同时清理每段文本首尾的多余空白,过滤空行
  2. 拼接一级标题文本和拆分后的子内容,形成一维的行数据列表,保证所有待写入的列内容是平级的、无嵌套

修改后核心代码

csvwriter = csv.writer(csvfile) 
for heading in All_Heading:
    driver.execute_script("return arguments[0].scrollIntoView(true);", heading)
    ChildElement = heading.find_elements_by_xpath("./../div/div")
    for child in ChildElement:
        driver.execute_script("return arguments[0].scrollIntoView(true);", child)
        # 按换行拆分并清理子内容
        split_child = [item.strip() for item in child.text.split("\n") if item.strip()]
        # 拼接为一维行数据
        row_data = [heading.text] + split_child
        csvwriter.writerow(row_data)

效果验证

你之前打印的样例数据('Flower', 'Afghani 3.5g Pre-Pack Details\nGREEN GOLD ORGANICS\nAfghani 3.5g Pre-Pack\nIndica\nTHC: 16.2%\n1/8 oz - \n$45.00'),经过上述逻辑处理后,写入的每段内容会自动拆分到独立单元格:

  • 第1列存储一级标题Flower
  • 后续列依次存储拆分后的商品详情、品牌、品种、THC含量、规格、价格内容,不会出现整段打包或单字符拆分的问题

注:CSV格式本身支持不同行的列数差异,若部分商品的信息项数量不同,Excel打开时会自动将空缺位置留空,不会引发格式报错。


内容的提问来源于stack exchange,提问作者T0ne

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.10.22 21:27:04