Scrapy中如何在process_request方法中为请求设置请求体？

• 问题根源：Scrapy的Request对象是不可变对象，request.replace()方法仅会返回一个修改后的新Request实例，不会改动原请求对象。你之前只调用了replace()但未返回这个新对象，Scrapy仍会使用原始的空body请求。
• 正确做法：在process_request中返回修改后的新Request对象，而非返回None。

示例代码：

def process_request(self, request, spider):
    body = self.body.encode('utf-8') # 已确认self.body内容正确
    # 生成并返回修改后的新请求
    return request.replace(body=body)

• 补充说明process_request的返回逻辑：
  • 返回None：Scrapy会继续处理原始请求，你的修改不会生效
  • 返回新的Request对象：Scrapy会终止原请求的处理流程，转而使用这个新请求

内容的提问来源于stack exchange，提问作者TEOTU