Twisted agent.request报错cannot use bytes pattern字符串匹配错误
报错原因
该报错是Python 3环境下Twisted接口参数类型不匹配导致的:
Twisted在Python 3版本中的HTTP客户端实现要求,请求方法、请求URL、请求头的键和值必须传入bytes字节类型,不能直接传入str字符串类型。原代码中所有相关传参均为str类型,内部处理时用bytes规则匹配字符串对象,直接触发类型错误。
另外原代码还有两处逻辑问题:
- 错误信息、用法提示的打印写法错误,直接把
sys.stderr对象作为打印内容传入,会输出多余的对象信息 - 响应头返回的键值本身也是bytes类型,直接打印会带
b''前缀,和预期的可读输出格式不符
修改方案
按以下规则调整代码即可:
- 所有传给
agent.request()的请求方法、URL参数转成bytes类型 - 构造
Headers对象时,所有请求头的键、对应值都转成bytes类型 - 修正print语句的stderr输出写法,通过
file=sys.stderr指定错误输出流 - 打印响应头时将bytes类型的头名、头值解码为utf-8字符串,和预期输出格式对齐
修正后的完整代码如下:
import sys from twisted.internet import reactor from twisted.web.client import Agent from twisted.web.http_headers import Headers def printHeaders(response): print('HTTP version:', response.version) print('Status code:', response.code) print('Status phrase:', response.phrase) print('Response headers:') for header, value in response.headers.getAllRawHeaders(): # 解码bytes为可读字符串 print(header.decode('utf-8'), [v.decode('utf-8') for v in value]) def printError(failure): print(failure, file=sys.stderr) def stop(result): reactor.stop() if len(sys.argv) != 2: print("Usage: python agent_request.py URL", file=sys.stderr) exit(1) agent = Agent(reactor) # 所有请求头的键、值都传入bytes类型 headers = Headers({b'User-Agent': [b'Twisted WebBot'], b'Content-Type': [b'text/x-greeting']}) # 请求方法、URL都转成bytes类型传入 d = agent.request(b'HEAD', sys.argv[1].encode('utf-8'), headers=headers) d.addCallbacks(printHeaders, printError) d.addBoth(stop) reactor.run()
运行说明
修改完成后执行原运行命令即可得到符合预期的响应头输出,如果测试地址无法连通,可以替换为可正常访问的站点地址验证逻辑。
内容的提问来源于stack exchange,提问作者tesla john
相关产品推荐
相关产品推荐

