使用Express请求网站HTML返回Invalid header value char错误如何解决

报错根因 #

这个错误是Node.js内置的HTTP解析器对响应头格式校验严格导致的，仅当目标站点返回的响应头包含不符合RFC规范的字符（比如未转码的中文、特殊控制符、非UTF-8编码的内容）时触发，此时你的请求已经成功发出，问题出在响应解析环节。

可行解决方法 #

• 方案1：全局关闭HTTP头严格校验
  启动Node服务时添加启动参数 --insecure-http-parser 即可，修改后的启动命令示例：

  node --insecure-http-parser app.js
  

  该方案适配所有请求场景，无需修改业务代码。

• 方案2：单独为指定请求关闭严格校验（Node.js 12+支持）
  如果不想全局修改配置，可以在发起HTTP请求时单独添加insecureHTTPParser: true参数，原生http模块示例代码如下：

  const http = require('http')
  // 第三方请求库同理，在请求配置项中添加该参数即可
  const req = http.request('目标站点URL', {
    insecureHTTPParser: true
  }, res => {
    let htmlContent = ''
    res.on('data', chunk => htmlContent += chunk)
    res.on('end', () => {
      // 处理返回的HTML字符串
    })
  })
  req.end()
  

• 方案3：修复自定义请求头的编码问题
  如果你在请求中自行添加了包含中文、特殊字符的自定义Header，需要先对Header值做转码，示例：

  // 转码后再赋值给Header
  req.setHeader('自定义Header名', encodeURIComponent('含特殊字符的Header值'))
  

• 方案4：处理非UTF-8编码的响应头
  部分国内站点会使用GBK/GB2312编码返回响应头，可借助iconv-lite类的编码转换库，先将响应头原始Buffer转成对应编码再解析，避免非法字符报错。

确认请求是否发出的方法 #

• 给请求对象添加error、socket事件监听，socket事件触发即代表请求已经成功发送到网络层
• 本地安装抓包工具（如Wireshark、Fiddler）过滤目标站点的请求，可直观看到请求是否发出、返回的原始响应内容

内容的提问来源于stack exchange，提问作者user3455992