Node.js Express服务器处理Protocol Buffers二进制数据反序列化失败问题求助

你遇到的核心问题很明确：服务器端用了错误的请求解析中间件，bodyParser.urlencoded是专门用来处理URL编码的表单数据的，完全不适合处理Protobuf这种二进制数据流，这才导致了req.body乱码、转Uint8Array为空，最终反序列化报错的情况。

下面是具体的修复方案：

1. 替换Express的请求解析中间件 #

把原来的bodyParser.urlencoded换成bodyParser.raw()，这个中间件会直接将请求体保留为Buffer类型（和Protobuf需要的Uint8Array完全兼容）。修改后的服务器代码如下：

const express = require('express');
const Schema = require('./employees_pb');
const bodyParser = require('body-parser');
const app = express();

// 使用raw中间件处理二进制数据，指定匹配二进制类型
app.use(bodyParser.raw({ type: 'application/octet-stream' }));
const port = 5004;

app.post('/proto', (req, res) => {
  try {
    // req.body现在是Buffer，直接传入deserializeBinary即可
    const employees = Schema.Employees.deserializeBinary(req.body);
    
    // 遍历并打印员工信息，比toString()更清晰直观
    employees.getEmployeesList().forEach(emp => {
      console.log(`ID: ${emp.getId()}, Name: ${emp.getName()}, Salary: ${emp.getSalary()}`);
    });
    
    res.sendStatus(200); // 返回成功状态码
  } catch (err) {
    console.error('反序列化失败:', err);
    res.sendStatus(400); // 返回错误状态码
  }
});

app.listen(port, () => {
  console.log(`服务器运行在 http://localhost:${port}`);
});

2. 优化curl请求（可选但推荐） #

在发送请求时显式指定Content-Type为application/octet-stream，让服务器更明确知道这是二进制数据，避免中间件的类型匹配问题：

curl --data-binary "@/Users/ofir.benezra/jsProj/employeesbinary" -H "Content-Type: application/octet-stream" -X POST http://localhost:5004/proto

为什么原来的方式会失败？ #

• bodyParser.urlencoded会把请求体当作UTF-8字符串解析，而Protobuf二进制数据包含大量非ASCII字节，解析过程中会破坏原始的字节结构，导致req.body变成乱码的对象。
• 当你尝试用Uint8Array.from(req.body)转换时，因为req.body已经是被破坏的字符串/对象，所以得到空数组。
• 本地反序列化正常是因为你直接使用了原始的序列化字节数组或本地文件的Buffer，没有经过错误的解析中间件处理，字节结构完全保留。

这样修改后，服务器就能正确接收并反序列化Protobuf数据了。

内容的提问来源于stack exchange，提问作者Ofir Ben Ezra