无Protobuf目标类信息时JSON转字节报错，能否实现转换？

首先明确结论：没办法在完全不知道目标Protobuf类定义的前提下，完成正确的JSON到Protobuf字节的转换。

为什么会出现UTF-8异常？ #

Protobuf是强类型序列化协议，JSON转Protobuf时必须严格匹配目标字段的类型、编号和规则（比如是否重复、是否为bytes类型）。你遇到的InvalidProtocolBufferException: Protocol message had invalid UTF-8，本质是转换时字段类型不匹配——比如把目标定义为bytes的字段当成普通字符串处理，生成的字节包含非法UTF-8序列，导致服务器解析失败。而指定具体Protobuf类时能正常工作，就是因为类里已经明确了所有字段的规则。

可行的替代方案（无需编译好的目标类，但需要结构信息） #

如果拿不到编译后的目标类，但能获取以下任意一种信息，就能完成转换：

1. 获取目标Protobuf的.proto文件或Descriptor描述符

   • Protobuf提供了动态消息（DynamicMessage）机制，只要有字段的Descriptor（可以从.proto文件加载，或通过反射从服务器端类提取），就能动态构建消息并完成JSON转换。
   • 示例代码（Java）：

     // 从.proto文件加载Descriptor（需借助Protobuf的工具类）
     Descriptor descriptor = ...;
     DynamicMessage.Builder builder = DynamicMessage.newBuilder(descriptor);
     // 将JSON合并到动态消息构建器
     JsonFormat.parser().merge(jsonContent, builder);
     // 生成Protobuf字节
     byte[] protoBytes = builder.build().toByteArray();
     

2. 反推目标Protobuf的字段结构

   • 如果能拿到服务器返回的合法Protobuf字节（比如调用其他正常接口获取），可以用protoc命令反推字段的编号和类型：

     protoc --decode_raw < 合法的proto字节文件
     

   • 反推结果能得到字段编号和对应类型（比如1: string、2: bytes），你可以据此编写匹配的.proto文件，再用动态消息或生成临时类处理JSON转换。注意反推可能存在歧义（比如int32和uint32无法仅通过字节区分），需要结合业务场景判断。

关键注意事项 #

不管用哪种方案，必须保证JSON内容和目标字段类型严格匹配：

• 目标字段为bytes时，JSON里要传入base64编码的字符串，不能直接放原始二进制内容；
• 枚举类型要传入枚举名或对应的数字值，不能随意填写字符串；
• 重复字段要以JSON数组形式传入，不能用单个值。

内容的提问来源于stack exchange，提问作者Тимур Тухтаров