添加6层嵌套Protobuf消息时PHP出现内存溢出错误如何解决?
问题原因
- 你使用的纯PHP版php-protobuf库处理深层嵌套消息时,内存占用会随嵌套层数指数级增长,PHP默认128M的内存上限无法支撑6层嵌套带字段的解析开销,空消息因为不需要解析字段内容所以内存占用极低可以正常运行。
- 你的proto定义存在错误:原始请求数据中存在多个同编号的重复字段(比如编号11的字段出现了6次、编号8下的编号1字段出现了3次),你没有给这类字段加
repeated修饰符,会导致解析逻辑异常,额外占用大量内存。 - 你用
var_dump打印深层嵌套的Protobuf对象时,也会额外占用大量内存,进一步加剧内存溢出问题。
解决方案
- 先临时调高PHP内存上限验证问题,在代码最开头加入以下代码:
ini_set('memory_limit', '256M');
调整后如果可以正常运行,即可确认是默认内存不足导致的报错。
- 优先更换为Protobuf官方提供的C扩展版本,纯PHP实现的php-protobuf性能差、内存占用高,仅适合简单测试场景,生产环境使用C扩展后,处理相同嵌套结构的内存占用可降低90%以上,不会出现内存溢出问题。
- 修正proto定义:给所有存在多个返回值的字段添加
repeated修饰符,示例如下:
// 错误定义 string unknown13 = 11; string unknowsthree7 = 1; // 修正后定义 repeated string unknown13 = 11; repeated string unknowsthree7 = 1;
- 不要直接用
var_dump打印完整的Protobuf对象,改为调用serializeToString()方法直接获取序列化后的二进制结果,或者仅打印需要验证的单个字段值,减少不必要的内存开销。
内容的提问来源于stack exchange,提问作者Edward Dulhunty
相关产品推荐
相关产品推荐

