类表格内存数据结构从C++传递到Java的最高效零拷贝方案是什么

你提到的两种Apache Arrow实现路径的问题确实存在：序列化后走JNI传递的方案有内存拷贝开销，Plasma方案需要额外部署运维服务，除此之外还有两种更适配同进程零拷贝需求的实现方案： #

可选更优方案 #

• JNI DirectByteBuffer 绑定原生内存
  你可以在C侧调用JNI接口NewDirectByteBuffer，直接将C进程中已分配的原生内存地址封装为Java侧的DirectByteBuffer对象返回，全程没有内存拷贝操作。如果搭配Apache Arrow使用，Java侧的Arrow Vector可以直接绑定到该DirectByteBuffer对应的内存地址，直接读取原生内存中存储的Arrow格式数据。
  唯一需要注意的是内存生命周期同步：你需要自行保证Java侧还在访问内存时，C++侧不会提前释放对应内存，可通过Java Cleaner机制或者双边引用计数的方式实现。
• Apache Arrow C Data Interface 跨语言共享
  这是Arrow官方推出的标准化跨语言零拷贝数据交换方案，不需要序列化、不需要依赖中间服务。你只需要在C++侧将Arrow数据结构导出为ABI兼容的描述符，通过JNI传递描述符指针到Java侧后，Java Arrow库可以直接导入该描述符，直接访问原生内存中的Arrow数据，全程零拷贝。
  该方案相比手动封装DirectByteBuffer的优势是已经内置了Schema对齐、内存生命周期管理的标准化逻辑，不需要自行实现兼容逻辑，开发成本更低，适配性更强。

选型建议 #

如果是同进程内C++与Java模块的数据交换，优先选择Arrow C Data Interface方案，没有额外运维依赖，开发成本低，性能最优；如果后续有跨进程数据共享的需求，再考虑Plasma方案。

内容的提问来源于stack exchange，提问作者Lukasz Zuchowski