如何为aarch64平台添加JHDF5支持？TPC-AI ARM运行报错求助

我正在研究TPC组织的TPC-AI基准测试，该基准测试采用Java编写的Parallel Data Generation Framework（PDGF）生成输入数据集，其依赖之一为JHDF5，且仅适配x86平台。在ARM平台运行数据生成步骤时出现报错：

Bundle jhdf5 (JHDF 5) does not support platform linux_aarch64

command was: java -Djava.awt.headless=true -jar /home/benchmark/tpcx-ai-v1.0.3.1/lib/pdgf/pdgf.jar -l /home/benchmark/tpcx-ai-v1.0.3.1/data-gen/config/tpcxai-schema.xml -l /home/benchmark/tpcx-ai-v1.0.3.1/data-gen/config/tpcxai-generation.xml -ns -sf 0.5 -sp MY_SEED 1234 -sp includeLabels 1.0 -sp TIVF 1.0 -s lineitem customer product CUSTOMER_IMAGES_META order_returns marketplace financial_transactions financial_account Review ProductRating CUSTOMER_IMAGES CONVERSATION_AUDIO failures order order_weekly_sales store_dept -output '"/home/benchmark/tpcx-ai-v1.0.3.1/output/raw_data/training/"'

作为Java新手，有两个核心问题：

1. JVM不是应该实现平台无关吗？为何在ARM平台运行失败？
2. 是否可以解压jar包，替换需要ARM变体的组件后重新打包以在ARM平台使用？

尝试执行jar -xf pdgf.jar解压pdgf.jar，但未找到hdf5相关内容，仅在MANIFEST.MF文件中发现hdfs相关路径：

extlib/hadoopLibs/hdfs/hadoop-hdfs.jar extlib/hadoopLibs/hdfs/protobuf-java.jar

而这些路径实际并不存在。该基准测试在x86平台可正常运行。

问题1解答：JVM平台无关性的局限 #

JVM的平台无关性是针对Java字节码而言的：Java代码编译成字节码后，能在任何装有对应JVM的平台上运行。但如果Java程序依赖了本地原生库（Native Libraries，基于JNI/JNA实现），这些库是针对特定CPU架构（如x86_64、aarch64）和操作系统编译的，不具备跨平台性。

JHDF5是Java对HDF5库的封装，它底层依赖HDF5的原生库文件（如Linux下的.so文件）。PDGF打包的JHDF5仅包含x86_64架构的原生库，在ARM64（linux_aarch64）平台上，JVM无法找到适配的原生库，因此抛出平台不支持的错误。

问题2解答：可以替换ARM变体组件，但需注意依赖加载逻辑 #

可以替换适配ARM64的JHDF5组件来实现ARM平台运行，但不需要直接修改pdgf.jar（因为JHDF5是外部依赖，不在该jar内），具体步骤如下：

1. 获取适配ARM64的JHDF5版本

   • 找到与PDGF当前使用的JHDF5版本一致的ARM64 Linux发行包，包含两个核心部分：
     • jhdf5.jar：Java封装层的jar包
     • 原生库文件：如libjhdf5.so，通常位于native/linux-aarch64目录下

2. 定位PDGF的JHDF5依赖位置

   • 检查TPC-AI安装目录下的依赖目录，通常是/home/benchmark/tpcx-ai-v1.0.3.1/lib/pdgf/extlib或类似路径，找到包含x86_64版本JHDF5的文件夹（可能名为jhdf5或带有x86标识）。

3. 替换JHDF5组件

   • 将下载的ARM64版本jhdf5.jar替换原路径下的x86版本jar包
   • 将ARM64的原生库文件替换到对应native目录，若没有linux-aarch64目录则手动创建

4. 调整JVM加载路径

   • 若PDGF未自动识别ARM原生库，需在运行命令中添加-Djava.library.path参数指定原生库所在目录，例如：

     java -Djava.awt.headless=true -Djava.library.path=/home/benchmark/tpcx-ai-v1.0.3.1/lib/pdgf/extlib/jhdf5/native/linux-aarch64 -jar /home/benchmark/tpcx-ai-v1.0.3.1/lib/pdgf/pdgf.jar [原命令参数]
     

5. 验证依赖路径（可选）

   • 若MANIFEST.MF中的路径无效，可忽略该配置，直接通过-classpath参数显式指定所有依赖jar包的路径，确保JHDF5的jar被正确加载。

内容的提问来源于stack exchange，提问作者Rakshith G B