AWS EC2增强型网络实例中DPDK的vfio-pci模式选择疑问

1. IOMMU硬件支持与启用状态 #

• AWS Nitro架构的实例（含c5系列）硬件层面支持IOMMU，但默认未启用。
• 手动启用步骤：
  1. 编辑/etc/default/grub，在GRUB_CMDLINE_LINUX参数中添加intel_iommu=on iommu=pt（Intel实例）或amd_iommu=on iommu=pt（AMD实例）
  2. 执行grub2-mkconfig -o /boot/grub2/grub.cfg生成新启动配置
  3. 重启实例使配置生效

2. NO-IOMMU模式的vfio-pci使用 #

• 若不想启用IOMMU，可通过重新编译vfio-pci模块开启NO-IOMMU模式：
  1. 获取对应内核版本的源码，进入drivers/vfio/pci目录
  2. 修改Kconfig文件，将CONFIG_VFIO_NOIOMMU设为y
  3. 编译模块：make modules SUBDIRS=drivers/vfio/pci
  4. 替换原有模块：rmmod vfio-pci && insmod vfio-pci.ko
• 注意：NO-IOMMU模式下，需确保ENA设备未被其他驱动（如原生ena驱动）占用，且DPDK应用以root权限运行

3. 基础转发示例故障排查建议 #

• 确认ENA设备已解绑原生驱动并绑定到vfio-pci：

  echo "<设备PCI总线地址>" > /sys/bus/pci/drivers/vfio-pci/bind
  

• 检查大页内存预留状态：

  grep HugePages /proc/meminfo
  

• 启动DPDK应用时指定正确参数，例如：

  ./build/forwarding -l 0-1 -n 4 --vdev=net_ena0 -- --portmask=0x1
  

• 查看DPDK启动日志，重点关注设备初始化失败、内存分配失败等错误信息

内容的提问来源于stack exchange，提问作者Kevin Stefanov