RDMA读写数据的存储位置和可见性语义

在RDMA通信中，需要确保数据存储在正确的位置，并且只有预期的接收方能够看到这些数据。一种解决方法是使用RDMA内存注册，这是将本地内存注册到RDMA适配器中以便进行远程访问的机制。以下是一个示例代码：

客户端：

struct ibv_mr *mr = ibv_reg_mr(pd, buf, size, IBV_ACCESS_REMOTE_WRITE | IBV_ACCESS_REMOTE_READ);

服务端：

struct ibv_mr *mr = ibv_reg_mr(pd, buf, size, IBV_ACCESS_LOCAL_WRITE | IBV_ACCESS_REMOTE_READ | IBV_ACCESS_REMOTE_WRITE);

在这个示例中，客户端将本地缓存注册为可远程写和读的内存区域，服务端将本地缓存注册为本地写和远程读写的内存区域。这意味着客户端可以将数据写入缓存，并通过RDMA将数据发送到服务端，服务端可以远程读取和写入这个缓存。使用内存注册机制，可以确保数据存储在正确的位置，并且只有预期的接收方能够看到这些数据。