我的集群在Infiniband FDR上使用MVAPICH2,我正在考虑使用RDMA进行模拟。我知道MPI_Put和MPI_Get调用显式调用RDMA操作,但是我想知道这是否是在MPI中使用RDMA的唯一方法。
我目前的实现包括用于通信的通道语义(发送/接收),以及MPI_Reduce和MPI_Gatherv。我知道MVAPICH2有可以用来启用RDMA的配置参数。如果使用MPI的程序启用了发送/接收呼叫和RDMA,那么MPI是否会自动从信道语义转换为内存语义(put/get),还是MPI_Put和MPI_Get的显式使用是在MVAPICH2中实现RDMA的唯一方法?
MPI_Send需要相应的MPI_Receive,无论它们是阻塞还是非阻塞,都不重要,因为发送必须满足接收。RDMA没有这个要求,而是只实现了MPI_Put (写到远程内存)或MPI_Get (从远程内存读取)。我试图找出在仍然使用发送和接收时是否启用rdma,允许MVAPICH2以某种方式自动将发送/接收转换为适当的rdma调用。
发布于 2018-03-24 01:46:34
如果MVAPICH2是用正确的选项构建的,它将对所有MPI操作使用RDMA,包括支持的硬件(包括InfiniBand )上的MPI_Send和MPI_Recv。因此,您不需要使用MPI_Put/Get来利用具有RDMA功能的硬件.事实上,使用MPI_Send/Recv可能会更快,因为它们通常会得到更好的优化。
MPI库使用各种设计将MPI_Send/Recv操作转换为RDMA语义。详情可在文献中找到。。
https://stackoverflow.com/questions/49205611
复制相似问题