OpenMPI MPI_Send诉Intel MPI MPI_Send

Question

我有一个使用openmpi编译和运行的代码。最近，我想使用Intel MPI运行同样的代码。但是我的代码并没有像预期的那样工作。我深入研究了代码，发现MPI_Send在这两种实现中的行为不同。

我从不同的论坛得到了使用MPI_Isend而不是来自不同论坛的MPi_Send的建议。但这需要大量的工作来修改代码。在英特尔的MPI中有什么解决办法让它像在OpenMPI中一样工作吗？可能是一些旗帜或增加缓冲区或其他东西。提前谢谢你的回答。

int main(int argc, char **argv) {
    int numRanks;
    int rank;
    char cmd[] = "Hello world";
    MPI_Status status;

    MPI_Init (&argc, &argv);
    MPI_Comm_size (MPI_COMM_WORLD, &numRanks);
    MPI_Comm_rank (MPI_COMM_WORLD, &rank);
    if(rank == 0) {
            for (int i=0; i< numRanks; i++) {
                    printf("Calling MPI_Send() from rank %d to %d\n", rank, i);
                  MPI_Send(&cmd,sizeof(cmd),MPI_CHAR,i,MPI_TAG,MPI_COMM_WORLD);
                    printf("Returned from MPI_Send()\n");
            }
    }
    MPI_Recv(&cmd,sizeof(cmd),MPI_CHAR,0,MPI_TAG,MPI_COMM_WORLD,&status);
    printf("%d receieved from 0 %s\n", rank, cmd);

    MPI_Finalize();
}

OpenMPI结果

# mpirun --allow-run-as-root  -n 2  helloworld_openmpi
Calling MPI_Send() from rank 0 to 0
Returned from MPI_Send()
Calling MPI_Send() from rank 0 to 1
Returned from MPI_Send()
0 receieved from 0 Hello world
1 receieved from 0 Hello world

英特尔MPI结果

# mpiexec.hydra -n 2 /root/helloworld_intel

Calling MPI_Send() from rank 0 to 0

卡在MPI_Send了。

Answer 1

假设MPI_Send()在发布匹配的接收之前返回是不正确的，所以您的代码在MPI标准方面是不正确的，您很幸运它没有挂在Open中。

MPI实现通常急于发送小消息，以便MPI_Send()能够立即返回，但这是标准没有强制要求的实现选择，“小”消息取决于库版本、所使用的互连和其他因素。

这里唯一安全和可移植的选择是编写正确的代码。

FWIW，MPI_Bcast(cmd, ...)是一个更适合这里，假设所有级别已经知道字符串长度加上NUL终结者。

最后但并非最不重要的是，缓冲区参数是cmd而不是&cmd。