萌卡篮球球员掉落2.9:Intel MPI 安装 - `╰☆Beyonds的日志 - 网易博客

安装

根据手册安装 Intel MPI 库，保正库、脚本和实用程序安装正常。

起步

1. 加载 mpivars.[c]sh 脚本 (或者以其它类似方式加载 Intel MPI 库的环境)。
2. 创建文本文件 mpd.hosts ，其中保存有集群的节点列表，每行一个名字
3. (只针对开发者) 确保环境变量 PATH 中包含有相应的编译器，比如 icc。
4. (只针对开发者) 使用适当的编译驱动编译测试程序，比如 mpiicc

   $ mpiicc -o test  test.c
   

5. 使用 mpirun 运行测试程序

   $ mpirun -r ssh -f mpd.hosts -n <# of processes> ./test
   

编译和链接

(只针对开发者) 编译和链接 Intel MPI 库：

1. 保证在 PATH 环境变量中编译器设置正确。使用 Intel 编译器，注意 LD_LIBRARY_PATH 环境变量中含有编译库的路径。
2. 通过相应的 mpi 命令编译 MPI 程序。比如调用 mpicc 使用 GNU C 编译器：

   $ mpicc /test.c
   

   所以支持的编译器都有对应的以 mpi 开头的命令，比如 Intel Fortran (ifort) 对应的为 mpiifort.

设置 MPD 守护进程

Intel MPI 库使用 Multi-Purpose Daemon (MPD) 任务调度机制。为运行使用 mpiicc(或类似) 编译的程序，首先需要设置好 MPD 守护进程。

与系统管理员为系统中所有用户启动一次 MPD 守护进程不同，用户需要启动和维护自己的一组 MPD 守护进程。这种设置增强了系统安全性，并为控制可执行程序的环境提供了更强的灵活性。

设置守护进行的步骤如下：

1. 设置相应的环境变量和目录。比如，在 .cshrc 或 .bashrc 文件中：
   • 保证 PATH 变量中包含有 /bin 或者 Intel 64 位架构对应的 /bin64 目录，其中 指的是 MPI 的安装路径。可 使用 Intel MPI 库中带有的 mpivars.[c]sh 来设置此变量。
   • 确保 PATH 中包含有的 Python 至少为 2.2 或以上版本。
   • (只对开发者) 如果使用 Intel 编译器，确保 LD_LIBRARY_PATH 变量包含有编译 器的库目录。可使用编译器中带有的 {icc,ifort}*vars.[c]sh 脚本来设置。
   • 设置应用程序所需要的其它环境变量。
2. 创建 $HOME/.mpd.conf 文件，设置 MPD 密码，需要在文件中写入一行：

   secretword=
   

   不要使用 Linux 登陆密码。 可为任意字符串，它仅仅在不同 的集群用户对 MPD 守护进程进行控制时有用。

3. 使用 chmod 设置 $HOME/.mpd.conf 文件的权限，使得它只能被你自己读写：

   $ chmod 600 $HOME/.mpd.conf
   

4. 保证你在集群的所有节点上 rsh 命令看到同样的 PATH 和 .mpd.conf 内容。 比如在集群的所有节点上执行下面的命令：

   $ rsh  env
   $ rsh  cat $HOME/.mpd.conf
   

   保证每个节点都能够与其它任意节点连接。可使用安装中提供的 sshconnectivity 脚本。该脚本使用提供所有节点列表的文件作为参数，每个节点一行：

   $ sshconnectivity.exp machines.LINUX
   

   或集群使用的是 ssh 而不是 rsh, 可参考后面的注释 ¹ 作相应的命令调整。

5. 创建文本文件 mpd.hosts, 其中列出了集群中所有的节点，每行一个主机名。比如：

   $ cat > mpd.hosts
   node1
   node2
   ...
   D
   

6. 使用 mpdallexit 命令关闭上一次的 MPD 守护进程。

   $ mpdallexit
   

7. 使用 mpdboot ² 命令启动 MPD 守护进程。

   $ mpdboot -n <#nodes>
   

   如果文件 $PWD/mpd.hosts 存在，则会被用作默认参数。如果没有主机名文件，启 用 mpdboot 只会在本地机器上运行 MPD 守护进程。

8. 使用 mpdtrace 命令检查 MPD 守护进程的状态：

   $ mpdtrace
   

   其输出结果应该为当前进行 MPD 守护进程的节点列表。该列表应该与 mpd.hosts 文件中节点列表符合。

选择网络结构

Intel MPI 库会动态选择大部分适用的网络结构以便 MPI 进程之间进行通讯。欲选择特定的网络结构，需要设置环境变量 I_MPI_DEVICE 为下表中的某个值：

$ mpiexec -n <# of processes> ./myprog

$ mpiexec -genv I_MPI_DEVICE shm -n <# of processes> ./myprog

$ mpiexec -genv I_MPI_DEVICE rdma -n <# of processes> ./myprog