检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在HPC集群上运行Spectrum MPI 在HPC集群上运行Intel MPI 在HPC集群上运行Platform MPI 父主题： 弹性云服务器场景典型应用
主要概念 RDMA RoCE 父主题： 附录
常见问题 RoCE网络问题 STAR-CCM+启动相关问题 父主题： 附录
企业分支、科研组织机构等跨全球地理位置进行及时协同工作，提高效率。 可以利用公有云的跨地域能力，共享计算资源，海量数据，并能实现云端大数据分析。 优化性能 性能比普通云服务器大幅提升。 通过虚拟化优化（SR-IOV、PCI直通）等，各类测试报告显示：大规模云化HPC性能损耗不大。 约束与限制 MPI和通讯库的
/usr/mpi/gcc/openmpi-3.1.0rc2/tests/imb/IMB-MPI1 PingPong 图4 集群运行IB驱动自带OpenMPI 系统回显如图4所示，表示集群上运行IB驱动自带的OpenMPI成功。 父主题： 在HPC集群上运行MPI应用（X86 BMS场景）
IB驱动自带的OpenMPI 社区OpenMPI Spectrum MPI Intel MPI Platform MPI 父主题： 裸金属服务器场景典型应用
/usr/mpi/gcc/openmpi-4.0.2a1/tests/imb/IMB-MPI1 PingPong 图3 集群运行IB驱动自带OpenMPI 系统回显如图3所示，表示集群上运行IB驱动自带的OpenMPI成功。 父主题： 在HPC集群上运行MPI应用（鲲鹏BMS场景）
RDMA RDMA概念 远程直接内存访问(即Remote Direct Memory Access)是一种直接内存访问技术，它将数据直接从一台计算机的内存传输到另一台计算机，无需尤其是面对高性能计算HPC、大数据分析和浪涌型IO高并发、低时延应用，现有TCP/IP软硬件架构和应用
安装和使用MPICH 操作场景 本节指导用户在鲲鹏BMS集群上安装和使用MPICH应用（以版本mpich-3.3.2为例）。 对于集群中的每台BMS，都需要执行该操作。 前提条件 已配置BMS集群间互相免密登录。 操作步骤 安装MPICH。 下载MPICH。 下载地址：https://aur
RoCE RoCE概念 RDMA over Converged Ethernet (RoCE)是一种网络协议，允许应用通过以太网实现远程内存访问。目前RoCE有两个协议版本，v1和v2。其中RoCE v1是一种链路层协议，允许在同一个广播域下的任意两台主机直接访问。而RoCE v
MPI安装 Platform MPI安装 PlatformMPI使用STAR-CCM+自带的，不需要安装。 OpenMPI安装（可选） 若使用STAR-CCM+自带的，可不用安装。 cd /root tar zxvf openmpi-4.0.1.tar.gz cd openmpi-4
3为例）上运行Intel MPI应用（l_mpi_2018.0.128版本）。 前提条件 已成功创建带IB网卡的弹性云服务器，并绑定了弹性IP进行登录。 已使用私有镜像创建多个弹性云服务器。 操作步骤 关闭防火墙。 登录集群中任意一台ECS。 执行以下命令，关闭ECS防火墙。 # systemctl
MPI应用（以版本platform_mpi-09.01.04.03r-ce为例）。 前提条件 已成功创建带IB网卡的弹性云服务器，并绑定了弹性IP进行登录。 已使用私有镜像创建多个弹性云服务器。 操作步骤 关闭防火墙。 登录集群中任意一台ECS。 执行以下命令，关闭ECS防火墙。 # systemctl
继承BMS、H2型、HL1型、HI3型云服务器对IB网卡的使用约束与限制，使用IPoIB特性的弹性云服务器不支持迁移。 继承H2型、HL1型、HI3型云服务器对IB网卡的使用约束与限制，使用的IB网络不支持安全组、Qos、三层及以上网络功能。 受限于网卡驱动限制，使用IPoIB特性的弹性云服务器不支持anti
配置节点互信 配置节点互信免密登录 STAR-CCM+集群运行时候需要跨节点运行，推荐使用互信免密登录。 # 生成ssh公钥和私钥 ssh-key-gen # 拷贝公钥到指定主机的~/.ssh/authorized_key文件中 ssh-copy-id root@目标主机IP 例如：ssh-copy-id
通讯录安装 Udapl安装和测试 Udapl安装 cd /root wget https://linux.mellanox.com/public/repo/mlnx_ofed/4.1-1.0.2.0/SRPMS/dapl-2.1.10mlnx-OFED.3.4.2.1.0.41102
安装和使用社区OpenMPI 操作场景 本节指导用户在BMS上安装和使用社区OpenMPI（以4.0.2版本为例）。 对于集群中的每台BMS，都需要执行该操作。 前提条件 已配置BMS集群间互相免密登录。 操作步骤 安装OpenMPI。 下载社区OpenMPI，版本号为“openmpi-4
RoCE网络问题 dtest或rping打流测试网络双向不通问题 问题现象： dtest/rping打流测试网络双向不通问题：A机器作为Server端，B机器作为Client端，dtest/rping测试RoCE网络异常；调换A、B机器角色，B机器作为Server端，A机器作为C
安装和使用社区OpenMPI 操作场景 本节指导用户在BMS上安装和使用社区OpenMPI（以3.1.1版本为例）。 对于集群中的每台BMS，都需要执行该操作。 前提条件 已配置BMS集群间互相免密登录。 操作步骤 安装HPC-X工具套件。 使用社区OpenMPI时，需要同时使用Mellanox的HPC-X
Platform MPI 操作场景 该任务指导用户在BMS集群上运行Platform MPI应用（platform_mpi- 09.01.04.03r-ce.bin版本）。 前提条件 已配置BMS集群间互相免密登录。 集群中所有的BMS，均已安装Platform MPI。 操作步骤
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
