HPC简明使用文档.pdfVIP

RedHatHPC简介和基本工具使用

一、HPC简介

HPC主要由2部分组成：安装节点（installnode）、计算节点（computenode）。安

装节点主要负责整个集群的管理、软件分发的功能，计算节点负责计算任务的运行。因此在

每台计算节点上都必须安装HPC的计算软件，安装节点一般不参与计算，不用安装计算软

件，一般HPC软件的运行都需要Licenses才能正常运行，安装节点可以安装Licenses，

作为Licenses服务器。

HPC安装节点推荐使用2块网卡，一块网卡对外通讯，另外一块对集群内部通讯，以

提高整个集群的安全性。

二、基本安装

基本安装请参考redhatHPC安装文档。

注意：如果在运行ocs-setup的时候没有正常完成，那么在重新运行这个命令的时候

会报错。需要将/var/lock/subsys目录下的ocs-setup文件删除后才能运行。

三、基本配置

ocs-setup命令运行完成后，基本上只安装配置了2个kit：base、os。还有其他的

kit需要安装。

kit简介

base-kit在安装节点上必须安装

cacti-kit监控组件

ganglia-kit监控组件

hpc-kitHPC函数库组件

lava-kitlava任务调度管理器组件

nagios-kit监控组件

ntop-kit网络流量监控组件

rhel-java-kitredhatjava组件，需要supplyment光盘

rhel-ofed-kitinfinband驱动组件

四、kit的安装

ocs-setup配置完成后，会将/etc/yum.repos.d目录下的软件安装源禁用，而只保留

了自动生成的一个软件源。在安装余下的kit的时候，默认是连接到RHN上安装，但是我

们安装的时候无法连接RHN，因此还是要使用本地安装源来安装。这时，需要将我们自己

建立的HPC软件的安装源启用才行。安装kit使用如下命令安装：

yuminstallocs-xxx-kit

这个软件包安装完成后，会在/opt/kusu/sbin下生成如下名称的命令

install-kit－xxxx

运行该命令即可将kit包含的软件包拷贝到/depot/kits下的对应目录中，同时自动更新一

些系统文件和集群数据库的内容。

五、计算节点的安装

1、首先在安装节点上对计算节点模板进行配置，使用如下命令：

ngedit

对compute-rhel组进行编辑，选择相应的组件、操作系统软件、分区大小配置。

这里节点的命名方式为compute-#RR-#NN，是以机架号和节点在机架中的位置结合

起来命名。如果节点数量比较少的话，可以修改这个名称，改短一点，方便后续使用

pdsh进行管理，但是节点命名方式选定后，一旦安装了计算节点，这个命名方式就不

能更改的。

2、安装计算节点

在安装节点上运行如下命令

addhost

这个命令监听网络上PXE信息包，通过PXE信息包获取计算节点的MAC地

址。并且自动配置DHCP服务，DHCP的IP地址是以安装节点的IP地址为起点来

进行分配的。同时在/tftpboot/kusu/pxelinux.cfg目录下生成PXE启动的配置

文件。计算节点通过PXE启动后会自动按照ngedit中的配置生成kickstart文件，

执行后续安装。

3、安装完成后退出addhost命