IBM高性能集群系统简介
孙守红
分子系统生物学中心
2008年10月
IBM 高性能集群系统硬件配置
?IBM-HPCluster
–管理节点: ibm3850
–IO 节点: 两台ibm3850
–刀片中心：三台IBM-HS21
–存储：DS3400 磁盘柜
?硬件防火墙：LENOVO网御
?UPS：美国顶尖40KW
IBM 高性能集群系统
?操作系统：RedHat4 As×86-64?集群管理系统：XCAT
?集群文件系统：Lustre
?集群作业管理系统：PBSpro
?集群并行软件：
?MPI
?PVM
需用户启动的进程
?MPI
–“mpd&”
–“mpdboot–n 10 –f .mpdhosts”
–“mpdallexit”
?PVM
–“pvm pvm.hosts”
–“pvm-> conf ->halt”
?所有并行都将通过PBS进行作业调度。
已实现并行的生物软件
?生物软件
–Hmmer: 基于PVM的并行软件；
–Meme：基于MPI的并行软件；
–Mpiblast:基于MPI的并行软件；
–InterproScan：利用PBSpro并行的软件。
如何使用IBM集群系统?申请建立集群用户
–集群用户的前提要求
?熟悉UNIX/LINUX基础命令
?理解PERL/SHELL基础编程
?了解相应生物软件的命令行使用
–首先填写《高性能计算系统使用申请表》;
–阅读《高性能集群计算系统管理条例》
–了解集群使用及基本编程；
?将数据送交分析，无须建立帐户
–提供原始数据和分析需求;
–将收取所用机时费
高性能集群计算系统管理条例
一．IBM高性能集群计算系统简介
IBM高性能集群系统是研究所纳入分子系统生物学中心管理的大型服务器。主要用于生物信息学分析。IBM高性能集群计算系统是刀片式高性能集群计算系统，配备40个主频2.33GHz，两路四核的计算节点，双IO节点和管理节点。操作系统是Redhat4AS4-LINUX，配备Lustre并行文件管理系统及PBSpro作业调度管理系统。
二．申请使用
IBM集群服务器将通过两种方式向所内外开放。一是通过申请建立集群用户自己分析数据；二是我们将代为分析数据。对于申请使用IBM高性能机群计算系统的人员都必须首先填写《高性能计算系统使用申请表》。每个帐户标准资源配备是10G硬盘空间，40CPUs和500小时免费机时。如需更大的硬盘空间，请另行申请。由于集群架构的特殊性及其管理使用的复杂性，集群用户必需在上机前仔细阅读分子系统生物学中心提供的集群系统简介。而且在经过上机培训后，了解集群的相应配置信息及系统使用说明后上机使用。
三．用户相关的文件系统使用说明
1、/lustre/home
用户家目录及用户作业计算结果的输出与保存。用户帐号建立时，由系统自动创建每个用户的子目录。
2、/lustre/database
用于常用公共数据库的保存。
3、/lustre/biosoftware
用于系统并行程序和生物分析专用软件的安装。
四．计算资源的分配原则
计算资源原则上将按照申请使用的先后循序分配（first come, first serve）。当资源紧张时，将优先面向所内高性能计算用户。所有可利用的计算资源将分为几个不同计算任务群。每个用户一次可利用任务群是一个。如有特别需要，请向系统管理员另行申请。
五．账户管理
严禁任何有意的危害集群系统的黑客行为。一经发现有类似行为，将告知其课题组负责人并关闭其帐户。账户处于非活动状态一个月以上，账户将自动被关闭。需另行申请激活。六．收费标准
用户申请费为200/个/年；上机培训费100元/人；机时费为0.2元/小时。
本规定为试行条例，如有变动将另行告知。
仪器设备共享预约平台网址http://159.226.24.173/xitong/xtshy
e.html
用PBSpro提交作业的方法?提交作业
?“qsub
?qsub–l select=1:ncpus=1 test_script ?检查作业的运行状态
?“qstat–f
?“qstat–f 6 “
?“qstat–anst”/#详细列表
?删除作业
?“qdel
?“qdel6”
?igdb:
?Req'd Req'd Elap
?Job ID Username Queue Jobname SessID NDS TSK Memory Time S Time ?----------------------------------------------------------------------
?6059[].igdb shsun q1 hmm --20 20 ---- B --
?--
?Job Array Began at Wed Sep 17 at 10:24
?6059[1].igdb shsun q1 hmm 28021 20 20 ----R 120:1
?b01n01/0+b01n02/0+b01n03/0+b01n04/0+b01n05/0+b01n06/0+b01n07/0+b01n08/0?+b01n09/0+b01n10/0+b01n11/0+b01n12/0+b01n13/0+b01n14/0+b02n01/0+b02n02/0?+b02n03/0+b02n04/0+b02n05/0+b02n06/0
?--
?6059[2].igdb shsun q1 hmm 28051 20 20 ----R 120:1
?b01n01/1+b01n02/1+b01n03/1+b01n04/1+b01n05/1+b01n06/1+b01n07/1+b01n08/1?+b01n09/1+b01n10/1+b01n11/1+b01n12/1+b01n13/1+b01n14/1+b02n01/1+b02n02/1?+b02n03/1+b02n04/1+b02n05/1+b02n06/1
?--
?6059[3].igdb shsun q1 hmm 28081 20 20 ----R 120:1
?b01n01/2+b01n02/2+b01n03/2+b01n04/2+b01n05/2+b01n06/2+b01n07/2+b01n08/2?+b01n09/2+b01n10/2+b01n11/2+b01n12/2+b01n13/2+b01n14/2+b02n01/2+b02n02/2?+b02n03/2+b02n04/2+b02n05/2+b02n06/2
?--
?6059[4].igdb shsun q1 hmm 28111 20 20 ----R 120:1
?b01n01/3+b01n02/3+b01n03/3+b01n04/3+b01n05/3+b01n06/3+b01n07/3+b01n08/3?+b01n09/3+b01n10/3+b01n11/3+b01n12/3+b01n13/3+b01n14/3+b02n01/3+b02n02/3?+b02n03/3+b02n04/3+b02n05/3+b02n06/3
?--
?6059[5].igdb shsun q1 hmm 28141 20 20 ----R 120:1
?b01n01/4+b01n02/4+b01n03/4+b01n04/4+b01n05/4+b01n06/4+b01n07/4+b01n08/4?+b01n09/4+b01n10/4+b01n11/4+b01n12/4+b01n13/4+b01n14/4+b02n01/4+b02n02/4?+b02n03/4+b02n04/4+b02n05/4+b02n06/4
?--
?6059[6].igdb shsun q1 hmm 28171 20 20 ----R 120:1
?b01n01/5+b01n02/5+b01n03/5+b01n04/5+b01n05/5+b01n06/5+b01n07/5+b01n08/5?+b01n09/5+b01n10/5+b01n11/5+b01n12/5+b01n13/5+b01n14/5+b02n01/5+b02n02/5?+b02n03/5+b02n04/5+b02n05/5+b02n06/5
?--
?6059[7].igdb shsun q1 hmm 28201 20 20 ----R 120:1
?b01n01/6+b01n02/6+b01n03/6+b01n04/6+b01n05/6+b01n06/6+b01n07/6+b01n08/6?+b01n09/6+b01n10/6+b01n11/6+b01n12/6+b01n13/6+b01n14/6+b02n01/6+b02n02/6?+b02n03/6+b02n04/6+b02n05/6+b02n06/6
?--
?6059[8].igdb shsun q1 hmm 28231 20 20 ----R 120:1
?b01n01/7+b01n02/7+b01n03/7+b01n04/7+b01n05/7+b01n06/7+b01n07/7+b01n08/7?+b01n09/7+b01n10/7+b01n11/7+b01n12/7+b01n13/7+b01n14/7+b02n01/7+b02n02/7?+b02n03/7+b02n04/7+b02n05/7+b02n06/7
?--
?6059[9].igdb shsun q1 hmm 28151 20 20 ----R 120:1
?b02n07/0+b02n08/0+b02n09/
PBS应用于基于PVM 的软件—
HMMER
?具体使用方法如下：
–Hmmer软件
?“qsub runhmmpfam”
?“runhmmpfam”内容
–#PBS -N hmmpfam
–#PBS -J 1-10
–#PBS -l mem=1g
–cd$PBS_O_WORKDIR
–hmmpfam Pfam_ls F-box-
rice807.sp$PBS_ARRAY_INDEX.seq > F-box-
rice807.sp$PBS_ARRAY_INDEX.pfamout
CLustalw ?“runclustalw“
–#PBS -l select=4:ncpus=4 -l place=scatter –mpirun-np16 /usr/local/bin/clustalw-mpi F-box-rice807.seq
BLASTALL ?“runblastall”
–#!/bin/sh
–#PBS -N runblastall
–#PBS -J 1-21
–cd$PBS_O_WORKDIR
–blastall-p blastp-i
swissprot.sp$PBS_ARRAY_INDEX.seq-d F-box-rice807.seq -o s
wissprot.sp$PBS_ARRAY_INDEX.out
MEME ?“runmeme”
–#PBS -l select=4:ncpus=4 -l place=scatter –meme -p 20 F-box-rice807.seq -maxsize
50000
基于PBSpro的并行软件--IPRSCAN
“runiprscan”内容
–/lustre/biosoftware/iprscan/bin/iprscan-cli-i
/lustre/home/shsun/lfgu/INE_FULL
–_SEQUENCE_DB.fasta-o
/lustre/home/shsun/lfgu/iprout-format raw -
goterms-iprlookup
2003服务器集群实验 一、服务器集群简介 什么是服务器群集？有何作用？ 服务器群集是一组协同工作并运行Microsoft群集服务（Microsoft Cl uster Service，MSCS）的独立服务器。它为资源和应用程序提供高可用性、故障恢复、可伸缩性和可管理性。它允许客户端在出现故障和计划中的暂停时，依然能够访问应用程序和资源。如果群集中的某一台服务器由于故障或维护需要而无法使用，资源和应用程序将转移到可用的群集节点上。 服务器群集不同于NLB群集，服务器群集是有独立计算机系统（节点）构成的组，不同节点协同工作，就像单个系统一样，从而确保关键的应用程序和资源始终可由客户端使用。用于访问量较少的企业内网的服务器的冗余和可靠性。 哪些版本的操作系统支持服务器群集？ 只有两个版本的windows server 2003系统支持该技术：企业版和数据中心版。 服务器群集的应用范围？ 服务器群集最多可以支持8个节点，可实现DHCP、文件共享、后台打印、MS SQL server、exchange server等服务的可靠性。 二、群集专业术语 节点: 构建群集的物理计算机 群集服务: 运行群集管理器或运行群集必须启动的服务 资源: IP地址、磁盘、服务器应用程序等都可以叫做资源 共享磁盘: 群集节点之间通过光纤SCSI 电缆等共同连接的磁盘柜或存储 仲裁资源: 构建群集时，有一块磁盘会用来仲裁信息，其中包括当前的服务状态各个节点的状态以及群集转移时的一些日志 资源状态: 主要指资源目前是处于联机状态还是脱机状态 资源依赖: 资源之间的依存关系 组: 故障转移的最小单位 虚拟服务器: 提供一组服务--如数据库文件和打印共享等 故障转移: 应用从宕机的节点切换到正常联机的节点
高性能计算集群(HPC CLUSTER) 1.1什么是高性能计算集群? 简单的说，高性能计算(High-Performance Computing)是计算机科学的一个分支，它致力于开发超级计算机，研究并行算法和开发相关软件。 高性能集群主要用于处理复杂的计算问题，应用在需要大规模科学计算的环境中，如天气预报、石油勘探与油藏模拟、分子模拟、基因测序等。高性能集群上运行的应用程序一般使用并行算法，把一个大的普通问题根据一定的规则分为许多小的子问题，在集群内的不同节点上进行计算，而这些小问题的处理结果，经过处理可合并为原问题的最终结果。由于这些小问题的计算一般是可以并行完成的，从而可以缩短问题的处理时间。 高性能集群在计算过程中，各节点是协同工作的，它们分别处理大问题的一部分，并在处理中根据需要进行数据交换，各节点的处理结果都是最终结果的一部分。高性能集群的处理能力与集群的规模成正比，是集群内各节点处理能力之和，但这种集群一般没有高可用性。 1.2 高性能计算分类 高性能计算的分类方法很多。这里从并行任务间的关系角度来对高性能计算分类。 1.2.1 高吞吐计算(High-throughput Computing) 有一类高性能计算，可以把它分成若干可以并行的子任务，而且各个子任务彼此间没有什么关联。因为这种类型应用的一个共同特征是在海量数据上搜索某些特定模式，所以把这类计算称为高吞吐计算。所谓的Internet计算都属于这一类。按照Flynn的分类，高吞吐计算属于SIMD（Single Instruction/Multiple Data,单指令流-多数据流）的范畴。 1.2.2 分布计算(Distributed Computing) 另一类计算刚好和高吞吐计算相反，它们虽然可以给分成若干并行的子任务，但是子任务间联系很紧密，需要大量的数据交换。按照Flynn的分类，分布式的高性能计算属于MIMD （Multiple Instruction/Multiple Data，多指令流-多数据流）的范畴。 1.3高性能计算集群系统的特点 可以采用现成的通用硬件设备或特殊应用的硬件设备，研制周期短； 可实现单一系统映像，即操作控制、IP登录点、文件结构、存储空间、I/O空间、作业管理系统等等的单一化； 高性能（因为CPU处理能力与磁盘均衡分布，用高速网络连接后具有并行吞吐能力）； 高可用性，本身互为冗余节点，能够为用户提供不间断的服务，由于系统中包括了多个结点，当一个结点出现故障的时候，整个系统仍然能够继续为用户提供服务； 高可扩展性，在集群系统中可以动态地加入新的服务器和删除需要淘汰的服务器，从而能够最大限度地扩展系统以满足不断增长的应用的需要； 安全性，天然的防火墙； 资源可充分利用，集群系统的每个结点都是相对独立的机器，当这些机器不提供服务或者不需要使用的时候，仍然能够被充分利用。而大型主机上更新下来的配件就难以被重新利用了。 具有极高的性能价格比，和传统的大型主机相比，具有很大的价格优势； 1.4 Linux高性能集群系统 当论及Linux高性能集群时，许多人的第一反映就是Beowulf。起初，Beowulf只是一个著名的科学计算集群系统。以后的很多集群都采用Beowulf类似的架构，所以，实际上，现在Beowulf已经成为一类广为接受的高性能集群的类型。尽管名称各异，很多集群系统都是Beowulf集群的衍生物。当然也存在有别于Beowulf的集群系统，COW和Mosix就是另两类著名的集群系统。 1.4.1 Beowulf集群 简单的说，Beowulf是一种能够将多台计算机用于并行计算的体系结构。通常Beowulf系统由通过以太网或其他网络连接的多个计算节点和管理节点构成。管理节点控制整个集群系统，同时为计算节点提供文件服务和对外的网络连接。它使用的是常见的硬件设备，象普通PC、以太网卡和集线器。它很少使用特别定制的硬件和特殊的设备。Beowulf集群的软件也是随处可见的，象Linux、PVM和MPI。 1.4.2 COW集群 象Beowulf一样，COW（Cluster Of Workstation）也是由最常见的硬件设备和软件系统搭建而成。通常也是由一个控制节点和多个计算节点构成。
高可用性集群系统的实现 《Linux企业应用案例精解》第8章主要介绍一下虚拟化技术应用。本节为大家介绍高可用性集群系统的实现。 8.3.5 高可用性集群系统的实现（1） VMware Infrastructure 的体系结构和典型配置 资源动态分配和高可用性的实现为构建高可用性集群系统提供了有力的保障，采用VMwae构建铁路企业高可用性集群，不需要为系统中的每台服务器分别添置备用服务器，就可以有效地降低系统成本，在基于VMware的我企业高可用性集群中，备用服务器安装了VMware ESX Server，与数据库服务器、Web服务器、OA服务器和文件服务器等构成高可用性集群，同时采用数据库备份服务器实现差额计划备份。 使用VMware提供的虚拟基础架构解决方案，服务器不再需要随着业务增加而添加，整个IT基础架构能得到有效控制并可充分发挥效能。只有当整体资源出现不足的时候，才需要增加服务器。而且对系统资源的
添加也非常简单，不再需要做繁琐的硬件维护以及业务迁移，只需要简单地将新服务器安装VMWARE? INFRASTRUCTURE 3软件，并添加到已有的VMWARE? INFRASTRUCTURE 3架构中即可，新增资源将自动分配到各个最需要的业务环境中。 在HA和DRS功能的共同支撑下，虚拟机的稳定、不间断运行得到了保证，而且，在没有搭建Cluster环境的情况下，迁移、升级依旧能不中断服务。哪怕是硬件升级、添加，正常停机维护等情况，也能够保证所有的业务正常运行，客户端访问服务器不产生业务中断现象。新的服务器虚拟化架构中另一个重点是VMware HA 的部署，它是整个服务器系统安全、可靠运行的一道防线。传统的热备机方式最大的问题就是容易造成资源的大量闲置；在正常运行状态下，所有备机服务器都处于闲置状态，不仅造成计算资源的空耗，而且还浪费大量的电力和散热资源，投资回报率非常低。 如何应对Linux系统软件包的依赖性问题 不管是初步跨入Linux殿堂的新手还是，具有多年经验的专家，在安装或编译软件包的过程中或多或少的都会遇到包的依赖问题从而导致安装过程无法继续，比如管理员在安装php软件包需要libgd.so文件，而这个文件属于gb软件包。但是在安装gb软件包时，可能这个软件包跟其他软件包又具有依赖关系，又需要安装其他软件包才行。这时有的管理员便失去耐心。在遇到这种Linux软件包依赖关系问题，该如何解决呢?在谈这个具体的措施之前，先跟大家聊聊Linux系统里的软件爱你依赖性问题。 我们把处理rpm依赖性故障的策略可以分成两类解决依赖性故障的自动方法和手工方法。但当安装不属于发行一部分的软件包时自动方法是不可用的。在描述如何手工解决依赖性故障后，将简要描述如何使用自动方法之一（YUM），但首先需要了解它们是什么及rpm如何强制实施它们。 一、什么是依赖性 程序依赖于程序代码的共享库，以便它们可以发出系统调用将输出发送到设备或打开文件等（共享库存在于许多方面，而不只局限于系统调用）。没有共享库，每次程序员开发一个新的程序，每个程序员都需要从头开始重写这些基本的系统操作。当编译程序时，程序员将他的代码链接到这些库。如果链接是静态的，编译后的共享库对象代码就添加到程序执行文件中；如果是动态的，编译后的共享库对象代码只在运行时需要它时由程序员加载。动态可执行文件依赖于正确的共享库或共享对象来进行操作。RPM依赖性尝试在安装时强制实施动态可执行文件的共享对象需求，以便在以后--当程序运行时--不会有与动态链接过程有关的任何问题。
精品资料网（https://www.doczj.com/doc/b016379201.html,） 25万份精华管理资料，2万多集管理视频讲座 IBM公司战略管理案例（背景、战略发展、收入分析） 背景：IBM公司发展史简介 IBM，即国际商业机器公司，1914年创立于美国，是世界上最大的信息工业跨国公司，目前拥有全球雇员30多万人，业务遍及160多个国家和地区。2000年，IBM公司的全球营业收入达到八百八十多亿美元。 IBM前三十年的历史就是IT业前三十年的历史。这是人们最初接触计算机的时候听说的一句话，一直以来，对IBM都是心存崇敬，这是一个很奇特也很强大的公司，从螺丝钉键盘鼠标到CPU硬盘内存到大型机巨型机，它都可以制造，从软件到硬件到服务，它都可以提供，这在IT历史上，不敢说是否绝后，空前应该是没什么问题了。 1908年，制造刻度盘记录器的锡拉丘兹时间记录公司被国际时间记录公司收购。随后在1911年，Charles R. Flint筹划了国际时间记录公司、计算尺公司和制表机器公司三家公司的合并，成立了计算-制表-记录公司（Computing Tabulating-Recording Company，即C-T-R公司）。1915年，T. J. Watson, Sr.当选C-T-R公司总裁兼总经理，著名的“Think”标志，老沃森提出的口号，开始在公司内部使用。1924年，计算-制表-记录公司（即C-T-R公司）改名为国际商用机器公司（IBM公司）。二战爆发后，IBM大量生产军需品，生产线日益扩大。战争年代里，IBM迈出了跨入计算领域的第一步。1951年，IBM开始决定开发商用电脑，聘请冯"诺依曼担任公司的科学顾问，1952年12月研制出IBM第一台存储程序计算机，也是通常意义上的电脑，它叫IBM 701。这是IT历史上一个重要的里程碑。1952年，小沃森出任CEO，IBM 新一代领导集体诞生。在小沃森的改革下，IBM公司采纳新的营销政策，对大部分系统工程活动、将来的计算机程序和客户培训课程分别进行收费。七十年代是沃森家族对IBM的领导的结束，1971年，Thomas J. Watson, Jr.退休，成为执行委员会的主席。Frank T. Cary于1973年接任CEO。在卡里的领导下，IBM在人们日常生活中扮演着越来越重要的角色。1971年，IBM公司生产的计算机引导"阿波罗14号"和"阿波罗15号"宇宙飞船成功登月。1981年，John R.Opel出任CEO，开创了IBM历史新纪元，由于IBM—PC，IBM 商标开始进入家庭、学校、中小企业。但到1993年，IBM的年收入下降到627.1亿美元，较1992年下降 2.8%，纯收入下降到负81亿美元，较上一年下降了6 3.1%。公司机构通过重组提高公司生产效率和减少资 源浪费。进入21世纪之后，IBM的领导层又发生了一次变化，Samuel J. Palmisano于2000年做了IBM的总裁，两年后，接任CEO。 经过多年的发展，IBM成为全球IT第一巨头，在过去半个多世纪中遥遥领先，与第二名拉开极大的距离，人称“蓝色巨人”。长久以来，IBM就是计算机的代名词。IBM无论在美国，还是在世界上，都取得了极大的成功，有着极其深远的影响。IBM的历史就是一部计算机的历史。美国《时代周刊》称：“IBM的企业精神是人类有史以来无人堪与匹敌的……没有任何企业会像IBM公司这样给世界产业和人类生活方式带来和将要带来如此巨大的影响。”就连比尔"盖茨也不得不承认：“IBM才是计算机行业的真正霸主，毕竟是它一手栽培了我。” 第一章：IBM公司的竞争战略与快局次席战略（20世纪） IBM，即国际商业机器公司，1914年创立于美国，那时，IBM还被称为C-T-R，它主要靠在美国通过销售、服务与出租等方式获得收入。1940年，由于二战爆发，IBM大量生产军需品，生产线日益扩大。战争
惠普服务器集群系统解决方案 计算系统与信息网络不停顿的运行与连接即高可用性已成为各行业特别是要求实时行业业务运行的基本要求。 惠普凭借丰富的经验创制的HP NetServer为您提供当今市场上最完备的高可用性系列产品和最优质的服务，使您的关键业务应用程序能连续可靠地高效运转。惠普还与业界领先的软硬件供应商联袂，为优化您的业务环境提供最为广泛的选择。同时，我们还可为您提供得益于最新、最优技术的服务器解决方案。 对于可用性要求高的公司，HP NetServer支持集群技术，例如Microsoft Windows NT(r)Server 4.0Enterprise Edition和Windows2000Advanced Server中包含的Microsoft(r)Cluster Server(MSCS)，HP NetServer还支持Novell’s NetWare Cluster Services for NetWare5和Veritas公司的高可用性解决方案。同时在应用前景广泛的Linux操作系统平台上惠普公司也有性能优异的Longer HA双机解决方案。 某些业务要求为最终用户或其它系统提供的服务不能有丝毫中断，为此惠普采用Microsoft Windows NT环境下的虚拟服务器阵列技术，为您提供"HP NetServer超级保障解决方案"，作为集群技术的补充，这些业界领先的解决方案将系统的正常运行时间提升到最高水平--使关键任务服务实现了不停顿的处理，连续的数据存取，不间断的连接以及始终如一的性能。 用户可根据实际的应用需求选择合适的解决方案，使HP NetServer真正的无忧之选。 在今天的商务应用系统中，稳定持续的系统运行时间变得越来越重要，而传统意义中的小型机系统使得普通用户望而却步。用户需用的是更高的可用性以及更低的成本。 集群系统 集群系统是一种提供高可用性、改善性能和增强企业应用软件可管理性的有效途径。随着基于Intel平台的服务器业已成为关键性业务和应用的主流服务器，集群技术的应用也日益广泛。 集群系统优点 集群可有效地提高系统的可用性。如果一个服务器或应用程序崩溃，集群系统中另一个服务器在继续工作的同时，接管崩溃服务器的任务，最大限度地缩短用户服务器和应用程序宕机的时间。 集群的另外一个优点是通过增加现有系统的的节点，提高了系统的延展性，使系统因故障中断的可能性降到最低。在这种架构中，多服务器的运行是针对相同的应用程序或数据库
高性能计算集群项目采购需求 以下所有指标均为本项目所需设备的最小要求指标，供应商提供的产品应至少大于或等于所提出的指标。系统整体为“交钥匙”工程，厂商需确保应标方案的完备性。 投标商在投标方案中须明确项目总价和设备分项报价。数量大于“1”的同类设备，如刀片计算节点，须明确每节点单价。 硬件集成度本项目是我校校级高算平台的组成部分，供应商提供的硬件及配件要求必须与现有相关硬件设备配套。相关系统集成工作由供应商负责完成。 刀片机箱供应商根据系统结构和刀片节点数量配置，要求电源模块满配，并提供足够的冗余。配置管理模块，支持基于网络的远程管理。配置交换模块，对外提供4个千兆以太网接口，2个外部万兆上行端口，配置相应数量的56Gb InfiniBand接口 刀片计算节点双路通用刀片计算节点60个，单节点配置2个CPU，Intel Xeon E5-2690v4（2.6GHz/14c）；不少于8个内存插槽，内存64GB，主频≥2400；硬盘裸容量不小于200GB，提供企业级SAS或SSD 硬盘；每节点配置≥2个千兆以太网接口，1个56Gb InfiniBand 接口；满配冗余电源及风扇。 刀片计算节点（大内存）双路通用刀片计算节点5个，单节点配置2个CPU，Intel Xeon E5-2690v4；不少于8个内存插槽，内存128GB，主频≥2400；硬盘裸容量不小于200GB，提供企业级SAS或SSD硬盘；每节点配置≥2个千兆以太网接口，1个56Gb InfiniBand接口；满配冗余电源及风扇。 GPU节点2个双路机架GPU节点；每个节点2个Intel Xeon E5-2667 v4每节点2块NVIDIA Tesla K80GPU加速卡；采用DDR4 2400MHz ECC内存，每节点内存16GB*8=128GB；每节点SSD 或SAS硬盘≥300GB；每节点配置≥2个千兆以太网接口，1个56Gb/s InfiniBand接口；满配冗余电源及风扇。 数据存储节点机架式服务器2台，单台配置2颗Intel Xeon E5-2600v4系列CPU；配置32GB内存，最大支持192GB；配置300GB 2.5" 10Krpm
1.业务连续 1.1.共享存储集群 业务系统运营时，服务器、网络、应用等故障将导致业务系统无常对外提供业务，造成业务中断，将会给企业带来无法估量的损失。针对业务系统面临的运营风险，Rose提供了基于共享存储的高可用解决方案，当服务器、网络、应用发生故障时，Rose可以自动快速将业务系统切换到集群备机运行，保证整个业务系统的对外正常服务，为业务系统提供7x24连续运营的强大保障。 1.1.1.适用场景 基于共享磁盘阵列的高可用集群，以保障业务系统连续运营 硬件结构：2台主机、1台磁盘阵列
主机 备机心跳 磁盘阵列 局域网 1.1. 2.案例分析 某证券公司案例 客户需求分析 某证券公司在全国100多个城市和地区共设有40多个分公司、100多个营业部。经营围涵盖：证券经纪，证券投资咨询，与证券交易、证券投资活动有关的财务顾问，证券承销与保荐，证券自营，证券资产管理，融资融券，证券投资基金代销，金融产品代销，为期货公司提供中间介绍业务，证券投资基金托管，股票期权做市。 该证券公司的系统承担着企业的部沟通、关键信息的传达等重要角色，随着企业的业务发展，系统的压力越来越重。由于服务器为单机运行，如果发生意外宕机，将会给企业的日常工作带来不便，甚至
给企业带来重大损失。因此，急需对服务器实现高可用保护，保障服务器的7×24小时连续运营。 解决方案 经过实际的需求调研，结合客户实际应用环境，推荐采用共享存储的热备集群方案。部署热备集群前的单机环境：业务系统，后台数据库为MySQL，操作系统为RedHat6，数据存储于磁盘阵列。 在单机单柜的基础上，增加1台备用主机，即可构建基于共享存储的热备集群。增加1台物理服务器作为服务器的备机，并在备机部署系统，通过Rose共享存储热备集群产品，实现对应用的高可用保护。如主机上运行的系统出现异常故障导致宕机，比如应用服务异常、硬件设备故障，Rose将实时监测该故障，并自动将系统切换至备用主机，以保障系统的连续运营。
双机热备、集群及高可用性入门
什么是双机热备？ 双机热备这一概念包括了广义与狭义两种意义。 从广义上讲，就是对于重要的服务，使用两台服务器，互相备份，共同执行同一服务。当一台服务器出现故障时，可以由另一台服务器承担服务任务，从而在不需要人工干预的情况下，自动保证系统能持续提供服务。(相关文章：为什么需要双机热备？) 双机热备由备用的服务器解决了在主服务器故障时服务不中断的问题。但在实际应用中，可能会出现多台服务器的情况，即服务器集群。(相关文章：双机软件与集群软件的异同) 双机热备一般情况下需要有共享的存储设备。但某些情况下也可以使用两台独立的服务器。(相关文章：双机热备的实现模式) 实现双机热备，需要通过专业的集群软件或双机软件。(相关文章：双机与集群软件的选择) 从狭义上讲，双机热备特指基于active/standby方式的服务器热备。服务器数据包括数据库数据同时往两台或多台服务器写，或者使用一个共享的存储设备。在同一时间内只有一台服务器运行。当其中运行着的一台服务器出现故障无法启动时，另一台备份服务器会通过软件诊测（一般是通过心跳诊断）将standby机器激活，保证应用在短时间内完全恢复正常使用。(相关文章：双机热备、双机互备与双机双工的区别) 为什么要做双机热备？ 双机热备针对的是服务器的故障。 服务器的故障可能由各种原因引起，如设备故障、操作系统故障、软件系统故障等等。一般地讲，在技术人员在现场的情况下，恢复服务器正常可能需要１０分钟、几小时甚至几天。从实际经验上看，除非是简单地重启服务器（可能隐患仍然存在），否则往往需要几个小时以上。而如果技术人员不在现场，则恢复服务的时间就更长了。 而对于一些重要系统而言，用户是很难忍受这样长时间的服务中断的。因此，就需要通过双机热备，来避免长时间的服务中断，保证系统长期、可靠的服务。 决定是否使用双机热备，正确的方法是要分析一下系统的重要性以及对服务中断的容忍程度，以此决定是否使用双机热备。即，你的用户能容忍多长时间恢复服务，如果服务不能恢复会造成多大的影响。 在考虑双机热备时，需要注意，一般意义上的双机热备都会有一个切换过程，这个切换过程可能是一分钟左右。在切换过程中，服务是有可能短时间中断的。
IBM公司案例分析 案例简介： IBM公司1941年创立于美国，是世界上最大的信息工业跨国公司，全球雇员30多万，遍及160多个国家和地区。在过去的几年里，IBM已经完成了业务模式的完全转型。IBM的全球能力包括服务、软件、硬件系统、研发及相关融资支持。IBM的业务模式是灵活的，能够与不断变化的市场和经济环境相适应。 随着改革开放的不断深入，IBM在华业务日益扩大，IBM中国有限公司在北京、广州、上海、沈阳、深圳、南京、成都、西安和武汉建立了分公司，在北京成立了IBM中国研究中心，成为IBM在全球设立的8个研究中心之一。为了进一步发挥IBM的全方位优势，IBM在组织机构、管理模式、产品技术及客户服务等各方面进行了重大调整与改革，成立了IBM大中华地区。目前IBM在中国员工已达到到近3000人，成立了8家合资公司和2家独资企业。 案例分析： IBM作为企业常青树，在世界500强企业中长期处于排名前列，结合国际投资知识，分析其成长历程及在华投资行为，得出以下几点结论： 一、IBM在国际投资中成功的主要因素： 1.IBM具有广为认可的企业文化和投资理念。对客户，追求服务至上。对员工，尊重个人，追求优异的工作表现。其口碑营销策略，使其全球发展的巨大无形财富。通过社交网络、电影广告等手段，让消费者对IBM的产品产生兴趣和提高转换销售率，全球知名度高。其中，“当地人主义”雇用当地人员，尊重其民族性和传统观念，利益均沾，支持协助当地政府的各项政策。IBM的口号是： 为世界经济发展作贡献，致力于世界和平。这口号在整个西欧都赢得了好感。为其开拓国际市场带来巨大便利。
2.科技创新使企业常葆活力，在国际投资中更具竞争力。IBM公司始终把研究开发作为公司的首要任务，将并数的利润用于研究开发，并设立追求所有可能性的基础部门，并不断加大专利组合，与其他公司交叉许可。 3.预见成就伟大企业。IBM领导人意识到高度依赖计算机的时代即将来临。 努力地实践，在打孔卡片机的基础上开发一系列新产品，为美国和全人类的进步作出了巨大贡献。在大数据时代，领先提出从标准化IT转变为智慧化IT。 4.强力联合合作伙伴，一个好汉三个帮。在国际投资发展的关键——资金方面，IBM使摩根在电子产业唯一的宠儿，对其百般爱护。其次，IBM老板与历届政府基本上都保持密切关系。与政府的联姻使得IBM获得无可比拟的实力。 另外，IBM与东芝、新力、格鲁吉亚等科技实力雄厚的公司都有良好关系，不断合作开发新产品。 二、IBM公司在xx投资的动机 中国地广人多、发展迅速，市场容量巨大，高新技术产品是市场发展的必然趋势。中国政治稳定、有针对外商投资优惠政策条件，为IBM在中国投资提供了便利。另外，中国生产要素廉价、资源丰富，可以降低生产成本，中国作为“世界工厂”，生产力强劲，人才济济，有利于产品的研发和生产。 三、IBM公司在xx投资的成功优势 1.根据OIL分析法，IBM厂商具有特定资产所有权优势，其中IBM的软件硬件具有较强的技术优势，长期的公司经营使IBM具有组织管理优势，IBM软件硬件机器的综合生产使其具有厂商规模优势。其次，为求内部化优势，消除外部市场供求脱节、有效规避政府干预造成的市场不稳定，IBM来中国当地投资发展无疑也是明智之举。再次，中国交通发达，政策开发，具有独特的国家区位优势。IBM可以以中国为中心为开展整个亚洲市场的开拓战略。 2.在IBM公司全球化的视野和布局下，IBM中国公司秉承“成就客户、创新为要、诚信负责”的核心价值观受到中国顾客的广泛认可。例如，IBM在中国与教育部合作展开的“基础教育创新教学项目”，采取更多、更有价值的支持方
本文由ｓｚｇ８１贡献 ｄｏｃ１。 七台服务器的集群方案 在传统的终端／主机的网络模式时代，终端功能简单，无需维护工作，在主机一端进行专门的管理与维护，具有资源共享、便于 管理的特点。但是，主机造价昂贵，终端没有处理能力，限制了网络的规模化发展。之后的客户机／服务器模式推进了计算产业 的标准化和开发化的发展，为系统提供了相当大的灵活性，但是随着分布系统规模的规模扩大，系统的维护和管理带来了巨大 的开销。面向 Ｉｎｔｅｒｎｅｔ 的服务型应用，需要高性能的硬件平台作为支持，将并行技术应用在服务器领域中，是计算机发展的必然 趋势。并行处理技术在高性能计算领域中，高可用和高性能是集群服务器系统发展的两个重要方向。 集群的概念 集群英文名称是 ＣＬＵＳＴＥＲ，是一组相互独立的、通过高速网络互联的计算机，它们构成了一个组，并以单一系统的模式加以管 理。一个客户与集群相互作用时，集群像是一个独立的服务器。集群配置是用于提高可用性和可缩放性。和传统的高性能计算 机技术相比，集群技术可以利用各档次的服务器作为节点，系统造价低，可以实现很高的运算速度，完成大运算量的计算，具 有较高的响应能力，能够满足当今日益增长的信息服务的需求。 集群技术应用的需求 Ｉｎｔｅｒｎｅｔ 用户数量呈几何级数增长和科学计算的复杂性要求计算机有更高的处理能力，而 ＣＰＵ 的发展无法跟上不断增长的需求， 于是我们面临以下问题： ●大规模计算如基因数据的分析、气象预报、石油勘探需要极高的计算性能。 ●应用规模的发展使单个服务器难以承担负载。 ●不断增长的需求需要硬件有灵活的可扩展性。 ●关键性的业务需要可靠的容错机制。 ＩＡ 集群系统（ＣＬＵＳＴＥＲ）的特点 ●由若干完整的计算机互联组成一个统一的计算机系统； ●可以采用现成的通用硬件设备或特殊应用的硬件设备，例如专用的通讯设备； ●需要特殊软件支持，例如支持集群技术的操作系统或数据库等等； ●可实现单一系统映像，即操作控制、ＩＰ 登录点、文件结构、存储空间、Ｉ／Ｏ 空间、作业管理系统等等的单一化； ●在集群系统中可以动态地加入新的服务器和删除需要淘汰的服务器， 从而能够最大限度地扩展系统以满足不断增长的应用的需 要； ●可用性是集群系统应用中最重要的因素，是评价和衡量系统的一个重要指标； ●能够为用户提供不间断的服务，由于系统中包括了多个结点，当一个结点出现故障的时候，整个系统仍然能够继续为用户提供 服务； ●具有极高的性能价格比，和传统的大型主机相比，具有很大的价格优势； ●资源可充分利用，集群系统的每个结点都是相对独立的机器，当这些机器不提供服务或者不需要使用的时候，仍然能够被充分 利用。而大型主机上更新下来的配件就难以被重新利用了。 实现服务器集群的硬件配置 ●网络服务器 七台 ●服务器操作系统硬盘 七块 ●ＵＬＴＲＡ １６０ ＬＶＤ ＳＣＳＩ 磁盘阵列 一个 ●１８Ｇ ＳＣＳＩ 硬盘 十块 ●网络服务网卡 十四块 服务器集群的实践步骤 ●在安装机群服务之前的准备： １、 十四块 １８Ｇ ＳＣＳＩ 硬盘组成磁盘阵列，做 ＲＡＩＤ５。 ２、 两台服务器要求都配置双网卡，分别安装 Ｍｉｃｒｏｓｏｆｔ Ｗｉｎｄｏｗｓ Ｓｅｒｖｅｒ２００８ 操作系统，并配置网络。 ３、 所有磁盘必须设置成基本盘，阵列磁盘分区必须大于 ７ 个。 ４、 每台服务器都要加入域当中，成为域成员，并且在每台服务器上都要有管理员权限。 ●安装配置服务器网络要点 １、在这一部分，每个服务器需要两个网络适配器，一个连接公众网，一个连接内部网（它只包含了群集节点） 内部网适配器 。 建立点对点的通信、群集状态信号和群集管理。每个节点的公众网适配器连接该群集到公众网上，并在此驻留客户。 ２、安装 Ｍｉｃｒｏｓｏｆｔ Ｗｉｎｄｏｗｓ ２０００ Ａｄｗａｎｃｅ Ｓｅｒｖｅｒ 操作系统后，开始配置每台服务器的网络。在网络连接中我们给连接公众网的 命名为＂外网＂，连接内部网的命名为＂内网＂并分别指定 ＩＰ 地址为：节点 １：内网：ｉｐ：１０．１０．１０．１１ 外网 ｉｐ：１９２．１６８．０．１９２ 子网 掩码：２５５．２５５．２５５．０ 网关：１９２．１６８．０．１９１（主域控制器 ｉｐ） ；节点 ２：内网：ｉｐ：１０．１０．１０．１２ 外网 ｉｐ：１９２．１６８．０．１９３ 子网掩码： ２５５．２５５．２５５．０ 网关：１９２．１６８．０．１９１；节点 ３：内网：ｉｐ：１０．１０．１０．１３ 外网 ｉｐ：１９２．１６８．０．１９４ 子网掩码：２５５．２５５．２５５．０ 网关： １９２．１６８．０．１９１；节点 ４：内网：ｉｐ：１０．１０．１０．１４ 外网 ｉｐ：１９２．１６８．０．１９５ 子网掩码：２５５．２５５．２５５．０ 网关：１９２．１６８．０．１９１；节点 ５： 内
IBM公司简介解析资料 【最新资料，WORD文档，可编辑】
IBM公司 机器公司(International Business Machines Corporation ,IBM)是一家拥有40万中层干部,520亿美元资产的大型企业,其年销售额达到500多亿美元,利润为70多亿美元。它是世界上经营最好、管理最成功的公司之一。在计算机——这个发展最迅速、经营最活跃的行业里,其销量居世界之首,多年来,在《幸福》杂志评选出的美国前500家公司中一直名列榜首。IBM是美国也是世界最大的电子计算机制造商。创建于1911年。目前，在世界132个国家和地区设有子公司和营业点，拥有39个生产厂、3个基础研究部、22个产品研究所的13个科学中心。它的主要产品反映着当代尖端技术发展的水平1970年至1984年，销售预增了5.1倍，平均每年增长13%以上。净利润增加了5.5倍，平均每年增长34.7%。被誉为典型的超优企业。 70年代末以来，科学技术发展突发猛进，特别是在微电子技术领域，产品更新周期日益缩短。平均不到三四年。电子计算机市场竞争处于炙热化程度，国内外许多资本、技术雄厚的企业纷纷染指这一虽有较高风险但很有发展前途的领域。IBM作为一个专门制造和销售电子计算机的跨国公司，一时面临着对手如林的局势。企业领导体制，从来就没有固定不变的和适用于一切企业的最佳模式，总是要根据环境的变化和自身的发展进行不断地调整、改革和创新。即使是世界最优秀的企业也不例外，IBM的领导体制改革在很大程序上揭示了在新技术革命条件下竞争环境对企业领导体制的要求。 当时对IBM威胁最大的要数美国阿姆达尔公司。该公司推出了H/200插接兼容机，只要更换一下插头，就可以与当时世界最先进的第三代电子计算机IBM/1400互换，由于H/200的运算速度比IMB/1400快两倍，价格便宜5%，从而直接威胁着IBM市场地位。IBM 因不能立即拿出新产品对抗，只好凭借雄厚资金以降价战略实施反击，其结果使资金不足的阿姆达尔公司陷于困境。但是，阿姆达尔公司很快又找到了出路，它与出资金充足的日本计算机制造商富士通联合起来，并推出新产口470v/7同IBM抗衡。与此同时，日立、三菱、日本电气等制造电子计算机的厂商也联合起来，积极开发新产品，涌入国际市场，向IBM发起新挑战，致使IBM有失去市场主导权的危险。要扭转这一被动局面，只有尽快开发出新一代产品。 为此，IBM不得不考虑如何建立一套有利于开发创新新的领域体制，激发公司的活力，以适应激变的竞争环境，争取全局的主动权。 IBM是一个以制造和销售大型电子计算机为主的公司，小型计算机和微电脑市场则被日本厂商和国内其它厂商所控制。这一新领域的突起构成了对IBM新的危机。1980年，在计算机市场上，虽然在销售额上IBM还占优势，但是在实物战上日本厂商和国内其它厂商的小型计算机占了上风。因此，IBM的利润损失至少在5亿美元以上。IBM决心进入小型机和微电脑领域，进行全面战略反攻，矛头直指日本富士通，力图拿下小型机和微电脑市场的王位。IBM领导体制改革，正是为了实施其战略反攻的要求。1982年，IBM董事长卡里曾明确提出：要以对日战略为中心进行组织改革，集中全力对付日本富士通和日立制作所等对手。他认为：“只要能够对付来自日本的挑战，那就可能战胜世界上任何国家的挑战。然而，这一时期，美国电话电报公司（AT&T）进行了分解改组，开始进入计算机领域，欧洲经济共同体的计算机制造业也迅速发展起来，在西欧市场上采取统一政策与IBM 相对抗。 面对着国内外新增的劲敌，特别是同时受到来自日本、欧洲共同体和美国国内三方面挑战的压力，IBM不得不从整体上进一步调整原先的战略。在1983年，提出80 年代的新战略，主要包括4个方面的重要目标：（1）在情报产业的所有领域都能实现同行业的增长率。（2）在所有领域都有证明IBM的产品在技术的价值和质量方面的卓
【赛迪网独家特稿】集群技术是使用特定的连接方式，将相对于超级计算机便宜许多的计算机设备结合起来，提供与超级计算机性能相当的并行处理技术。早在七十年代就有人提出可以使用这种集群技术完成并行处理，但是由于受到当时网络交换技术的限制，集群系统在性能上与其他并行处理系统相距甚远，直到网络技术逐渐成熟的今天，它才具备了与超级计算机相匹敌的能力。 什么是集群 集群（Cluster）技术是指一组相互独立的计算机，利用高速通信网络组成一个计算机系统，每个群集节点（即集群中的每台计算机）都是运行其自己进程的一个独立服务器。这些进程可以彼此通信，对网络客户机来说就像是形成了一个单一系统，协同起来向用户提供应用程序、系统资源和数据，并以单一系统的模式加以管理。一个客户端（Client）与集群相互作用时，集群像是一个独立的服务器。 计算机集群技术的出发点是为了提供更高的可用性、可管理性、可伸缩性的计算机系统。一个集群包含多台拥有共享数据存储空间的服务器，各服务器通过内部局域网相互通信。当一个节点发生故障时，它所运行的应用程序将由其他节点自动接管。在大多数模式下，集群中所有的节点拥有一个共同的名称，集群内的任一节点上运行的服务都可被所有的网络客户所使用。 集群的特点 1．提供强大处理能力的高性能计算机系统：计算机集群可以通过负载均衡、并行处理、时间片处理等多种形式，将多台计算机形成高性能计算机集群。对用户端（Client）而言，计算机集群则是一个单一的系统，可以为用户提供高性能的计算机系统，而用户不用关心有多少计算机承担了系统实现的任务，而只需要关注系统的整体处理能力。因此，计算机集群可以用多台普通性能的计算机组成具有高性能的计算机系统，承担只有超级计算机才能胜任的工作。 2．提供高可用性的计算机系统：通过计算机集群技术组成的系统，可以确保数据和应用程序对最终用户的高可用性，而不管故障属于什么类型。即当计算机集群中的节点计算机出现软硬件故障的时候，高可用性集群提供了对软件和硬件失败后的接替。它将服务器镜像到备用系统或节点中，当主节点上的系统崩溃时，冗余节点就从替补角色转换到正式角色，并自动投入应用，从而保证了系统运行的不间断。
两台服务器集群巧搭建 服务器集群系统中，服务器不再分布在各处，而是集中在一起统一进行管理和维护。它保持了分布式客户机/服务器模式的开发性、可扩展性的优点，同时又具备了终端/主机模式的资源共享和集中易于管理的优点。 服务器集群系统中，服务器不再分布在各处，而是集中在一起统一进行管理和维护。它保持了分布式客户机/服务器模式的开发性、可扩展性的优点，同时又具备了终端/主机模式的资源共享和集中易于管理的优点。相对集中的集群系统，降低了系统管理的成本，而且还提供了和大型服务器系统相媲美的处理能力。 在传统的终端/主机的网络模式时代，终端功能简单，无需维护工作，在主机一端进行专门的管理与维护，具有资源共享、便于管理的特点。但是，主机造价昂贵，终端没有处理能力，限制了网络的规模化发展。之后的客户机/服务器模式推进了计算产业的标准化和开发化的发展，为系统提供了相当大的灵活性，但是随着分布系统规模的规模扩大，系统的维护和管理带来了巨大的开销。 面向Internet的服务型应用，需要高性能的硬件平台作为支持，将并行技术应用在服务器领域中，是计算机发展的必然趋势。并行处理技术在高性能计算领域中，高可用和高性能是集群服务器系统发展的两个重要方向。 集群的概念 集群英文名称是CLUSTER，是一组相互独立的、通过高速网络互联的计算机，它们构 成了一个组，并以单一系统的模式加以管理。一个客户与集群相互作用时，集群像是一个独立的服务器。集群配置是用于提高可用性和可缩放性。 和传统的高性能计算机技术相比，集群技术可以利用各档次的服务器作为节点，系统造价低，可以实现很高的运算速度，完成大运算量的计算，具有较高的响应能力，能够满足当今日益增长的信息服务的需求。 #P# 集群技术应用的需求 Internet用户数量呈几何级数增长和科学计算的复杂性要求计算机有更高的处理能力，而CPU的发展无法跟上不断增长的需求，于是我们面临以下问题： ●大规模计算如基因数据的分析、气象预报、石油勘探需要极高的计算性能。 ●应用规模的发展使单个服务器难以承担负载。 ●不断增长的需求需要硬件有灵活的可扩展性。 ●关键性的业务需要可靠的容错机制。 #P# IA集群系统(CLUSTER)的特点 ●由若干完整的计算机互联组成一个统一的计算机系统; ●可以采用现成的通用硬件设备或特殊应用的硬件设备，例如专用的通讯设备;
华师大高性能计算集群作业调度系统简明手册 华师大高性能计算集群采用曙光的Gridview作业管理系统，其中集成了torque+Maui，是十分强大的作业调度器。下面将依次介绍华师大的的作业调度系统的设定，使用，以及相关作业调度命令 一：华师大作业调度系统队列策略设定 由于华师大的超级计算中心共分三期建设，其作业调度设定较为复杂： CPU 节点名 (pestat 可查看) 节点Core 个数 队列备注 第一期E5450 b110-b149 b210-b229 8(2*4) mid1,huge 第二期E5640 b310-b339 b410-b439 8(2*4) mid2, hugeA(需申请) 其中hugeA队列提交后 需经批准 第三期X5675 ,GPU(c2050 ) a110-a149 a210-a249 a310-a339 a410-a447 12(2*6) mid3,small,ser ial,gpu hugeB(需申请), shu(私有队列) itcs(私有队列) 其中hugeB队列提交后 需经批准 shu和itcs为私有队列， 不向公共用户开放 在命令行输入cchelp 可以查看详细的华师大的作业调度系统策略，如下 二：作业调度系统的使用
华师大计算中心共有两个登陆节点login(59.78.189.188)和login1(59.78.189.187)，供用户登陆提交相关作业。一般来说，可直接使用命令行提交作业。不过为了规范和易于管理，建议使用PBS脚本进行作业提交，提交命令为qsub **.pbs(pbs脚本文件)。 下面将简要的分别给出串行作业和并行作业的PBS样本(已放至/home/目录下)，仅供参考，更多高级功能，请自行查阅相应手册。 1.串行作业pbs脚本样本 #PBS -N test \\表示该作业名称为test。 #PBS -l nodes=1:ppn=1 \\表示申请1 个节点上的1 颗CPU。 #PBS -j oe \\表示系统输出，如果是oe，则标准错误输出(stderr)和 标准输出(stdout)合并为stdout #PBS –q serial \\表示提交到集群上的serial 队列。 . /job>job.log 为提交的作业。 2.并行作业PBS脚本样本
收稿日期:2007-09-15 第一作者简介:左 婷(1979-),女,吉林省四平市人,现为吉林师范大学信息网络中心研究实习员. 2007年11月 吉林师范大学学报(自然科学版) .4第4期Journal of Jilin Normal University(Natural Science Edition)Nov.2007 Linux 高可用集群系统的结构和原理分析 左 婷1,吴会军2 (1.吉林师范大学信息网络中心,吉林四平136000;2.吉林省水文水资源局,吉林长春130000) 摘 要:通过对目前常用Linux 平台上高可用集群系统的软、 硬件基本结构和工作原理的分析与研究,构建容易扩展、高可用、易维护和管理、高性价比的计算机系统. 关键词:L inux;高可用集群系统;结构;原理 中图分类号:T P393 文献标识码:A 文章编号:1000-1840-(2007)04-0115-02 目前,很多国际知名软件公司和计算机厂商都推出了 自己的集群产品,其中值得一提的是T he H igh A vailability L inux Project 的开放源代码Heartbeat,已经同商业集群软件 一样成熟,而且较后者应用更为灵活.本文将着重介绍SuSE L inux Enterpr i se Server 10平台上Heartbeat2.0.8组成结构 和工作原理.1 Linux 高可用集群系统的基本概念伴随着集群技术的发展,出现了一些关于集群系统的概念和术语.(1)集群资源和集群资源代理.在集群系统中,所有由集 群控制和管理,并将其以单一和统一的形式提供给客户端用 户使用的计算机资源称为集群资源,例如:一种服务、一个 IP 地址、一个磁盘驱动,甚至可以说:除了节点,其它任何软 硬件资源都可以成为集群资源.而集群资源代理是为了控制 和管理某一集群资源而编写的代理程序脚本,集群软件通过 特定集群资源代理来操控某一集群资源,Heartbeat 套件本 身已经包含了一些常用资源代理,开发人员也可以自己按照 一定的规范编写;(2)指定协调者(也称主节点).主节点除了 具有其它一般节点具有的集群节点基本功能外,还负责对整 个集群系统的状态进行监控、分析和转换,对集群系统下达 集群指令,协调各节点的操作等,实际上是整个集群系统的 大脑!,显然一般情况下,整个集群系统只有一个主节点,但 当某些特殊情况发生时,例如主节点不再是集群中的节点, 主节点将发生迁移,即位置发生了变化,另一个节点将代替 它成为主节点;(3)ST ON IT H.英文 Shoot T he Other Node In T he Head !的缩写,代表一种将错误操作的节点进行隔离 的技术,为了防止错误操作的节点对集群资源进行破坏性控 制和操作,使其不断重新启动或关机,从而使其无法取得对 集群资源的控制权;(4)裂脑和仲裁.在某种情况下,由于软 硬件失败导致各节点无法相互确定彼此的状态时,整个集群将被分裂为几个部分,每个部分都想取得对集群资源的控制权,以保证集群的高可用,这种对集群资源的竞争将严重破坏集群资源的完整性和一致性,甚至导致整个集群瘫痪、硬件被损坏的严重后果,这种情况称为裂脑.为了防止裂脑的发生,由仲裁协议决定哪个部分来取得对集群资源的控制 权,为了继续保证系统的高可用,一般将控制权交给节点数 超过原集群节点数一半的部分,同时将其它节点进行隔离; (5)单点故障(失败).单点故障是指由于系统中某一组件的 故障或运行失败从而导致整个集群系统瘫痪和应用服务完 全停止,因此,在高可用集群的构建中应尽量避免单点故障.2 Heartbeat 的主要进程Heartbeat 的所有集群功能都是由它的进程和它们之间相互通信来具体实现的.(1)集群资源管理器(CRM ,Cluster Resource M anager).CRM 是集群系统中最主要的管理进程,它负责对整个集群资源的管理和约束,包括资源的配置及相互间依赖关系,并决定资源运行的状态、位置和时间等.另外它还负责监控本地资源管理器完成这些工作,CRM 通过与系统的每一个组件通信来相互作用和协调操作,CRM 通过heartbeat 通讯模块进行节点间通讯,从CCM 接受当前集群的成员信息,指令ST O NI TH Daremon 如何工作,负责记录系统日志等;(2)策略引擎(PE,CR M Policy Eng ine).PE 是CRM 的一个组件,只能在主节点上运行.PE 的功能是根据当前集群的状态及集群资源的约束配置计算出集群的下一个状态,即为T E 生成将要执行的计划和策略;(3)执行引擎(T E,CRM T ransi tion Engine).T E 也是CRM 的一个组件,只能在主节点上运行.T E 的功能是按照P E 生成的集群状态变化计划和策略,指令集群节点上的LRM 对具体的集群资源进行操作;(4)?115?