PowerHA7.1安装配置文档

POWER HA实施安装文档目录一、硬件环境.......................................................................................................................二、实施标准.......................................................................................................................三、实施步骤.......................................................................................................................1、安装AIX 5.3.1.0操作系统补丁绑定包语言包 ...........................................................2、设置VG ...................................................................................................................3、设置主机名及IP地址.................................................................................................4、设置Hosts表...........................................................................................................5、添加串口设配............................................................................................................6、安装HA软件和HAFIX ..............................................................................................7、配置HA 集群...........................................................................................................8、配置HA节点............................................................................................................9、配置HA网络............................................................................................................10、配置HA通讯接口....................................................................................................11、配置添加HA 永久IP ...............................................................................................12、配置ha Service IP ..................................................................................................13、配置HA资源组.......................................................................................................14、配置ha Resource Groups 资源 ..............................................................................15、配置ha 同步..........................................................................................................16、启动/停止ha .........................................................................................................四、结束 .............................................................................................................................1.永久ip和service ip为一个网段,都是生产环境中使用的网段。

PowerHA配置手册1. 简介PowerHA是IBM提供的高可用性解决方案，可以保证系统的高可用性和可靠性。

本手册旨在提供关于如何配置PowerHA的详细指导，帮助用户快速上手并正确配置PowerHA。

2. 安装和配置PowerHA2.1 安装PowerHA软件包在开始配置PowerHA之前，首先需要安装PowerHA软件包。

按照以下步骤进行安装：2. 将软件包上传至服务器。

3. 打开终端，并使用root用户登录。

4. 解压软件包文件。

5. 执行安装脚本，按照提示完成安装过程。

2.2 创建PowerHA集群安装完PowerHA软件包后，需要创建PowerHA集群来管理系统的高可用性。

按照以下步骤进行创建：1. 打开终端，并使用root用户登录。

2. 运行`hacreate`命令来创建一个新的PowerHA集群。

3. 按照提示输入集群名称和网络接口等信息。

4. 配置集群中的节点信息，包括主节点和备节点。

2.3 配置资源组和资源在创建PowerHA集群后，需要配置资源组和资源，以支持系统的高可用性。

按照以下步骤进行配置：1. 打开终端，并使用root用户登录。

2. 运行`smitty cl_resource_group`命令来创建一个新的资源组。

3. 按照提示输入资源组名称和资源组类型等信息。

4. 配置资源组中的资源，包括IP地址、磁盘等。

3. 验证和测试配置完成对PowerHA的安装和配置后，需要验证和测试配置是否正确。

按照以下步骤进行验证和测试：1. 打开终端，并使用root用户登录。

2. 运行`smitty cl_verify`命令来验证配置。

3. 按照提示选择要验证的资源组和操作。

4. 根据验证结果进行必要的调整和修正。

4. 监控和维护PowerHA为了保证系统的高可用性，需要定期监控和维护PowerHA集群。

按照以下步骤进行监控和维护：1. 打开终端，并使用root用户登录。

2. 运行`smitty cl_monitor`命令来监控PowerHA集群。

HACMP软件安装实施[键入文字]目录1说明 (4)1.1文档说明 (4)1.2注意事项 (4)2HACMP 规划 (5)2.1HA（H I GH A V AILABILITY） (5)2.2规划举例 (6)3HACMP 安装前准备 (8)3.1硬件环境准备 (8)3.2介质准备 (8)4POWERHA（HACMP）软件安装 (9)4.1安装HACMP5.4需要的操作系统软件包 (9)4.2更新操作系统 (10)4.3HACMP软件安装 (10)4.4升级HACMP软件 (11)5配置HACMP (14)5.1设置IP地址 (14)5.2配置共享磁盘卷组VG (15)5.3定义TTY串口通讯设备 (16)5.4创建集群C LUSTER (17)5.5添加N ODE节点 (19)5.6创建以太网络，添加ETHER网络通讯接口 (19)5.7创建点对点网络，添加RS232通讯设备 (22)5.8添加S ERVICE IP L ABEL (24)5.9配置A PPLIC A TION S ER VER (26)5.10配置资源组 (28)5.11参数优化 (31)5.12同步资源组 (35)5.13启动HA (36)5.14保存S NAPSHOT (37)6HA服务启停、监控 (38)6.1启动HA服务 (38)6.2停止HA服务 (38)6.3监控HA状态 (39)7切换测试 (41)7.1手工停服务切换测试 (41)7.2不停HA服务，在线移动资源组（C-SPOC） (42)7.3模拟网卡故障测试 (44)7.4模拟服务器异常DOWN机测试 (44)1说明1.1文档说明本文的环境是在AIX5.3操作系统下安装配置hacmp5.4的步骤，其它版本的系统安装配置基本类似，不同之处，请参考IBM的官方文档。

文档链接地址IBM Systems Information Centers ：/eserver/目录分aix、软件、等文档目录。

PowerHA完全手册（一）前言自2008 年4 月02 日笔者在IBM DevelopWork网站首次发表《HACMP 5.X 完全手册》以来，加上各网站的转载，应该已过了10万的阅读量，在此非常感谢大家的认可和支持。

转眼已经5年过去了，期间非常感谢不少同仁指出了该文的各种不足，并且HACMP已经改名为HACMP了，由于软件版本的更新和本人当时的技术水准有限，同时也存储不少同仁的希望，在原文基础上进行了补充和修订完善，也就有了本文。

正是由于AIX专家俱乐部的兴起，对AIX和HACMP的技术感兴趣的技术人员又更多了。

因此选择本杂志作为原创发表，就是希望能对更多的同仁日常工作有所帮助。

此外，虽然本文号称“完全手册”，一是为了吸引眼球，二也只是相对于其他只谈安装配置的文档而言。

由于HACMP现在已相当复杂，本文范围也主要关注于最常用的双节点，还望大家谅解。

即便如此，本文篇幅可能仍然较长，虽然也建议大家先通读一下，但实际使用使用时可根据具体目的按章节直接查阅操作。

这是因为一方面本文所述操作笔者都加以验证过；一方面也是全中文，省得大家去查一大堆原版资料。

希望能帮助大家在集成和运维HACMP的过程中节省精力、降低实施风险，这也是本文编写的初衷。

同时还望那些被部分摘抄文章的同仁也能理解，你们都是笔者的老师，这里也一一谢过。

虽笔者端正态度，尽力认真编写，但由于能力有限，恐仍有错漏之处，还望众多同仁多多指正海涵，在此先行谢过。

1. 为什么需要PowerHA/HACMP随着业务需求日益增加，IT的系统架构中核心应用必须一直可用，系统必须对故障必须有容忍能力，已经是现代IT高可用系统架构的基本要求。

10 年前各厂商现有的UNIX服务器就已拥有很高的可靠性，在这一点上IBM的Power系列服务器表现尤为突出。

但所有UNIX服务器均无法达到如原来IBM大型主机S/390那样的可靠性级别，这是开放平台服务器的体系结构和应用环境所决定的，这一点，即使科技发展到云计算的今天仍然如此。

Rhel 7.1 + oracle 11gR2 安装环境选择RHEL7.1Oracle 11gR2RHEL7.1 安装1.软件选择（java kDE 兼容性工具开发工具）1)分区–我要配置分区/ boot 500M/swap 2倍内存/ 剩余的所有空间2)设置网卡2.yum 光盘源建立挂载光盘mount /dev/sr0 /mntcd /etc/yum.repos.d/vi rhel-media.repo[testyum]name=dvdbaseurl=file:///mntenable=1cd /mntrpm --import RPM-GPG-KEY-redhat-releaseyum updateyum install -y binutils compat-libstdc++ compat-libstdc++ gcc gcc-c++ glibc glibc-devel ksh libaio libaio-devel libgcc libstdc++ libstdc++-devel libXext libXtst libX11 libXau libXi make sysstat unixODBC unixODBC-devel binutils compat-libstdc++ compat-libstdc++ gcc gcc-c++ glibc glibc-devel ksh libaio libaio-devel libgcc libstdc++ libstdc++-devel libXext libXtst libX11 libXau libXi make sysstat unixODBC unixODBC-devel binutils compat-libstdc++-33 elfutils-libelf elfutils-libelf-devel glibc glibc-common glibc-devel gcc gcc-c++ libaio-devellibaio libgcc libstdc++ libstdc++-devel make sysstat unixODBC unixODBC-devel pdksh numactl-devel glibc-headers binutils compat-libstdc++ gcc gcc-c++ glibc glibc-devel libaio libaio-devel libelf libgcc libstdc++ libstdc++-devel make sysstat unixODBC unixODBC-devel yum -y install glibc.*.i686 libgcc.*.i686 libstdc++* libstdc++.*.i686 gcc* gcc-* gcc-c++-* glibc-devel-* glibc-headers-* compat-libstdc* libstdc* elfutils-libelf-devel* libaio-devel* sysstat* unixODBC-* pdksh-* telnet* *vnc* libaio*.i686 compat*.i686 libstdc*.i686 unix*.i686yum install --setopt=protected_multilib=false compat-*拷贝rpm包到系统中rpm -e kshrpm -ivh pd*3.创建orale用户groupadd -g 1001 oinstallgroupadd -g 1002 dbauseradd -u 1001 -g oinstall -G dba -d /home/oracle oraclepasswd oraclemkdir -p /u01/app/oraclechown -R oracle:oinstall /u01/app/oraclechown -R oracle:oinstall /u01/app/mkdir /u02/mkdir -p /u02/oradatalsls -lcd /u02/lsls -lchown -R oracle:oinstall oradata/4.创建oracle环境//关闭防火墙systemctl stop firewalld.servicesystemctl disable firewalld.service//关闭selinuxvi /etc/selinux/config#SELINUX=enforcingSELINUX=disablesetenforce 0getenforce\\配置环境变量vi /etc/profileexport PATHexport ORACLE_SID=orclexport ORACLE_BASE=/u01/app/oracleexport ORACLE_HOME=$ORACLE_BASE/product/11.2.0/db_1export ORACLE_UNQNAME=dhappexport ORACLE_TERM=xtermexport LD_LIBRARY_PATH=$ORACLE_HOME/lib:/lib:/usr/libexportCLASSPATH=$ORACLE_HOME/JRE:$ORACLE_HOME/jlib:$ORACLE_HOME/rdbms/jlib export NLS_DATE_FORMAT="yyyy-mm-dd HH24:MI:SS"export NLS_LANG=AMERICAN_AMERICA.ZHS16GBKexport ORA_NLS11=$ORACLE_HOME/nls/dataexport TMPDIR=/tmpPATH=$PATH:/usr/sbin:$ORACLE_HOME/binexport PATH. .bash_profile[root@localhost ~]# cat /etc/hosts127.0.0.1 localhost localhost.localdomainvi /root/.bash_profilevi /home/oracle/.bash_profile5.安装oracle1)拷贝安装文件cp -R /media/ /opt/database/chown -R oracle:oinstall /opt/database/ 2)切换到oracle 用户chomd -R u+x *export LANG=C3)只安装软件，不创建数据库4)添加中文5)目录设置6)安装修复7)检查包忽略后开始安装8)问题1：Install[root@localhost mnt]# find / -name libc.afind: ‘/run/user/1001/gvfs’: 权限不够find: ‘/tmp/OraInstall2017-12-16_06-51-26PM/dtemp350’: 没有那个文件或目录/usr/lib/x86_64-redhat-linux6E/lib64/libc.avi /u01/app/oracle/product/11.2.0/db_1/ctx/lib/ins_ctx.mk不能粘贴只能敲命令ctxhx: $(CTXHXOBJ)-static $(LINK_CTXHX) $(CTXHXOBJ) $(INSO_LINK)/usr/lib/x86_64-redhat-linux6E/lib64/libc.a保存并重试。

AIX7.1操作系统安装配置规范文档信息项目名称：AIX7.1操作系统安装配置规范文档版本号：1.0文档作者：环境保障二处生成日期：2015年7月文档审核者：环境保障二处审核日期：文档维护记录版本号维护日期作者/维护人描述1.0 2015-7-7 环境保障二处根据中心内部相关处室讨论意见及部门会商意见修订，形成正式文档2015年7月信息科技部适用范围本安装配置规范适用于AIX V7.1版。

除条文中特别规定适用范围的，本安装配置规范条文适用于总分行的生产、研发和测试等环境。

鉴于AIX7.1操作系统小版本在不断变化中，且还分为express、standard、enterprise三个版本，本文档根据standard版安装过程截取步骤及截图，若安装其他版本操作系统，文档中所涉及的步骤或截图可能与实际环境有所差异，请注意结合实际情况做出判断。

目录适用范围 (1)一、硬件配置要求(生产环境必须满足，研发测试环境供参考) (3)二、操作系统安装过程 (3)(一)准备工作 (3)(二)安装过程 (3)(三)其他软件包的安装 (20)三、操作系统的配置步骤 (21)(一)修改时区 (21)(二)修正操作系统时间 (22)(三)修改ROOT用户的密码 (23)(四)修改机器名 (23)(五)修改操作系统属性参数 (24)(六)设置系统DUMP (25)(七)VG创建及配置 (27)(八)修改系统交换空间 (31)(九)激活串口 (32)(十)修改IP地址和路由设置 (33)(十一)建立逻辑卷WORKLV (35)(十二)创建文件系统 (36)(十三)系统内核参数调优 (38)(十四)系统资源参数调整 (38)(十五)配置安全连接软件SSH (39)(十六)部署NTP服务(生产环境必须设置，研发测试环境供参考) (40)(十七)部署生产系统操作系统自动备份脚本(生产环境必须设置，研发测试环境供参考) 40四、操作系统的安全设置步骤 (41)(一)关闭所有不必要的系统服务进程 (41)(二)设置登录超时时间 (44)(三)限制用户使用SU (44)(四)操作系统用户帐户设置规范如下： (44)(五)用户密码策略设置(生产环境必须设置，研发测试环境供参考) (45)(六)系统安全其他方面的设置步骤 (47)五、双网卡配置与监控部署 (48)(一)小型机双网卡配置(生产环境必须设置，研发测试环境供参考) (48)(二)部署生产系统综合管理脚本(生产环境必须设置，研发测试环境供参考) (49)(三)部署系统集中监控平台T IVOLI监控代理(生产环境必须设置，研发测试环境供参考)50一、硬件配置要求(生产环境必须满足，研发测试环境供参考)AIX操作系统适用于IBM 小型机和刀片式基于Power系列芯片开发的机型，相应的硬件要求建议如下：➢双电源模块冗余配置（拷机过程中需进行电源冗余测试工作）。

使用clmgr 命令配置PowerHA 7.1PowerHA 7.1 在配置和管理方面有三大改进：SMIT 菜单管理更加便捷和智能；引入Systems Director 对PowerHA 7.1 的配置与管理功能；增加了clmgr 命令集。

本文主要介绍了clmgr 命令集的功能和主要用法。

clmgr 命令集的介绍在过去，HACMP 一致缺少命令行管理工具，HACMP 的管理主要使用 SMIT 菜单完成。

HACMP 5.4 引入了一个名为 clvt 的工具。

开发这个工具的目的是让 Smart Assists 使用它在命令级执行配置任务，所以它的功能只限于 Smart Assists 所需要的。

PowerHA 引入了一个新的命令集 clmgr。

这个命令集是基于 clvt 命令集，但是有了很大的改进。

通过这个命令集，您可以完成 PowerHA 配置和管理的操作，从而有利于执行批量化作业或者方便脚本对 PowerHA 命令的调用。

就个人使用经验而言，PowerHA 7.1 的配置和管理相对于 PowerHA6.1，要方便很多。

PowerHA 7.1 在配置方面，除了使 smit sysmirror 菜单更加简洁、增加 SysDir 对 PowerHA 的配置功能之外，还增加了 clmgr 的命令集。

这个命令功能很强大（层级帮助 + 命令缩写），也很易用。

clmgr 命令有助于脚本的调用，也比较适合批量作业。

例如，查询资源组 rg1 的状态，所在节点和节点列表，可以把命令写成：这样的话，如果我们写 shell 脚本或者调用，可以直接调用 PowerHA 7.1 clmgr 的命令，这样效率会高很多。

clmgr 与 clvt 相比，改进主要体现在以下几个方面：1.支持的功能保持一致2.可用性得到改善3.适用性得到改善4.充分利用全局的消息目录5.多层次诊断6.自动化帮助clmgr 命令的语法clmger 命令集的语法是：clmgr [actions] [ objects]clmgr 操作动作类型以（actions）及其简写 / 别名为：表 1.clmgr actions 选项clmgr 操作的对象（objects）以及其简写 / 别名为：表 2.clmgr objects 选项clmgr 命令使用方法使用 clmgr, 不必记太多的参数，因为 clmgr 的层级查找帮助功能还是比较强大的。

AIX 7.1 安装 EMC ODM 和 PowerPath1.安装ODM解压缩# cd /tmp/emcsoft/odm# uncomp ress EMC.AIX.6.0.0.5.tar.Z # tar xvf EMC.AIX.6.0.0.5.tar安装ODM# smit in stallirscall ind upcUie soE 打cMove curjor TO d#s1red iten and pr«ss ent#r.update Tn^aTTMto LAT«sr(Update All J software Euixlietpdate software by Fix (APAB ) install And Lpdflt« froa ALLSoftwar*In stall Software -> En terTnit fll1 5ofTyptf ord vdluif for the ef^cry field.Press Enter AFTER vohirpg al 1 desired changes.II* INPUT device / directory for Software [ ./ ] -> EnterI Entry FlelilsJEsc + 7选择“ EMC Symmetrix AIX Support Software "和 “ EMC Symmetrix FCP Support Software ” -> En terinsiAi 1 MTiwjfeType or select valuer in entry Melds, Press Linicr A FTL K making all desired chinges .* 焉聲J 麒豁豐严 c r or ¥ tor software PEI^lElM OfTty? 1 operation wnll hOT Otcur)COMMfr 5ofti»are updates^ SAVE replaced f-i les?ALTTUF-^TicALLr 1ns 匚Nil requisite software? EX —E\D f T T B syitems i f sp ace reeded?OVERnRITE sarttf g ne»rtr versiOTkS? vLftiFV Irifiiall and check fUc s ■(工《? mclu<Je cor rEsponchnq LAPKUAGE fllcseii? bE-ATLED cut put?Proc«i i™ iT -iplie volume,， A£t 匚f>T new lIccREC agrfiCRicRx£?PREVIEW n«w LicE'JSEQentry Fields] rian_lAC CSC] rtonanoJPAR HanogenentPer form operation in dotal Envlironnerrt perform op ei ation or Dtia 匚hed rfPARS [WTacn^d hPAft hatiHS Rcnourt installation Device In vyPAHt Alte rnate W P4B install on oe\M ceyes noL_all_wparsJ* SOFTWARE to In stall -> F4SCFTWAR 匚 TO installMove cursor to desired item and press ESC -I -7. use arrow keys to scroll . ONE OR. MORE iienis can be selected.Enter AFTERP 广 e5Srtiaking al 1 selections.ALL+++++++++++B++++oooooooocco Qo ooooooo 0O o o o EMC EMC EMC EMC EMC EMCEW 匚 EW 匚 Erie EW 匚EMC EMC EMCFl=HeIpE5c+7=Select £nier=DoF2=Refre5hEsc+6=lrnage >Fl ndFSnzancel E5C+0=E3tiL n=Fl nd NexcARE YOU EURE?Continuing may del ete i n-Formati on you may want to keep- Thi 5 is your last chance to 5top before continuing.Press Enter to continue.Press Cancel Lo ret urn ro the app1i cation.En terCOmnand: JE sCdouT : ye5 stdGrr : no Rpftjrp ronrand ronplftlfin, fiddiTiorwl Instrurlrion'； nay nppesr bfI OM .T ；EKX. Syiwietrix flix. rt#SywieTriKnf CP ，rtepre-Instil lai ion ver1f icatioiK . xverifying selections*done verlTyinq requ+mlpes*< - done Resu Its,..listed In This setti 卯 p&ssed pre-install a 匸 i an verification b4 ■foEtili&d.« Fnri of Suff5frrifln >?Esc + 0查看安装的ODM 和版本Type or seltct values in enc ry fields, pr-flis truer AFTER making ill dcsizd changwh ■* TNPLrr device 「directory for serft 的r* 匸 50FTifeAHE to installpkkvZtw only? (Install operation will kOi occur) foCiMjirfiupdAlWi?5AVF rep lacF-d flips? AUTOMATICALLY 1 nil a h 「芒qd,"仇 io+rware'? EJCTQND flic s/3tc™； if 5pace needta^ QvER^凰JTE sme or newer ver510*5= VERIFY I ns Lili jrid check flit sizes?TiK.lude tnr Hi ponding LANGUAGf f ilestt s"^ OFTdlLFD (Hit pur Pr 匹nm ]11 pl 空 /gj 二_ _ _ _ PRtVibur fttw LlCE^Sb 暫《砂吟？ [Entry F ieldsl no y«± no㈣yci no no yts no yes膺nohiPtR iMaragerentPerform OperMion in Global Environment Perform Operatlon on DeTacheri tPAfts IHiLdLUbdWPAK. h&i 血RfifOhnt Tn3tji1lAt ion O PVTC € in hP 九Alfpi-natp i<PAR InstallnfiaTi Devi CPyesng[_in严ACCEPT new lice nse agreeme nts?-> yes -> En terCOP<MAIUD STATUSIllFr=He 1pE5C+8=ImageF2=ftefre5-h E5t 十O=Exi t F3=cancel Enter=Do、TS11 -T ■> -cgiNQqwXY -1"-d-f Flip Z?A1files Gcs and win selected 1住ets5ym'='>Tis. aix. rte 5EJMC . SyniGtr 1 x. fcp. rte &.0.0. i* FVf ^yi^rpTrix AIX 5up[Kirt 5□-.. 4 tv (. ^ynretrlx rCP Support £□...P ilb ；：* INPUT device / directory for Software [ ./ ] -> Enter# Isl pp -L |gre p EMC2.安装 PowerPath解压缩# cd /tmp/e mcsoft/ pp# gun zip EMCPower.AIX60.SP1.GA.b132.tar.gz # tar xvf EMCPower.AIX.6.0.SP1.GA.b132.tar安装 PowerPath# smit in stallHtH'E cursor TO desired icen and press tmer,iJpdii i^Ljn sMiwjTE iti LdtML LuvdAll)Install sgfTiftarf Bundle Update Software hy Fix (APAfi) Erutil] Frcwi ALL 1 Ablk twjrvIn stall Software -> En terlypt or 主乜Tti" d valdt fur the crtLry ffeTtk Press Fnlpr AFTFR m 戒 ing all rfpii 厂*fi changes.EMC. symmetfix.a.ix. rte EMC. 5ymmet r i x.f cp,rte6.0,0.5 6,0. 0, 5EMC E 忖匚symmetrix symmexr-ix Aix support FCP SupporxInstall AndTnitall SoftwJtrpARE YOU SURE?En terlype or select walues Im entry fields.目「聲E tnC4r AFTER vjtk1 广勺 ill 曲£ 1 2d ChA0q4S.* liHP'UT d ev1 cc / directory for sGfxwarc * SOPTUfflHE tCh 1rSL JllPftevHE* only? (dnstail fipemrftrt wi ) 1 HOT occur) COMMIT softt^arc u palaces? SAvt replaced files?□^^unCMftTlCALLY install r €qu -i si t E ioftHare?EXTEND frit lyjtenoj if 3fmce ne«Jed^ QVfRhffirTE 5Me or ncAcr vfirsion 訐VERIFY 1 ns Lili and ch et(( file sizfis?include Lurrti^puiiding LAhHkJ^E fil-ietsr nFTATLFn QUTpytr Process nu1t~l 口die volumes 孑 PPFVTFk nPW LTCFVISF jgrpwnpntj^LGm ry FleldsltaP'AW tiaragenertp srf&r inn opura 匚Ion Im cl obi 1 tnv1rorti»i'it A----- 亠」—an Detached *PABsDerachert WPAB ftcrcunr installaclon Device InVI P AAS Alt«i WPAR jnn jllidon 曲vicePerform iQperatiQn oeTack - noL_al l-wp-srsj* SOFTWARE to In stall #保持默认“ all latest ”ACCEPT new lice nse agreeme nts?-> yes -> EnterConti nuirig may del ete i n^ormation you may want to keep. This is your last chance t□ stop before cont -inuTng.Press Enter to continue.P ress Cancel to ret urri to the appI i cafi on. F B HG 1 p E5C+8=ImageIllF2=ftefresh ESt 十0=Exi rF3=cancel Enter=Docomnanc: 32 stdout: yesstderr = rraEsc + 0查看安装的PowerPath 和版本# Isl pp -L |gre p EMC安装 Power path Lice nse# emc preg -add XXXX-XXXX-XXXX-XXXX-XXXX-XXXX扫描磁盘和配置PowerPath# cfgmgr -v # po wermt config查看PowerPath 磁盘信息nefore cotimflnd coinplotion, fldriiTionsl initruction 、 nsy Appear b 已 1M -'TOP ] l^mnstall -I "a =cg«QqH<v -z -<)./ "f Flic 1Fl le: I : SzTOCptiRf . b&ib t ； EMC power . MiQrntcoinpor**n (tI :£MCpo*er, nlgratloruenablflr T : EMC pcHher . rip:ce.0.1.06* O H 1/0 6.0.1.0 Pr fl-lnstal latlon \ier1f1 cat lion... v^rlfyinq eciIons.doneVeri fy"" ng r equi a 11 ea^ , _ done Results.-. £ll<-CF£5FS and hill 1 i ited 111 th \ 5 svC.t 1 Dtl p E±sa«cl p T (■- \ riit all Jt 1 on be in 巩！iHud"Selected F1 les Efts FMC ,V gfTtr mrufi nrprt fi,0.1.0 EMCpo*^ier. baseB.0.1. DEMCp owet". ml g r at i olT_tifiab 1 er £.0.1.0 EMC potver. up X 6. 0.1.0Privif rPflTh P oviQ rP at 11PowerPath Pm^erPath MijTti_P4thing MftrwgpTprt coTpon*^.,- BasEDriver ind ut ... Mfdrat iofl Enabler■ 11 Dite …EMc' symmetri x'. aix, rte 6.0.0. 5EMCEy ________________symmetrix symmetrix Aix support FCP support 0.0.1.0cFPowerPdl I WUIT1 _p^irmng# po wermt dis playsymmetr-ix 1 ogical device coijnt=32:KK ■ HK ■ ■；BnKn; ■ ■■■ ■ ■ ■ ■ — ■ ■■■■■■----- Host BUS Adapters ------------------- ------ i/o Paths ■ ■ ■■ ■ ------ stats### HW Pathsummary TotalDead I0i/S€C Q -IOSErrors0 fscsiO op final 64 o- 0 0 1 fsC512opt! rial64- 0# I查看详细的聚合设备和子设备信息# po wermt dis play dev=allPseudo name-hdiskpower31symmetrix 10-000^96800554 Logical device ID=00053Device bWN=6000097000049e600354533030303533 stai:e=al-ive ： pol 1 cy=symnt)pr : queued-los=0保存配置# po wermt saveHw Path I/O parhsinterf . ModeStare Q-IOS Errors 1 f scsi2 hdiskl32 FA 2d ：O5 active al ive 0 0 1 fscs^i2 hdisklO<]FA ld ：05 active al ive 0 0 0 fscsiO hdisk&eFA 2d ： 04 active alive0 0 0 f scsiOhdisk^eFAId ： 04activeall iveStarsHOSTsror --- I/O Path --。

PowerHA 7.1配置规范V1.02013年9月修订记录目录修订记录 (2)第一章环境需求和安装 (4)1.1操作系统软件需求 (4)1.2硬件需求 (4)1.3其它配置需求 (5)1.4安装 (6)第二章配置POWERHA (7)2.1创建C LUSTER (7)2.2创建R EPOSITORY D ISK (8)2.3同步HA的拓扑配置 (8)2.4创建共享VG (9)2.5创建S ERVICE IP (11)2.6配置资源组 (12)2.7同步HA配置并启动HA (13)第一章环境需求和安装1.1 操作系统软件需求安装PowerHA 7.1所需要的最低版本AIX如下：-AIX 6.1 TL6或者TL7-RSCT 3.1通常RSCT软件包都是AIX操作系统自带的，PowerHA的软件安装包中也包含RSCT软件包。

以下AIX文件集是安装PowerHA 7.1所必须的，通常也包含在AIX的缺省安装中，在安装PowerHA之前一般只需再次确认即可。

bos.adt.libbos.adt.libmbos.adt.syscallsbos.ahafsbos.clvm.enhbos.clusterbos.data.tcp.client.tcp.serverbos.rte.SRCbos.rte.libcbos.rte.libcfgbos.rte.libcurbos.rte.libpthreadsbos.rte.lvmbos.rte.odmrsct.basic.rtepat.basic.hacmppat.clients.hacmp1.2 硬件需求1.每个节点至少有两个网卡连接到同一个VLAN中，从而实现以太网心跳的冗余。

2.每个节点至少两个通路连接到共享存储。

1.3 其它配置需求1.3.1 多播(multicast)地址PowerHA 7.1采用CAA技术提供的多播来实现心跳通信。

因此在配置HA之前需要和网络部门沟通，可能需要更改交换机配置以支持HA两个节点网卡之间的多播通信。

PowerVM 环境下实施 PowerHA7.1 要点本文主要介绍 PowerVM 环境下实施 PowerHA 的一些要点，包括 PowerHA 对虚拟网络监控、光纤心跳在虚拟化环境下的实施等。

需要注意的是，本文测试所得到的数据是试验中的测试数据，非 IBM 公司官方数据。

0评论：魏新宇, 高级 IT 专家, IBM China2013 年 9 月 26 日•内容前言随着 PowerVM 使用的越来越多，在虚拟化环境下实施 PowerHA 的案例会越来越多。

传统 PowerHA6.1 在物理分区下实施是比较经典的配置，PowerHA7.1 为了适应 PowerVM，在开发的时候进行了相关考虑，主要包含三点：PowerHA7.1 中允许 1 个 HA 节点只有 1 个网卡、1 个 BootIP 和一个 ServiceIP，并且ServieIP 可以和 BootIP 在相同网段；netmon.cf 的功能在虚拟化环境中能够成功实施，解决了 PowerHA 监控虚拟网卡状态的问题；FC 心跳在虚拟环境下能够成功实施。

本文讲主要介绍虚拟化环境下实施的相关要点。

回页首PowerHA7.1 对虚拟网络的监控netmon.cf 的配置在传统的 HA 环境下，PowerHA 可以通过监控物理网卡的状态来进行网络监控。

而虚拟化环境下，VIOC 中虚拟网卡永远不会处于 down 或者 detach 的状态（除非人为操作），带来的结果是可能 VIOC 已经无法对外通信，但是由于其虚拟网卡状态仍然是 up 的状态，HA 不会识别网络故障，资源组也不会发生切换，结果就是业务中断，也就是“该它干的活它没干”，HA 失去了其本来的意义。

因此，在 PowerVM 环境下实施 PowerHA7.1 的时候，就必须要引入 netmon.cf 的配置。

在 netmon.cf 中，我们通过设备 HA 本地网卡 ping 目标地址的方法，来判断虚拟网卡通讯是否正常。

使用 clmgr 命令配置 IBM PowerHA 7.1使用clmgr命令配置ibmpowerha7.1使用clmgr命令一配置powerha 7.0powerha7.1在配置和管理方面有三大改进：smit菜单管理更加便捷和智能；引入systemsdirector对powerha7.1的配置与管理功能；增加了clmgr命令集。

本文主要介绍了clmgr命令集的功能和主要用法。

clmgr命令集简介在过去，hacmp一致缺少命令行管理工具，hacmp的管理主要使用smit菜单完成。

hacmp5.4引入了一个名为clvt的工具。

开发这个工具的目的是让smartassists使用它在命令级执行配置任务，所以它的功能只限于smartassists所需要的。

Powerha引入了一个新的命令集clmgr。

此命令集基于clvt命令集，但已得到极大改进。

通过这个命令集，您可以完成powerha配置和管理的操作，这有助于执行批处理作业或通过脚本调用powerha命令。

就个人使用经验而言，powerha7.1的配置和管理相对于powerha6.1，要方便很多。

powerha7.1在配置方面，除了使smitsysmirror菜单更加简洁、增加sysdir对powerha 的配置功能之外，还增加了clmgr的命令集。

这个命令功能很强大（层级帮助+命令缩写），也很易用。

clmgr命令有助于调用脚本，更适合批处理作业。

例如，要查询资源组Rg1的状态、节点和节点列表，可以将命令编写为：#clmgr-csastate,cu,noqrgrg1online:ats3:ats1ats2ats3:default在这种情况下，如果我们编写一个shell脚本或调用，我们可以直接调用powerha 7 1clmgr命令，因此效率会高得多。

clmgr与clvt相比，改进主要体现在以下几个方面：1.支持的功能一致2.可用性得到改善3.适用性得到改善4.充分利用全局的消息目录5.多层次诊断6.自动帮助clmgr命令的语法clmger命令集的语法为：clmgr[actions][objects]clmgr operation action type （actions），其缩写/别名为：表1.clmgractions选项clmgr操作的对象及其缩写/别名为：表2.clmgrobjects选项Clmgr命令用法使用clmgr,不必记太多的参数，因为clmgr的层级查找帮助功能还是比较强大的。

PowerHA7.1安装配置文档安装配置文档Version作者：文档记录版本记录安装配置文档 (1)1规划 (4)2安装软件 (7)拓扑图 (7)SAN设置（可选） (7)安装软件 (8)3设置网络相关 (8)网卡IP设置 (8)HOSTS文件设置 (8)配置/ETC/CLUSTER/RHOSTS文件 (9)准备REPOSITORY DISK和共享存储 (9)4创建群集 (10)初始化群集 (10)定义R EPOSITORY D ISK (10)配置PERSISTENT IP (11)同步 (11)查看配置信息 (12)配置资源和应用程序 (12)添加Applications脚本 (12)配置服务IP (13)创建资源组 (14)修改资源组属性 (14)添加卷组 (15)再次同步 (16)5HACMP状态管理 (16)启停HACMP (16)查看HACMP最终状态 (17)修复查看HACMP状态不正常 (17) 删除REPOSITORY DISK (18)1规划IBM PowerHA SystemMirror Standard Edition 7.1.1 for AIXUpdate.pdf2安装软件2.1拓扑图2.2SAN 设置（可选）zoneing:两个SAN交换机上分别创建主机到主机的zone。

修改HBA卡属性：方法一：适用于可以删除子设备时rmdev -Rl fcsXchdev -l fcsX -a tme=yeschdev -l fscsiX -a dyntrk=yes -a fc_err_recov=fast_fail cfgmgr -l fcsX;cfgmgr -l sfwcommX验证：lsdev -C | grep -e fcsX -e sfwcommXlsattr -El fcsX | grep tmelsattr -El fscsiX | grep -e dyntrk -e fc_err_recov方法二：适用于设备忙时，重启生效2.3安装软件最简安装包（待测试）3设置网络相关3.1网卡IP设置3.2hosts文件设置主机名和节点名对应，/etc/hosts文件中必须要有主机名对应的IP 每台服务器都要修改由于要求配置cluster前主机名能解析。

关于PowerHA6.1的安装配置工作配置PowerHA之前的准备工作：1、在配置HA之前要在AIX6.1上安装一些补丁包：使用smitty installpInstall softwareINPUT device / directory for software 【】+ 按F4 （选择安装设备）进入后再按F4 用“/”查找要安装的包，按ESC+7选择要安装的包要安装的包主要有：Bos.clvmBos.adtBos.dataBos.perf(这个是工具包可打可不打，一般AIX6.1以后的版本都已经本身就有了)再者还有rsct.basic以及后面的二个包最好也打一下，AIX6.1以后自带安装了，可是最好还是打一下安装语言包，修改时间和时区。

将一些客户所须的文件的大小要扩大到客户要求的大小（smittychfs）还有一些用户上限和权限问题，这些改与不改看客户需要。

这些安装完成后安装PowerHA其中只有cluster.hativoli 这一项不选以外其它的合意选上进行安装即可。

2、规划IP地址IP的选择由HA的方式来定，主要有二种方式（1）别名：别名的方式要三个网段的地址，boot standby service 三个地址要在三个不同的网段上。

当HA启动时启动服务，service IP就会启用，可是boot IP一样存在。

（2）替代：替代的方式是二个网段的地址，boot (service) standby 三个地址在二个不同的网段上，替代是启动HA以后bootIP就会被serviceIP替代掉，在boot上看到的IP只有serviceIP。

停止HA后boot上看到的还是bootIP安装这二种方式选择其一规划IP地址Boot1Standby1Boot2Standby2App1_hacmpApp2_hacmp*****注：所有的boot standby （serviceIP）都要用smitty mktcpip在网卡上修改*****3、修改/etc/hosts文件IP IP名节点以这种方式在 /etc/hosts中写入主IP备IP和SVC IP这里面其中ip <ip名><主机名>这三项中一定要注意主机名一定要对应hostname一定不能错。

AIX操作系统安装及HA配置目录一、基本操作系统安装 (3)二、bundle包安装 (8)三、HA软件安装 (10)四、HA配置步骤 (11)1. 准备工作 (11)2. 前期步骤 (11)3. 节点及网络配置步骤 (12)4. RG配置步骤 (14)五、HA启动及测试 (17)六、HA基本问题日志 (17)一、基本操作系统安装将操作系统盘插入光驱，确认光驱不属于其他分区，启动分区，见到如下界面：Type 0Type 1,进入SMS界面Type 5,选择启动项Type1,选择启动列表Type7,直接list all, 最简单的方法Type2,选择光驱启动Type2,选择normal 启动Type1WaitingType 1Type 1Type 2Type 1,选择hdiskType 0Type 1,进行安装二、bundle包安装需要安装bundle包：APP，CDE，server，Pertool Smit installp选择install software bundle选择光盘选择APP-Dev将ACCept new license agreements 选择为yes，进行安装之后用同样方法安装剩余bundle包三、HA软件安装安装前确认aix操作系统中是否有以下包：bos.adt.libbos.adt.libmbos.adt.syscallsbos.ahafsbos.clvm.enhbos.clusterbos.data.tcp.client.tcp.serverbos.rte.SRCbos.rte.libcbos.rte.libcfgbos.rte.libcurbos.rte.libpthreadsbos.rte.lvmbos.rte.odmcas.agent (required for the IBM Systems Director plug-in) 先用AIX光盘安装以下RSCT包：rsct.basic.rtepat.basic.hacmppat.clients.hacmp然后安装所有的HA 安装包：Smitty installp选择install and update from All Available Software四、HA配置步骤1.准备工作所有IP均不是客户实际IP主机名BoEing_A BoEing_B网卡Ent0 Ent2 Ent4 Ent0 Ent2 Ent4网卡聚合Ent5 Ent5管理地址10.3.4.39 10.3.4.40 Boot 地址192.168.34.33 192.168.34.34Servic地址10.3.17.33 10.3.17.34APP BoEing_A_app BoEing_A_app启动脚本/etc/app/BoEing_A_start.sh /etc/app/BoEing_B_start.sh停脚本/etc/app/BoEing_A_stop.sh /etc/app/BoEing_B_stop.shRG主BoEing_A_RG BoEing_B_RGVG主boednapvg boedndbvgHdisk13 Hdisk13repositorydisk2.前期步骤1)编辑/etc/hosts10.3.4.39 BoEing_A10.3.4.40 BoEing_B192.168.34.33 BoEing_A_boot192.168.34.34 BoEing_B_boot10.3.17.33 BoEing_A_svc10.3.17.34 BoEing_B_svc2)编辑/etc/cluster/rhosts,建议将hostname和boot地址的label都加入BoEing_ABoEing_BBoEing_A_bootBoEing_B_boot3)将两个分区的etherchannel生成的ent5的网卡上按计划配置boot地址Smit chinet 进行更改4)建立启停脚本Mkdir /etc/appCd /etc/appTouch BoEing_A_start.sh BoEing_A_stop.sh BoEing_B_start.sh BoEing_B_stop.shChmod 700 *5)lssrc -g caa查看CAA状态,如果有的子系统没有启动用starsrc -g caa，进行启动6)将vg转为concurrent vg并同步由客户创建vg，lv，fs，用chvg -c boednapvg修改vg为concurrent vg,运行分别在各自备机执行smit importvg3.节点及网络配置步骤Smitty hacmp选择cluster nodes and Networks选择initial cluster setup选择setup a cluster，可以修改cluster的名字，直接下一步，HA会自动发现主节点的节点bootip，之后再手工建立备机的节点选择manage nodes建立node，建议communication path用hostname的label选择manage networks and network interfaces加入在networks中加入备节点的interfaces选择verify and synchronize cluster configuration,4.RG配置步骤Smit hacmp,此后的操作步骤基本上与之前HA版本相同选择cluster applications and Resources选择resources选择第一项选择第一项选择第一项配置启停脚本后，退出到service IP配置选择第二项选择第一项配置完成后，退出至下面界面选择Resource Groups选择第一项增加资源组，配置完成后退出至下面界面选择修改RG属性在资源组中增加app，service ip ,vg同步资源组，HA配置完成五、HA启动及测试1.使用smit clstart 和smit clstop进行HA启停2.使用lssrc -ls clstrmgrES 查看HA状态3.使用tail -f /var/hacmp/log/hacmp.out 查看HA启动日志4.因为农行一般用etherchannel，所以可以用smit etherchannel中的Force A Failover In An EtherChannel / Link Aggregation进行网卡切换，或者直接进行拔网线5.HA启动后，在一端分区执行halt -q命令进行切换测试六、HA基本问题日志1.在同步ha时报错，可以查看/var/adm/ras/syslog.caa日志2.日常维护是可以查看/var/hacmp/log中的hacmp.out及cluster日志。

PowerHA7.1.3 配置文档2016-8-22文档变更记录审核批准版权说明目录第一章版本与区别 (4)第二章安装前准备 (4)2.1 修改hosts文件 (4)2.2 修改rhosts文件 (5)2.3 准备Repository disk（心跳盘） (5)2.4 系统包需求 (5)第三章安装HA软件 (6)3.1 解压zip文件 (6)3.2 挂载ISO文件 (6)3.3 安装HA软件包 (6)第四章配置过程 (6)4.1 新建cluster (6)4.2 配置repository disk (7)4.3 配置persistent ip (7)4.4 修改网络 (8)4.5 添加Applications脚本 (8)4.6 配置服务IP (9)4.7 创建资源组 (9)4.8 修改资源组属性 (10)4.9 验证并同步配置 (11)第五章状态检查 (12)5.1 查看进程 (12)5.2 查看服务IP (12)5.3 查看卷组 (13)第六章HA的启动/停止 (13)6.1 HA启动 (13)6.2 HA停止 (13)第七章常用命令 (14)第一章版本与区别●操作系统：AIX7100-03-05●HA版本：7.1.3 sp4●PowerHA7.1与PowerHA6.1配置区别hosts文件要有对应主机名的IP配置rhosts文件心跳盘变为Repository Disks操作菜单的名称与顺序差异第二章安装前准备2.1修改hosts文件重要：Hosts文件里的IP列表对应的网络名，其中一个必须为对应服务器的hostname，如上：TEST-INT3，TEST-INT42.2修改rhosts文件2.3准备Repository disk（心跳盘）心跳盘只需要对磁盘生成PVID即可，无需建立VG；2.4系统包需求bos.adt.lib bos.adt.libm bos.adt.syscalls bos.ahafs bos.clvm.enh bos.cluster bos.data .tcp.client .tcp.server bos.rte.SRC bos.rte.libcbos.rte.libcfg bos.rte.libcur bos.rte.libpthreads bos.rte.lvm bos.rte.odmcas.agent rsct.basic.rte pat.basic.hacmp pat.clients.hacmp第三章安装HA软件3.1解压zip文件3.2挂载ISO文件3.3安装HA软件包可以安装所有HA软件包；最简安装包为：第四章配置过程4.1新建cluster#smitty hacmp 或[sysmirror]Cluster Nodes and NetworksStandard Cluster DeploymentSetup a Cluster, Nodes and Networks4.2配置repository diskCluster Nodes and NetworksManage Repository DisksAdd a Repository Disk4.3配置persistent ipCluster Nodes and NetworksManage NodesConfigure Persistent Node IP Label/Addresses Add a Persistent Node IP Label/Address*分别定义两个永久IP4.4修改网络默认四个本地IP分别为四个网络，如boot1是net_ether_01,boot2是net_ether_02，boot3是net_ether_03，boot4是net_ether_04。

目录1. 说明 (2)1.1. 文档说明 (2)1.2. 注意事项 (2)2. 安装环境 (3)2.1. 硬件,带HMC (3)2.2. 软件 (3)3. 规划 (3)3.1. 拓扑结构规划 (3)3.2. 应用服务器规划 (4)3.3. 资源组规划 (4)4. 安装步骤 (4)4.1. 配置2台小机的IP地址。

(4)4.2. 安装Power Ha双机软件，并且升级双机软件。

(4)4.3. 编辑/etc/hosts与/etc/cluster/rhosts文件。

(4)4.4. 在主机的终端上输入：smitty hacmp (5)4.4.1. 初始化一个群集 (5)4.4.2. 配置存储库磁盘 (9)4.4.3. 群集和存储库磁盘创建完成后，可以先同步下双机。

(10)4.4.4. 在存储上分别映射2块数据盘过来，然后在HA主备机里面执行cfgmgr –v命令。

114.4.5. 建立Persistent Node IP Addresses (12)4.4.6. 创建资源组 (13)4.4.7. 配置服务IP (14)4.4.8. 配置应用程序启停脚本 (14)4.4.9. 使双机可以发现存储映射过去的磁盘 (14)4.4.10. 存储映射过去的盘添加到双机资源组中 (15)4.4.11. 同步双机配置 (17)5. 双机的基本操作 (21)5.1. 双机的启动 (21)5.2. 双机的停止 (22)5.3. 双机状态的查看 (22)5.4. 保存snapshot (22)6. 双机的切换测试 (22)6.1. 手工停服务器测试 (22)6.2. 切换资源组 (23)6.2.1. Smitty cspoc (23)6.2.2. 切换应用 (23)6.3. 模拟网卡故障测试 (23)6.4. 模拟服务器异常宕机测试 (24)7. 双机的其他操作 (24)7.1. lscluster –d命令 (24)7.2. lscluster –m命令 (24)7.3. usr/es/sbin/cluster/utilities/clmgr query cluster命令 (25)7.4. usr/es/sbin/cluster/utilities/cltopinfo命令 (26)7.5. usr/es/sbin/cluster/utilities/clmgr view report topology命令 (27)7.6. 更换心跳磁盘【心跳盘、repository disk】的命令 (28)1.说明1.1.文档说明本文的环境是在AIX6.1操作系统下安装配置hacmp7.1.1.1的步骤，其它版本的系统安装配置基本类似，不同之处，请参考IBM的官方文档。