HACMP安装文档

1 HA&冷备安装配置和验证1.1 HACMP配置1.1.1 HACMP安装1.检查每台机器上是否都找到了所有硬盘(包括内置硬盘)。

lspvlsdev –Cc disk如果某台机器没有找到共享硬盘，可用cfgmgr命令。

cfgmgr2.给系统添加TTY。

如果安装了8port卡，一共应该有sa0 ~ sa4共5个tty，依次(0 ~ 4)安装。

Æ Add a TTY Æ rs232 Æ saX Æ Port Number: 0ttysmitty3.检测连8port卡的TTY。

在两台机器上同时运行：</dev/ttyXsttyX应该为4(使用8port卡时)或3(使用串口4时)，这时应该有信息显示。

4.安装HACMP/ES软件5.4.1，及补丁放入HACMP/ES光盘：安装HA文件集。

安装文件包括：除了cluster.haview、cluster.hativoli和所有msg语言文件集外，其他文件集都要安装。

安装5.4.1的补丁SP06/eserver/support/fixes/fixcentral/psearch?searchstring=latest+ha+R54+fi xes&searchtype=apar&release=53中选择IZ57986下载并安装，安装后重启系统验证补丁安装lslpp -l |grep cluster 看文件版本号是否已经升上去1.1.2 HACMP配置1.配置IP以下是一个范例。

A机(生产机)IP IP_label1.1.1.1 A_svc1.1.1.2 A_boot1.1.2.1 A_stdby1.1.1.3 B_svc1.1.1.4 B_boot1.1.2.2 B_stdbyB机(备份机)IP IP_label1.1.1.1 A_svc1.1.1.2 A_boot1.1.2.1 A_stdby1.1.1.3 B_svc1.1.1.4 B_boot1.1.2.2 B_stdby开机未启HA时，boot和standby地址生效；启动HA后，service地址覆盖boot生效，service地址对应网卡失效后，由standby所在网卡接管。

HACMP V5.3安装文档(liujiang)准备工作准备工作：：1、每台主机两个物理网卡boot1，boot2（老版本中称为stby ）；boot1和boot2为不同网段。

两台主机之间的boot1可以互相ping 通，两台主机的boot2也能互相ping 通。

2、每台主机的/etc/hosts 文件一致。

3、每台主机/.rhosts 文件一致，并使其权限为600。

4、两台主机通过串口做心跳，并确保已通过tty 的测试。

5、每台主机AIX 和HACMP 的补丁均为最新。

配置步骤配置步骤（（以下步骤通过smitty hacmp 命令运行命令运行））： 1、让HACMP 检测当前的环境。

Extended Configuration > Discover HACMP-related Information from Configured Nodes2、配置cluster name。

Extended Configuration > Extended Topology Configuration > Configure an HACMP Cluster > Add/Change/Show an HACMP Cluster3、分别加入参与该cluster的主机。

Extended Configuration > Extended Topology Configuration > Configure HACMP Nodes > Add a Node to the HACMP Cluster加入两台主机之后，再次运行一下Discover选项，会有如下输出：4、添加基于IP的网络。

Configuration > Extended Topology Configuration >Configure HACMP Networks> Add a Network to the HACMP Cluster选择“ethernet”，添加IP网络其中Enable IP Takeover via IP Aliases项，如果SVC IP地址与boot1地址在同一网段，则选择“NO”，反之选择“YES”5、添加基于非IP的网络，即串口心跳。

高可用集群软件（HACMP）的安装和使用HACMP软件的安装：命令:smit屏幕显示系统管理菜单:System ManagementSoftware Installation and MaintenanceSoftware License ManagementDevicesSystem Storage Management (Physical & Logical Storage) Security & UsersCommunications Applications and ServicesPrint SpoolingProblem DeterminationPerformance & Resource SchedulingSystem EnvironmentsProcesses & SubsystemsRemote Customer Support and ServicesApplicationsUsing SMIT (information only)选择：Software Installation and Maintenance屏幕显示软件安装和维护菜单:选择：Install and Update Software屏幕显示软件安装和更新菜单:选择：Install and Update from LASEST Available Software屏幕显示软件安装和更新（从最后有效软件中）菜单:Install and Update from LASEST Available SoftwareType or select a value for the entry fieldpress Enter AFTER making all desired changes.[Entry Fields]* INPUT device / directory for software [/dev/cd0]显示软件安装和更新（从最后有效软件中）参数屏幕:Install and Update from LASEST Available SoftwareType or select a value for the entry fieldpress Enter AFTER making all desired changes.[Entry Fields]* INPUT device / directory for software /dev/cd0* SOFTWARE to install [_all_latest]PREVIEW only noCOMMIT software updates? yesSAVE replaced files noAUTOMATION install requisite software? yesEXPEND file systems if space needed ? yesOVERWRITE same or newer versions? noVERIFY install and check file sizes? noInclude corresponding LANGUAGE filesets? yesDELETE output? no按ENTER键，即可安装HACMP软件光盘上的全部软件。

HACMP 5.4安装实用手册1.HACMP 5.4的安装步骤a)安装前提i.如果操作系统为AIX 5.2或者AIX 5.3时，需检查：AIX 5L Version RSCT Version RSCT FilesetsAIX 5L v.5.3 plus ML 1 2.4.2 pat.basic.hacmp 2.4.2.0pat.clients.hacmp 2.4.2.0rsct.core.sec 2.4.2.1rsct.core.rmc 2.4.2.1AIX 5L v.5.2 plus ML 5 2.3.6 pat.basic.hacmp 2.3.6.0pat.clients.hacmp 2.3.6.0rsct.core.sec 2.3.6.1rsct.core.rmc 2.3.6.1ii.此次安装的AIX 环境为AIX 5.3 ML6b)安装过程在安装HACMP的过程中，除HAview和HA Tivoli这两个安装包不装外，其他都正常安装c)安装HACMP补丁下载地址：-933.ibm./support/fixcentral/2.HACMP 5.4配置前的规划工作：Cluster Name Byh_clusterNode Name HA1 HA2IP Label HA1_boot HA1_svc HA1_stb HA2_boot HA2_svc HA2_stb IP Address 10.10.10.102 9.9.9.102 192.168.0.1 10.10.10.103 9.9.9.103 192.168.0.2 Persistent IP HA1_per:9.181.1.100 HA2_per:9.181.1.101HeartBeat Hb_HA1: /dev/hdisk1 Hb_HA2: /dev/hdisk2Res. Grp. Name Service IP Volume GroupApp NameByh_rg HA1_svcHA2_svcSharevg None3.HACMP5.4配置方法：a)配置两台机器的/etc/hosts文件：分别在/etc/hosts中加入：b)在HA1上，配置网路连接：i.配置HA1上boot IP----ent0上ii.配置HA1上stb IP----ent1上在HA2节点上也要将boot IP和stb IP也要提前配置好c)建立共享VG---sharevg和用于磁盘心跳的VG---convg这两个VG的* Activate volume group AUTOMATICALLY at system restart选项必须为No建好convg后，在Node1上执行/usr/sbin/rsct/bin/dhb_read -p hdisk1 -r命令在Node2上执行/usr/sbin/rsct/bin/dhb_read -p hdisk1 -t命令，确认可以正常通讯。

HACMP 5.2 的安装、配置、测试完全手册摘要：IBM HACMP 自从出了5.2 版本后，到了5.205比较稳定，并已经过充分的测试（见测试篇）和实践证明（已有多个系统成功自动切换）。

这里我整理了一下，以比较复杂的双机互备情况为例，其他类似设置可适当简化。

样例为AIX5304+HACMP5205.第一章规划篇第二章安装篇1、安装前提1) 操作系统版本要求：AIX５.203以上2) 环境要求用户确认HA要求所有切换需要用到的用户必须一一对应，userid完全相同。

如tlg1d0上oracle用户为orarun，tlg1a0上的orarun必须为切换保留，sid均为209平时用的oracle用户就改为oraclt[tlg1a0][root][/]lsuser -a id ALLroot id=0daemon id=1bin id=2sys id=3adm id=4uucp id=5nobody id=-2lpd id=9lp id=11invscout id=6snapp id=200ipsec id=201nuucp id=7radiusd id=202ldap id=203oradev id=204tuxrun id=205oraclt id=208orarun id=209sshd id=211bsx1 id=210[tlg1d0][root][/]>lsuser -a id ALLroot id=0daemon id=1bin id=2sys id=3adm id=4uucp id=5nobody id=-2lpd id=9lp id=11invscout id=6snapp id=200ipsec id=201nuucp id=7radiusd id=202ldap id=203oradev id=204orarun id=209tuxrun id=205oraclt id=208bsx1 id=210&Oslash; 文件系统确认HA要求切换相关的文件系统不能重名，如tlg1d0上oracle软件目录为/ora10msrun，tlg1a0上的/ora10msrun必须为切换保留，改为/ora10msclt[tlg1d0][root][/]>df -kFilesystem 1024-blocks Free %Used Iused %Iused Mounted on/dev/hd4 524288 487820 7% 3276 3% //dev/hd2 7077888 1868516 74% 91290 18% /usr/dev/hd9var 524288 458364 13% 991 1% /var/dev/hd3 917504 826700 10% 120 1% /tmp/dev/hd1 655360 524856 20% 291 1% /home/proc - - - - - /proc/dev/hd10opt 1179648 589072 51% 11370 8% /opt/dev/lv00 131072 126912 4% 18 1% /var/adm/csd/dev/fslv01 131072 130724 1% 4 1% /tftpboot/dev/fslv00 6684672 3719036 45% 6 1% /export/eznim/dev/ora10msrunlvbak 8912896 5165508 43% 24814 3% /ora10msrunbak /dev/msrundatalvbak 13107200 2895980 78% 32 1% /msrundatabak/dev/msrunloglvbak 5242880 3094480 41% 8185 2% /msrunlogbak/dev/mksysblv 13107200 6238868 53% 5 1% /mksysb/dev/tlg1d0_baklv 26214400 17495848 34% 1111 1% /tlg1d0_bak/dev/msrundatalv 13107200 2896000 78% 31 1% /msrundata/dev/msrunloglv 5242880 3112216 41% 7996 2% /msrunlog/dev/ora10msrunlv 8912896 5173252 42% 23406 2% /ora10msrun[tlg1a0][root][/]>df -kFilesystem 1024-blocks Free %Used Iused %Iused Mounted on/dev/hd4 655360 93968 86% 3450 14% //dev/hd2 8650752 3779000 57% 90347 10% /usr/dev/hd9var 1179648 1001248 16% 1164 1% /var/dev/hd3 1179648 1136192 4% 143 1% /tmp/dev/hd1 655360 587592 11% 489 1% /home/proc - - - - - /proc/dev/hd10opt 1835008 1244528 33% 11374 4% /opt/dev/lv00 131072 126912 4% 18 1% /var/adm/csd/dev/fslv01 131072 118800 10% 7 1% /tftpboot/dev/fslv00 7733248 960696 88% 27298 12% /export/eznim/dev/fslv02 15335424 1143804 93% 4525 2% /soft_ins/dev/tlg1a0_baklv 26214400 20751500 21% 16 1% /tlg1a0_bak/dev/ora10mscltlvbak 13107200 9386904 29% 16852 1% /ora10mscltbak /dev/tux81msrunlvbak 655360 407932 38% 2685 3% /tux81msrunbak /dev/meslvbak 8912896 4815640 46% 6349 1% /BSMesWare/BSX1bak /dev/xcomlvbak 5242880 5186260 2% 4178 1% /xcombak/dev/ora10mscltlv 13107200 9386748 29% 16852 1% /ora10msclt/dev/tux81msrunlv 786432 538952 32% 2685 3% /tux81msrun/dev/meslv 14155776 10057876 29% 6343 1% /BSMesWare/BSX1/dev/xcomlv 5242880 5186280 2% 4178 1% /xcom3) 安装包要求：RSCT 2.3.6.0 或更高版本。

HACMP 5.4安装配置文档一、准备（最重要的是明确HACMP 5.4安装在哪个AIX 5L 版本上，从而才能正确地选择需要的补丁）：1、HACMP 5.4安装需要的AIX版本：AIX 5205以上或者 AIX 5301以上2、HACMP5.4安装需要的RSCT版本：AIX 5205内含的RSCT 2.3.6 或者 AIX 5301内含的RSCT 2.4.2 3、HACMP5.4安装需要的BOS软件包：1）、非并发式：共11个包2）、并发方式：除了需要非并发式的所有包以外，还需要2个支持并发的组件包（这次的测试并发模式）4、安装HACMP 5.4软件包（On Server）：1)cluster.es.clvm包是支持并发访问的专用包，需要根据安装的HA模式来确定是否选用；（如果装了，又不用并发模式，会出问题吗？）2)cluster.haview和cluster.hativoli一般不用安装3)安装成功以后用lppchk -l cluster.* 检查文件是否安装成功4)重启节点5)如果安装不成功，安装程序一般会启动清除进程，如果无法自动完成，可用手动方式：smitty进入Installation andMaintenance →Install and Update Software →Clear UpAfter A Interrupted Installation6)如果需要卸载HACMP，可Install/Remove中输入“cluster.*”删除7)安装补丁包：5、安装HACMP 5.4软件包（On Client）：安装在Client上的目的主要是接收和监控HACMP Server节点发出的信息，可以忽略6、配置安装的硬件：1）、配置网卡：7、配置共享LVM组件(no-concurrent)1）、考虑concurrent和no concurrent区别2）、创建VG要将自动varyonvg设为no，让cluster来控制注意：配置major number 让所有node都有个free并一致的Major number，用lvlstmajor来显示3）、varyonvg,创建FS（no-concurrent），注意将自动mount设为no，让cluster来控制；4）、修改共享VG中LV和jfslog所在的LV名称，避免与节点本地磁盘自动生成的LVxx名冲突。

HACMP5.2.0安装报告一．准备工作1.操作系统应已安装以下包，如未安装，应先安装：●bos.data●●bos.rte●bos.acct●bos.perf●perfagent.tools●pat.*Reliable Scalable Cluster Technology (RSCT) 的安装和版本RSCT文件必选装在Cluster的每个节点上，RSCT的版本要求如下RSCT 2.2.1.30 or higher for AIX 5.1.在AIX 5.1中需要以下版本的RSCTpat.basic.hacmp.2.2.1.30pat.clients.hacmp.2.2.1.30rsct.basic.rte.2.2.1.31通过lslpp –l | grep rsctlslpp -ah pat.basic.hacmplslpp -ah pat.clients.hacmplslpp -ah rsct.basic.rte命令检查AIX中BOS组件的安装，需要安装如下部分bos.adt.lib / bos.adt.libm / bos.adt.syscalls / .tcp.client / .tcp.server / bos.rte.SRC / bos.rte.libc / bos.rte.libcfg / bos.rte.libcur / bos.rte.libpthreads / bos.rte.odm如果Cluster需要配置Concurrent Resource Manager for concurrent access还需安装bos.rte.lvm.5.1.0.25 or higher / bos.clvm.enh〉如果上述文件没有安装可从AIX5L的安装光盘或HACMP5.2的安装光盘进行安装Note ：HACMP安装过程中不会检查上述版本软件是否被安装，在HACMP安装前要确定上述软件及版本的正确性HACMP5.2系统安装其他要求安装空间/usr目录需要至少76 MB的空间用于Cluster系统的安装/(root)目录需要至少700KB的空间用于Cluster系统的安装其他要求每个Cluster节点需要独立的HACMP软件license。

HACMP安装与配置神州数码系统集成服务有限公司文档控制修改记录审阅分发目录1系统需求 (2)1.1硬件需求 (2)1.2软件需求 (2)2安装前的准备工作 (3)2.1配置集群网络 (3)2.2配置集群共享磁盘 (4)2.3添加tty 设备( 串口心跳) (4)2.4建立应用启动和停止脚本 (5)3安装步骤 (6)3.1建立集群 (6)3.2添加节点 (6)3.3添加网络 (8)3.4添加通信接口 (8)3.5添加应用服务器 (10)3.6添加服务IP (10)3.7添加资源组 (10)3.8更改资源组属性 (11)4安装后的任务以及常见问题 (15)4.1安装后的任务 (15)4.2常见问题 (15)1 系统需求1.1硬件需求IBM HACMP 支持所有IBM System p5 服务器。

1.2软件需求AIX 与RSCT 版本要求AIX 5L VersionRSCTVersionRSCT FilesetsAIX 5L Version 5.3 TL1 2.4.2 ∙pat.basic.hacmp 2.4.2.0∙pat.clients.hacmp 2.4.2.0∙rsct.core.sec 2.4.2.1∙rsct.core.rmc 2.4.2.1AIX 5L Version 5.2 TL5 2.3.6 ∙pat.basic.hacmp 2.3.6.0∙pat.clients.hacmp 2.3.6.0∙rsct.core.sec 2.3.6.1∙rsct.core.rmc 2.3.6.1AIX BOS 软件要求AIX 5L BOS Component AIX 5L V5.2 TL5 或更新版本AIX 5L V5.3 TL1 或更新版本bos.adt.lib 5.3.0.10 5.2.0.10 bos.adt.libm 5.3.0.10 5.2.0.13 bos.adt.syscalls 5.3.0.10 5.2.0.11 .tcp.client 5.3.0.10 5.2.0.14 .tcp.server 5.3.0.10 5.2.0.14 bos.rte.SRC 5.3.0.10 5.2.0.10 bos.rte.libc 5.3.0.10 5.2.0.14 bos.rte.libcfg 5.3.0.10bos.rte.libcur 5.3.0.10 5.2.0.10 bos.rte.libptdreads 5.3.0.10 5.2.0.12 bos.rte.odm 5.3.0.10 5.2.0.11 bos.data (require for 5.3.0.10 5.2.0.10cluster.man.en_US.es)bos.clvm.enh (require for CLVM)bos.rte.lvm.rte (require for CLVM)2 安装前的准备工作本安装指南所提及的rac1 和rac2 分别表示安装HACMP 的两个AIX服务器，本例中采用IP 别名方式，oracle 应用做为上层应用。

HACMP/XD GLVM 安装配置手册v1.0目录1环境描述 (4)2配置集群 (4)2.1安装软件 (4)2.2创建基本cluster (7)2.2.1准备网络环境 (7)2.2.2添加 cluster (8)2.2.3添加 nodes (8)2.2.4添加两个 sites (9)2.2.5添加两个networks (9)2.2.6添加communication interfaces (9)2.3创建resource group (10)2.3.1创建app server (10)2.3.2创建monitor (11)2.3.3创建Resource Group (12)2.4HACMP 同步验证 (13)3配置 GLVM (14)3.1创建RPV server (P550B) (14)3.2创建 RPV client (P550A) (15)3.3创建 RPV server (P550A) (17)3.4创建 RPV client (P550B) (18)3.5创建 VG (19)3.6Create LV (20)3.7创建 FS (24)3.8创建GLVM copies (25)3.9在P550B上 Import GMVG (27)3.10修改 PowerHA Resouce Group 属性 (28)3.11PowerHA 同步 (29)4启动和测试 (30)4.1启动 cluster (30)4.2测试 resource move (30)5Q&A （Synchronous） (31)5.1Clstat,cldump error (31)5.2Hacmp Verify Error 1 (32)5.3Hacmp Verify Error 2 (33)5.4After fallover or fallback, find stale state (33)6转换 Sync GLVM 为Async Mode (34)6.1分配 PVs to mirror pool (34)6.2改变vg属性 (35)6.3改变 LV属性 (36)6.4添加 aio_cache LV （caching of asynchronous write request） (39)6.5转换 Mirror Pool为 Asynchronous Mirroring (41)6.6改变Resource Group属性 (41)6.7在P550B再次importvg datavg2 (42)6.8PowerHA 同步验证 (43)7Q&A （Asynchronous） (43)7.1PowerHA Verify Error 1 (43)7.2Varyonvg failed 1 (44)7.3Varyonvg failed 2 (44)本文档仅供研发内部使用，如需在生产环境使用，请先对指导书各步骤进行验证1环境描述两个节点的集群，软件硬件配置如下：1.Power5 5502.AIX 6103-sp33.PowerHA SystemMirror 6.1 sp14.2个 IP Networks5.每个节点2 disks（DS5020）:✓一个是rootvg, 另外一个为GLVM testing✓磁盘在集群节点间不共享✓一个datavg22配置集群2.1安装软件#smitty install_latest上图为预安装，如没有报错，则将PREVIEW only? (install operation will NOT occur)修改为no ，则正式安装开始。

HACMP软件安装实施[键入文字]目录1说明 (4)1.1文档说明 (4)1.2注意事项 (4)2HACMP 规划 (5)2.1HA（H I GH A V AILABILITY） (5)2.2规划举例 (6)3HACMP 安装前准备 (8)3.1硬件环境准备 (8)3.2介质准备 (8)4POWERHA（HACMP）软件安装 (9)4.1安装HACMP5.4需要的操作系统软件包 (9)4.2更新操作系统 (10)4.3HACMP软件安装 (10)4.4升级HACMP软件 (11)5配置HACMP (14)5.1设置IP地址 (14)5.2配置共享磁盘卷组VG (15)5.3定义TTY串口通讯设备 (16)5.4创建集群C LUSTER (17)5.5添加N ODE节点 (19)5.6创建以太网络，添加ETHER网络通讯接口 (19)5.7创建点对点网络，添加RS232通讯设备 (22)5.8添加S ERVICE IP L ABEL (24)5.9配置A PPLIC A TION S ER VER (26)5.10配置资源组 (28)5.11参数优化 (31)5.12同步资源组 (35)5.13启动HA (36)5.14保存S NAPSHOT (37)6HA服务启停、监控 (38)6.1启动HA服务 (38)6.2停止HA服务 (38)6.3监控HA状态 (39)7切换测试 (41)7.1手工停服务切换测试 (41)7.2不停HA服务，在线移动资源组（C-SPOC） (42)7.3模拟网卡故障测试 (44)7.4模拟服务器异常DOWN机测试 (44)1说明1.1文档说明本文的环境是在AIX5.3操作系统下安装配置hacmp5.4的步骤，其它版本的系统安装配置基本类似，不同之处，请参考IBM的官方文档。

文档链接地址IBM Systems Information Centers ：/eserver/目录分aix、软件、等文档目录。

HACMP 5.4安装实用手册1.HACMP 5.4的安装步骤a)安装前提i.如果操作系统为AIX 5.2或者AIX 5.3时，需检查：AIX 5L Version RSCT Version RSCT FilesetsAIX 5L v.5.3 plus ML 1 2.4.2 pat.basic.hacmp 2.4.2.0pat.clients.hacmp 2.4.2.0rsct.core.sec 2.4.2.1rsct.core.rmc 2.4.2.1AIX 5L v.5.2 plus ML 5 2.3.6 pat.basic.hacmp 2.3.6.0pat.clients.hacmp 2.3.6.0rsct.core.sec 2.3.6.1rsct.core.rmc 2.3.6.1ii.此次安装的AIX 环境为AIX 5.3 ML6b)安装过程在安装HACMP的过程中，除HAview和HA Tivoli这两个安装包不装外，其他都正常安装c)安装HACMP补丁下载地址：/support/fixcentral/2.HACMP 5.4配置前的规划工作：Cluster Name Byh_clusterNode Name HA1 HA2IP Label HA1_boot HA1_svc HA1_stb HA2_boot HA2_svc HA2_stb IP Address 10.10.10.102 9.9.9.102 192.168.0.1 10.10.10.103 9.9.9.103 192.168.0.2 Persistent IP HA1_per:9.181.1.100 HA2_per:9.181.1.101HeartBeat Hb_HA1: /dev/hdisk1 Hb_HA2: /dev/hdisk2Res. Grp. Name Service IP Volume GroupApp NameByh_rg HA1_svcHA2_svcSharevg None3.HACMP5.4配置方法：a)配置两台机器的/etc/hosts文件：分别在/etc/hosts中加入：b)在HA1上，配置网路连接：i.配置HA1上boot IP----ent0上ii.配置HA1上stb IP----ent1上在HA2节点上也要将boot IP和stb IP也要提前配置好c)建立共享VG---sharevg和用于磁盘心跳的VG---convg这两个VG的* Activate volume group AUTOMATICALLY at system restart选项必须为No 建好convg后，在Node1上执行/usr/sbin/rsct/bin/dhb_read -p hdisk1 -r命令在Node2上执行/usr/sbin/rsct/bin/dhb_read -p hdisk1 -t命令，确认可以正常通讯。

***商业银行HACMP安装配置手册***（北京）科技有限公司目录1前言 (4)2硬件系统配置要求 (4)2.1M85小型机 (4)2.1.1yccb_1主机 (4)2.1.2yccb_2主机 (4)2.2存储系统配置 (4)3软件系统的基本配置 (5)4系统及应用环境检查 (5)4.1HACMP主机A配置 (5)4.2HACMP主机B配置 (6)4.3卷组VG同步 (6)4.4修改卷组AUTO V ARYON属性 (7)4.5用户USER (7)4.6共享文件系统FS属性 (7)5HACMP系统软件安装 (7)5.1HACMP的安装 (7)5.2HACMP补丁的安装 (8)5.3HACMP安装后检查 (8)5.3.1方法一 (8)5.3.2方法二 (8)5.4检查操作系统补丁 (9)6HACMP规划 (9)6.1HACMP资源组接管策略 (9)6.2HACMP IP规划 (10)6.3HACMP网络环境准备 (11)6.4双机配置AIX系统网卡 (11)6.4.1A机上配置boot1网卡地址 (11)6.4.2A机上配置boot2网卡地址 (11)6.4.3B机上配置boot1网卡地址 (12)6.4.4B机上配置boot2网卡地址 (12)6.4.5修改IP地址的方法 (12)6.5整理/ETC/HOSTS文件 (12)6.6检查和配置/USR/ES/SBIN/CLUSTER/ETC/RHOSTS (13)6.7配置心跳线 (13)6.8双机配置启动、停止脚本 (14)7HACMP配置 (14)7.1HACMP网络拓扑设置方法(手工定义) (14)7.1.1创建新的cluster (14)7.1.2在cluster中增加A机节点 (14)7.1.3在cluster中增加B机节点 (15)7.1.4在cluster上添加ethter网络 (15)7.1.5在cluster上添加serial网络 (17)7.2HACMP资源配置 (18)7.2.1配置service地址 (18)7.2.2配置应用服务(启动停止脚本) (18)7.2.3配置资源组 (18)7.3定义EMC CUSTOM DISK (19)7.4资源同步和检验 (20)7.5设置EMC共享盘的SCSI_ID(两台机器都要做) (20)7.6更改HACMP的调试级别(如有必要) (21)7.7调整SNMPD版本(YCCB_1,YCCB_2都做) (22)7.8如何删除一个CLUSTER (22)8HACMP系统维护及测试 (22)8.1.1存储相关设备设置修改 (22)8.1.2HACMP的启动、停止、状态查询及相关 (23)8.1.3某些HACMP的故障处理 (24)8.1.4HACMP某个的资源组资源的调整 (25)8.1.5测试HACMP系统的接管情况 (26)1前言本文档为***商业银行核心业务系统主机M85安装、配置HACMP编写。

一、HACMP 双机系统配置打算在配置中间业务平台HACMP环境之前首先要制定配置打算。

在IBM HACMP 的配置指南中推举了一种配置打算表的方式〔Planning Worksheet 〕，在进展配置考虑的时候将这些表格填完即可。

通常分行中间业务平台的HACMP环境大体都有相像的拓扑环境，两个Public 类型的网络，一个用于供给中间业务效劳〔使用IP alias方式〕，另一用于连接AS/400的SNA 〔必需使用IP replacement方式〕Cluster WorksheetCluster Name：xxibp_clusterNode Name：xxMID_PRD，xxMID_BAK在主节点上配置拓扑构造然后同步到其他节点，网络拓扑如下：（1）Network概览Network Name Network Type Network Attribute Network Mask Node Namesnet_ibp Ether public 255.255.255.0 xxMID_PRD，xxMID_BAK net_sna Ether public 255.255.255.0 xxMID_PRD，xxMID_BAK net_rs232_01 RS-232 serial N/AxxMID_PRD，xxMID_BAK （2）Network内部构造Network net_ibpService地址：ibp_svc 10.1.7.33Boot地址：ibp_boot2 172.16.101.1ibp_boot1 172.16.100.1Network sna_netService地址：sna_svc 172.16.120.3Boot地址：sna_boot 172.16.120.1Standby地址：sna_stb 172.16.121.1SNA的网络配置IP〔可以使用私有地址，如172网段的任何地址，但两块网卡要在同一网段〕，只是为了能够相互切换，寻常的IP地址不用。

HACMP 双机安装指导书 Rotating 方式 HACMP 5.2 for AIX 5.3叶平 2007-02目录 第一章 使用 HACMP 安装配置双机集群系统（rotating 方式） ............................. 3 § 1.1 增加一个 cluster 定义 ...................................................................................... 3 § 1.2 配置集群的各个节点 ....................................................................................... 3 § 1.3 增加拓扑网络 ................................................................................................... 4 添加 ether 网络 ......................................................................................................... 4 添加串口网络 ........................................................................................................... 5 第二章 配置拓扑结构 ................................................................................................... 6 添加 power1 的 boot IP ............................................................................................ 6 添加 power2 的 boot IP ............................................................................................ 7 添加 power1 的 stand by IP ...................................................................................... 8 添加 power2 的 stand by IP ...................................................................................... 9 添加 power1 的串口通信配置 ............................................................................... 10 添加 power2 的串口通信配置 ............................................................................... 11 添加 Power1 的 presistent IP .................................................................................. 12 添加 Power2 的 presistent IP .................................................................................. 13 第三章 定义集群应用 ................................................................................................. 14 第四章 配置 service IP ................................................................................................ 15 获取主网卡的 MAC 地址 ...................................................................................... 15 添加 Service IP ....................................................................................................... 16 第五章 添加集群资源组 ............................................................................................. 16 第六章 配置集群资源组 ............................................................................................. 17 第七章 同步集群配置 ................................................................................................. 182第一章 方式）使用 HACMP 安装配置双机集群系统（rotating§1.1 增加一个 cluster 定义菜单导航：Smit HACMP -> Extended Configuration -> Extended Topology Configuration -> Configure an HACMP Cluster -> Add/Change/Show an HACMP Cluster 显示以下界面："Cluster Name" 必须是一个长度小于 32 的字符串 上面的操作增加了一个 cluster 的定义：p5cluster 亦可通过以下命令快速添加 # /usr/es/sbin/cluster/utilities/claddclstr -n'p5cluster'§1.2 配置集群的各个节点菜单导航：Smit HACMP -> Extended Configuration -> Extended Topology Configuration -> Configure HACMP Nodes -> Add a Node to the HACMP Cluster 显示以下界面：3"Node Names" 必须是各个节点的 hostnames， Communication Path to Node 为每个节点的 boot IP。

HACMP安装、配置，施实全过程环境：两台P630：P630_1，P630_2磁盘陈列：7133-D40共享卷组：oravg1、在两台计算机上设置IP地址（1）在p630_1机上：A. 配置第一块boot网卡->#smitty->Communications Applications and Services->TCP/IP->Minimum Configuration & Startupselect en2* HOSTNAME [p630_1]* Internet ADDRESS (dotted decimal) [10.10.9.1] Network MASK (dotted decimal) [255.255.255.0] * Network INTERFACE en1NAMESERVERInternet ADDRESS (dotted decimal) []DOMAIN Name []Default GATEWAY Address []B. 配置第二块boot网卡->#smitty->Communications Applications and Services->TCP/IP->Minimum Configuration & Startupselect en1* HOSTNAME [p630_1]* Internet ADDRESS (dotted decimal) [10.10.10.1] Network MASK (dotted decimal) [255.255.255.0]* Network INTERFACE en3NAMESERVERInternet ADDRESS (dotted decimal) []DOMAIN Name []Default GATEWAY Address []（2）在p630_2机上：A. 配置第一块boot网卡->#smitty->Communications Applications and Services->TCP/IP->Minimum Configuration & Startupselect en2* HOSTNAME [p630_2]* Internet ADDRESS (dotted decimal) [10.10.9.2] Network MASK (dotted decimal) [255.255.255.0]* Network INTERFACE en1NAMESERVERInternet ADDRESS (dotted decimal) []DOMAIN Name []Default GATEWAY Address []B. 配置第二块boot网卡->#smitty->Communications Applications and Services->TCP/IP->Minimum Configuration & Startupselect en1* HOSTNAME [p630_2]* Internet ADDRESS (dotted decimal) [10.10.10.2] Network MASK (dotted decimal) [255.255.255.0]* Network INTERFACE en3NAMESERVERInternet ADDRESS (dotted decimal) []DOMAIN Name []Default GATEWAY Address []2、修改/etc/hosts文件，内容如下：127.0.0.1 loopback localhost p630_110.10.9.1 boot_11 p630_110.10.10.1 boot_12 p630_1192.168.1.1 service110.10.9.2 boot_21 p630_210.10.10.2 boot_22 p630_2192.168.1.2 service23、在p630_1上建立共享卷组建立oravg共享卷组->#smitty->System Storage Management (Phisical & Logical Storage) ->Logical Volume Manager->Volume Groups->Add a Volume GroupVOLUME GROUP name [oravg]Physical partition SIZE in megabytes [128]* PHYSICAL VOLUME names [hdisk2]Activate volume group AUTOMATICALLY [no]at system restart?Volume Group MAJOR NUMBER []Create VG concurrent Capable? [yes]Auto-varyon in Concurrent Mode? [no]4、在p630_2上import共享卷组（1）import oravg共享卷组->#smitty->System Storage Management (Phisical & Logical Storage) ->Logical Volume Manager->Volume Groups->Import a Volume GroupVOLUME GROUP name [oravg]* PHYSICAL VOLUME name [hdisk2]Volume Group MAJOR NUMBER []Make this VG Concurrent Capable noMake default varyon of VG Concurrent? no（2）修改oravg共享卷组属性->#smitty->System Storage Management (Phisical & Logical Storage) ->Logical Volume Manager->Volume Groups->Set Characteristics of a Volume Group->Change a Volume Groupselect * VOLUME GROUP name [oravg]VOLUME GROUP name [oravg]* ACTIVATE volume group AUTOMATICALLY [no]at system restart?* A QUORUM of disks required to keep the volume [yes]group on-line?Convert this VG to Concurrent Capable? [no]* Autovaryon VG in Concurrent Mode? [no]5、在p630_1 和p630_2上配置非TCP/IP网络->#smitty->Devices->TTY->Add a TTYselect tty rs232 Asynchronous TerminalTTY type [tty]TTY interface [rs232]Description [Terminal asynchrone]Parent adapter [sa3]* PORT number [0]BAUD rate [9600]PARITY [none]BITS per characteNumber of STOP BITS [1]TERMINAL type [dumb]STATE to be configured at boot time [available]......Enable LOGIN [disable]用Serial to Serial Cable连接一号机和二号机的COM3,作为HACMP的心跳线测试心跳线:1) 在p630_1机上执行: cat < /dev/tty02) 在p630_2上执行: cat /etc/hosts > /dev/tty03) 在p630_1上若显示出p630_2的/etc/hosts文件内容,说明心跳线配置正确6、建立应用服务器启动脚本在/etc/hascript下分别建立dbstart.sh, dbstop.sh, 然后修改文件属性为7 55:#chomd 755 *7、HACMP的设置（1）定义CLUSTER->Initialization and Standard Configuration->Add Nodes to an HACMP ClusterAdd/Change/Show an HACMP Cluster[输入字段]* Cluster Name [wly]NOTE: HACMP must be RESTARTEDon all nodes in order for change to take effect（2）定义p630_1节点-> Extended Configuration-> Extended Topology Configuration->Configure HACMP Nodes-> Add a Node to the HACMP ClusterAdd a Node to the HACMP Cluster[输入字段]* Node Name [p630_1]Communication Path to Node [] +（2）定义p630_2节点-> Extended Configuration-> Extended Topology Configuration->Configure HACMP Nodes-> Add a Node to the HACMP ClusterAdd a Node to the HACMP Cluster[输入字段]* Node Name [p630_1]Communication Path to Node [] +(3) 定义网络A. 定义IP网络-> Extended Configuration->Extended Topology Configuration->Configure HACMP Networks-> Add a Network to the HACMP ClusterAdd an IP-Based Network to the HACMP Cluster[输入字段]* Network Name [net_ether_01]* Network Type ether* Netmask [255.255.255.0] +* Enable IP Address Takeover via IP Aliases [Yes] + IP Address Offset for Heartbeating over IP Aliases [] B. 定义非IP网络-> Extended Configuration->Extended Topology Configuration->Configure HACMP Networks-> Add a Network to the HACMP Cluster选择# Pre-defined Serial Device Types 中的rs232Add a Serial Network to the HACMP Cluster[输入字段]* Network Name [net_rs232_01]* Network Type rs232(4) 定义网络接口A. 定义IP网络接口定义Boot_11接口:-> Extended Configuration-> Extended Topology Configuration->Configure HACMP Communication Interfaces/Devices-> Add Communication Interfaces/Devices选择Add Pre-defined Communication Interfaces and Devices 选择Communication Interfaces选择net_ether_01 (0.0.0.0/0)Add a Communication Interface[输入字段]* IP Label/Address [boot_11] +* Network Type ether* Network Name net_ether_01* Node Name [p630_1] +Network Interface []定义Boot_12接口:-> Extended Configuration-> Extended Topology Configuration->Configure HACMP Communication Interfaces/Devices-> Add Communication Interfaces/Devices选择Add Pre-defined Communication Interfaces and Devices 选择Communication Interfaces选择net_ether_01 (0.0.0.0/0)Add a Communication Interface[输入字段]* IP Label/Address [boot_12] +* Network Type ether* Network Name net_ether_01* Node Name [p630_1] +Network Interface []定义boot_21接口:-> Extended Configuration-> Extended Topology Configuration->Configure HACMP Communication Interfaces/Devices-> Add Communication Interfaces/Devices选择Add Pre-defined Communication Interfaces and Devices 选择Communication Interfaces选择net_ether_01 (0.0.0.0/0)Add a Communication Interface[输入字段]* IP Label/Address [boot_21] +* Network Type ether* Network Name net_ether_01* Node Name [p630_2] +Network Interface []定义boot_22接口:-> Extended Configuration-> Extended Topology Configuration->Configure HACMP Communication Interfaces/Devices-> Add Communication Interfaces/Devices选择Add Pre-defined Communication Interfaces and Devices 选择Communication Interfaces选择net_ether_01 (0.0.0.0/0)Add a Communication Interface[输入字段]* IP Label/Address [boot_22] +* Network Type ether* Network Name net_ether_01* Node Name [p630_2] +Network Interface []B. 定义非IP网络接口定义p630_1tty接口:-> Extended Configuration-> Extended Topology Configuration->Configure HACMP Communication Interfaces/Devices-> Add Communication Interfaces/Devices选择Add Pre-defined Communication Interfaces and Devices 选择Communication Device选择net_rs232_01Add a Communication Device[输入字段]* Device Name [p630_1tty]* Network Type rs232* Network Name net_rs232_01* Device Path [/dev/tty0]* Node Name [p630_1]定义p630_2tty接口:-> Extended Configuration-> Extended Topology Configuration->Configure HACMP Communication Interfaces/Devices-> Add Communication Interfaces/Devices选择Add Pre-defined Communication Interfaces and Devices选择Communication Device选择net_rs232_01Add a Communication Device[输入字段]* Device Name [p630_2tty]* Network Type rs232* Network Name net_rs232_01* Device Path [/dev/tty0]* Node Name [p630_2](5) 定义应用服务器定义wlyapp应用服务器:->Initialization and Standard Configuration->Configure Application Servers->Add an Application ServerAdd Application Server[输入字段]* Server Name [wlyapp]* Start Script [/etc/hascript/dbstart.sh]* Stop Script [/etc/hascript/dbstop.sh](6) 定义共享资源组定义wlyres资源组->Initialization and Standard Configuration->Configure HACMP Resource Group->Add a Resource Group选择CascadingAdd a Resource Group with a Cascading Management Policy (standard)[输入字段]* Resource Group Name [wlyres]*Participating Node Names (Default Node Priority) [p630_1 p630_2] +(7) 修改资源组属性修改wlyres资源组属性:->Initialization and Standard Configuration->Configure HACMP Resource Group-> Change/Show Resources for a Cascading Resource Group(standard) Change/Show Resources for a Cascading Resource Group[输入字段]Resource Group Name wlyresParticipating Node Names (Default Node Priority) p630_2 p630_1* Service IP Labels/Addresses [] +Volume Groups [oravg] +Filesystems (empty is ALL for VGs specified) [] +Application Servers [wlyapp] +(8) 定义Service IP定义p630_1的service IP地址:->Initialization and Standard Configuration->Configure Resources to Make Highly Available->Configure Service IP Labeles/Addresses->Add a service IP Labeles/AddressesAdd a Service IP Label/Address (standard)[输入字段]* IP Label/Address [service1] +* Network Name [net_ether_01] +8、同步HACMP配置->Initialization and Standard Configuration-> Verify and Synchronize HACMP ComfigurationVerify and Synchronize HACMP Comfiguration[输入字段]* Verify, Synchronize or Both [Both] +Force synchronization if verification fails? [No] + * Verify changes only? [No] +* Logging [Standard] +9、HACMP服务的启动和停止启动:#smitty clstartStart Cluster Services[输入字段]* Start now, on system restart or both now +Start Cluster Services on these nodes [p630_1] + BROADCAST message at startup? true +Startup Cluster Lock Services? false +Startup Cluster Information Daemon? false + Reacquire resources after forced down ? false +停止:#smitty clstopStop Cluster Services[输入字段]* Stop now, on system restart or both now +Stop Cluster Services on these nodes [p630_1] + BROADCAST cluster shutdown? true +* Shutdown mode graceful+。

IBMacerun: yes"> P52A HACMP系统安装文档一：系统环境准备1：安装操作系统分别在两台主机上安装AIX操作系统，版本号为AIX 5.3主机名称：cd3 cd4#oslevel –r显示：5300-042：安装系统软件包要求安装如下软件包：3：修改调页空间#smitty chps将系统调页空间更改为4096M(+30就可以了)4：设置root密码#passwd用户名与密码同为root5：修改系统时区#smitty chtz系统时区选择中华人民共和国PRC6：更改最大进程数#smitty chgsys将最大进程数更改为5127：更改异步IO#smitty chaio设置为30/60，并激活异步IO端口(把前两项改成30和60就可以了)#mkdev –l aio08：配置存储阵列FASr T600配置14块HDD硬盘，创建RAID5阵列，没有Hotspare创建1个逻辑分区，定义为dataAvg9：配置网络地址修改/etc/hosts文件，添加如下内容133.108.40.13 cd3_boot cd3133.108.40.3 cd3_svc10.0.0.1 cd3_stdby133.108.40.14 cd4_boot cd4133.108.40.4 cd4_svc10.0.0.2 cd4_stdby10：配置心跳线#smitty tty分别在两台主机上执行如下步骤：11：心跳线测试二：配置HACMP1：安装HACMP软件#smitty installp以下模块不选择cluster.haview,cluster.hativoli,cluster.man.en_US.haview2：配置网络拓扑部分首先配置一个hacmp cluster配置hacmp node自动搜索网络参数Auto Discover配置hacmp network配置网络端口hacmp Communcation Interfaces/Devices 以太网络接口：串口rs2324：配置资源组第一：我们需要配置第一个资源组，首先创建第一个应用服务器appserver1，指定第一个应用服务器服务地址的Service IPApplication servers：(注意，此阶段系统还不需要application server,此处配置为演示性质，以后有需要时，可以更改此处的shell位置以及名字即可)然后配置第一个资源组：extended configuration->hacmp extend resources configuration修改第一个资源组的属性hacmp resource group attributeextended configuration→hacmp extend resources configuration→configuration extend resource group→change/show resources and attributes for a resource group第一个资源组resource1内容如下：5：同步HACMP同步Topology6：配置完成同步成功后，配置完成。

在AIX5.3中安装HACMP5.4软件1)安装AIX操作系统盘中的App-dev、Service、CDE（根据需要来安装）；操作步骤如下：#smitty easy_install安装bundle时，每个bundle单独安装后在去装别的。

2）安装架构HACMP所需要的系统软件包#smitty installbos.adt、bos.clvm、pat、bos.data、bos.perf、X11.Dt、pat、rsct.basic、rsct.core、pat选完后按回车返回至安装界面，然后将是否同意新许可改为YES，并回车开始安装软件。

3) 安装完后将HACMP V5.4光盘放入光驱中进行HACMP的软件安装。

#smitty install移动至最下面，会看到的几个是rsct的包，这时要看这几个包后面的版本号，如果操作系统中我们刚安过的包比HACMP光盘中的要新，就不必安装这些包，否则要把这几个包安装上，这是支持HACMP V5.4的必须包。

安装完rsct的包后我们就可以安装HACMP软件了。

注：IBM AIX HA 5.5要求 RSCT包的版本》=2.4.10安装HACMP安装盘中的除cluster.es.plugins、cluster.hativoli、cluster.haview外全部安装如果这步安装软件时出错，要仔细查看原因。

有可能是rsct的包版本与之不匹配，要解决此问题可以去IBM网站下载rsct相关版本的软件包。

最后安装HACMP补丁上IBM网站下载HACMP V5.4的补丁包，然后传到服务里/tmp下建立一个文件夹，然后进入这个文件夹中执行：#smitty install然后在路径的位置输入./代表当前目录，然后在安装文件内容部分按F4列出所有软件包，然后再找出我们安装过的cluster相关的软件包选上并安装。

选完后按回车返回至安装界面，然后将是否同意新许可改为YES，并回车开始安装软件。