Linux5.5_RHCS雙機(jī)安裝配置手冊

1、 RedHat 5.5 RHCS 雙機(jī)配置文檔 1 / 31目目 錄錄1系統(tǒng)的描述系統(tǒng)的描述.42前期規(guī)劃前期規(guī)劃.52.1.規(guī)劃相應(yīng)IP地址:.52.2.規(guī)劃兩臺系統(tǒng)的/ETC/HOSTS 文件.53系統(tǒng)配置系統(tǒng)配置.63.1修改主機(jī)名和網(wǎng)關(guān)信息.63.2設(shè)置網(wǎng)卡綁定功能.63.3關(guān)閉不需要的系統(tǒng)服務(wù).74集群配置集群配置.84.1創(chuàng)建一個新的集群配置.84.2選擇鎖機(jī)制.84.3添加群集成員節(jié)點.94.3.1輸入第一個成員節(jié)點的信息.104.3.2輸入第二個成員節(jié)點的信息.104.4添加 FENCE設(shè)備.114.4.1增加第一個 FENCE設(shè)備.114.4.2增加第二個 FENCE設(shè)備.1

2、14.5建立 FENCE設(shè)備和節(jié)點聯(lián)系.124.5.1建立第一個節(jié)點和 FENCE設(shè)備的關(guān)系.124.5.2建立第二個節(jié)點和 FENCE設(shè)備的關(guān)系.174.6創(chuàng)建一個實效域.224.7創(chuàng)建集群資源.234.7.1添加一個文件系統(tǒng)資源.234.7.2添加一個服務(wù) IP 地址資源 .244.7.3添加一個服務(wù)控制腳本資源.254.8創(chuàng)建一個群集服務(wù).264.8.1為新創(chuàng)建的群集服務(wù)加入建立的資源.274.8.2保存集群設(shè)置.294.9啟動群集管理器.294.9.1同步節(jié)點間的群集配置信息.294.9.2啟動集群相應(yīng)服務(wù).294.10顯示群集和服務(wù)狀態(tài).30 RedHat 5.5 RHCS 雙機(jī)配置

3、文檔 2 / 311系統(tǒng)的環(huán)境描述系統(tǒng)的環(huán)境描述系統(tǒng)將由兩臺 IBM X3650 M3 組成，作為數(shù)據(jù)庫/應(yīng)用服務(wù)器。兩臺 IBM X3650 M3 服務(wù)器將以一個高可用集群系統(tǒng)設(shè)計，一臺服務(wù)器作為主應(yīng)用服務(wù)器工作，另一臺服務(wù)器作為主數(shù)據(jù)庫服務(wù)器工作，當(dāng)主應(yīng)用服務(wù)器或主數(shù)據(jù)庫服務(wù)器發(fā)生故障，另一臺服務(wù)器將自動接管其工作。 RedHat 5.5 RHCS 雙機(jī)配置文檔 3 / 312前期規(guī)劃前期規(guī)劃規(guī)劃相應(yīng)規(guī)劃相應(yīng) ip 地址地址:IP具體說明具體說明172.16.60.24/24數(shù)據(jù)庫服務(wù)地址（浮動 IP）172.16.60.25/24ZJDB 數(shù)據(jù)庫主機(jī)地址172.16.60.23/24ZJ

4、DB-fence 地址172.16.60.20/24應(yīng)用服務(wù)地址（浮動 IP）172.16.60.21/24ZJAPP 應(yīng)用服務(wù)器主機(jī)地址172.16.60.22/24ZJAPP-fence 地址2.2.規(guī)劃兩臺系統(tǒng)的規(guī)劃兩臺系統(tǒng)的/etc/hosts 文件文件172.16.60.25 ZJDB172.16.60.24 zjdb-ser172.16.60.23 dbipmi172.16.60.21 ZJAPP172.16.60.20 zjapp-ser172.16.60.22 appipmi RedHat 5.5 RHCS 雙機(jī)配置文檔 4 / 313 存儲磁盤掛接存儲磁盤掛接3.1 操作系統(tǒng)

5、安裝操作系統(tǒng)安裝操作系統(tǒng)組建安裝、分區(qū)、Cluster 安裝完成后，重新啟動。3.2 外聯(lián)設(shè)備連接外聯(lián)設(shè)備連接將外聯(lián)設(shè)備(HBA 卡)連接上，然后重起系統(tǒng)，由于 linux kernel 自帶驅(qū)動信息，在重起的時候系統(tǒng)會自動認(rèn)設(shè)備。3.3 存儲磁盤掛接存儲磁盤掛接使用 fdisk l 查看存儲自動掛載的磁盤信息。解壓源碼包：tar -zxvf rdac-LINUX-source.tar.gz文件將被解壓到linuxrdac-的目錄中進(jìn)入linuxrdac-的目錄編譯及安裝： Make Make install編輯啟動項菜單/boot/grub/menu.lst（不同版本名字可能有區(qū)別，如：gr

6、ub.conf） ，將 mpp-.img 加入啟動項如：加粗字體表示在 menu.lst 中添加的信息 default=4timeout=10splashimage=(hd1,1)/grub/splash.xpm.gzhiddenmenutitle Red Hat Enterprise Linux AS (2.6.18-34.Elsmp)root (hd1,1)kernel /vmlinuz-2.6.18-34.Elsmp ro ro root=LABEL=/ rhgb quietinitrd /initrd-2.6.18-34.Elsmp.imgtitle Red Hat Enterpris

7、e Linux AS (2.6.18-34.El)root (hd1,1)kernel /vmlinuz-2.6.18-34.El ro root=LABEL=/ rhgb quietinitrd /initrd-2.6.18-34.El.img RedHat 5.5 RHCS 雙機(jī)配置文檔 5 / 31title Otherrootnoverify (hd0,0)chainloader +1title Red Hat Enterprise Linux AS (2.6.18-34.Elsmp) with RDACroot (hd1,1)kernel /vmlinuz-2.6.18-34.Els

8、mp ro root=LABEL=/ rhgb quietinitrd /mpp-2.6.18-34.Elsmp.img重新啟動 Linux 系統(tǒng)，并選擇 mpp 方式啟動3.3.1 物理卷創(chuàng)建物理卷創(chuàng)建Pvcreate /dev/sdxpvscan pv 信息掃描，pvdisplay 查看 pv 信息。3.3.2 VG 創(chuàng)建創(chuàng)建創(chuàng)建 mkdir /upload、/oradata 存儲掛接目錄。創(chuàng)建 VG#vgcreate oravg /dev/sdx /dev/sdn vgscan 掃描 vg 信息。vgdiaplay 查看 vg 信息。vgremove f oravg 刪除 VG。vgch

9、ang a n oravg 將 VG 活動狀態(tài)關(guān)閉。vgchang a y oravg 將 VG 活動狀態(tài)開啟。3.3.3 創(chuàng)建創(chuàng)建/刪除文件系統(tǒng)刪除文件系統(tǒng)#lvcreate -l 100%free -n upload /dev/mapper/wasvg 創(chuàng)建 lv，將空間全部劃分。#lvcreate -L +500g -n oradata /dev/mapper/oravg 將 500g 空間指定給 oravg。#lvextend -l +100%free /dev/mapper/oradata 擴(kuò)文件系統(tǒng)命令lvscan 掃描 lv 信息。lvdisplay 查看 lv 信息。lvrem

10、ove f /dev/mapper/oradatavg 刪除 LV。 RedHat 5.5 RHCS 雙機(jī)配置文檔 6 / 313.3.4 文件系統(tǒng)格式化文件系統(tǒng)格式化mkfs.ext3 /dev/mapper/oravg-oradata3.3.5 掛載掛載/卸載文件系統(tǒng)卸載文件系統(tǒng)#mount /dev/mapper/oravg-oradata /oradata 掛載文件系統(tǒng)。#umount /oradata umount 文件系統(tǒng)。3.3.6 Fence 補(bǔ)丁補(bǔ)丁#OpenIPMI-tools-2.0.16-7.el5.i386.rpm （linux 系統(tǒng)盤）測試 fencefence_i

11、pmilan -a 172.16.60.21 -l USERID -p PASSW0RD -o status顯示 on 狀態(tài)為成功。 RedHat 5.5 RHCS 雙機(jī)配置文檔 7 / 314 系統(tǒng)配置系統(tǒng)配置4.1 修改主機(jī)名和網(wǎng)關(guān)信息修改主機(jī)名和網(wǎng)關(guān)信息修改/etc/sysconfig/networkNETWORKING=yesHOSTNAME=ZJAPPGATEWAY=172.16.2.250注：按照相應(yīng)的配置修改 ZJDB 的主機(jī)4.2 設(shè)置網(wǎng)卡綁定功能設(shè)置網(wǎng)卡綁定功能修改/etc/sysconfig/network-scripts/ifcfg-bond0DEVICE=bond0IP

12、ADDR=172.16.60.21NETMASK=255.255.255.0NETWORK=172.16.2.0BROADCAST=172.16.2.255GATEWAY=172.16.2.250ONBOOT=yesBOOTPROTO=noneUSERCTL=noTYPE=BOND修改/etc/sysconfig/network-scripts/ifcfg-eth0DEVICE=eth0USERCTL=noONBOOT=yesMASTER=bond0SLAVE=yesBOOTPROTO=none修改/etc/sysconfig/network-scripts/ifcfg-eth1DEVICE=

13、eth1USERCTL=noONBOOT=yes RedHat 5.5 RHCS 雙機(jī)配置文檔 8 / 31MASTER=bond0SLAVE=yesBOOTPROTO=none添加如下信息到/etc/modprobe.confAlias bond0 bondingOptions bond0 mode=1 miimon=100 use_carrier=0作用同上：1. #echo alias bond0 bonding/etc/modprobe.conf 2. #echo options bond0 mode=1 miimon=100 use_carrier=0 primary=eth0/et

14、c/modprobe.conf注：按照相應(yīng)的配置修改 ZJDB 主機(jī)。4.3 關(guān)閉不需要的系統(tǒng)服務(wù)關(guān)閉不需要的系統(tǒng)服務(wù)目的：提高系統(tǒng)的啟動速度。#chkconfig kudzu off#chkconfig sendmail off#chkconfig nfs off#chkconfig smartd off#chkconfig cpus off#chkconfig rhnsd off#chkconfig iptables off#chkconfig autofs off#chkconfig acpid off#chkconfig apmd off注：在兩個機(jī)器上都要操作4.4 沒有沒有 RHN

15、 號的情況下設(shè)置號的情況下設(shè)置 yum 源安裝集群軟件源安裝集群軟件建議文件/etc/yum.repo.d/mycdrom.repo#touch /etc/yum.repo.d/mycdrom.repo#vi /etc/yum.repo.d/mycdrom.repoBase RedHat 5.5 RHCS 雙機(jī)配置文檔 9 / 31name=RHEL5 ISO baseurl=file:/mnt/Serverenabled=1gpgcheck=0Clustername=RHEL5 ISO Clusterbaseurl=file:/mnt/Clusterenabled=1gpgcheck=0#m

16、ount /dev/cdrom /mnt#yum install cman rgmanager system-config-cluster安裝過程如下圖所示:安裝過程中出現(xiàn)以下提示，選擇 y:等待完成安裝，出現(xiàn) Compelete! 表示安裝結(jié)束 RedHat 5.5 RHCS 雙機(jī)配置文檔 10 / 315 集群配置集群配置安裝操作系統(tǒng)時，進(jìn)行安裝 Cluster 軟件包，安裝完成 Cluster 集群軟件后，使用集群配置工具進(jìn)行配置。在 root 用戶下，鍵入#system-config-cluster5.1 創(chuàng)建一個新的集群配置創(chuàng)建一個新的集群配置選擇 Create New Config

17、uration 按鈕，輸入集群的名稱。 RedHat 5.5 RHCS 雙機(jī)配置文檔 11 / 315.2 選擇鎖機(jī)制選擇鎖機(jī)制選擇 Distributed Lock Manager (DLM),然后點擊確定按鈕。5.3 添加群集成員節(jié)點添加群集成員節(jié)點點擊 Cluster-Cluster Nodes-Add a Cluster Node RedHat 5.5 RHCS 雙機(jī)配置文檔 12 / 315.3.1 輸入第一個成員節(jié)點的信息輸入第一個成員節(jié)點的信息在 cluster Node Name 中輸入第一個機(jī)器的主機(jī)名，ZJAPP,Quorum Votes:不填，然后點擊確定。5.3.2 輸

18、入第二個成員節(jié)點的信息輸入第二個成員節(jié)點的信息在 cluster Node Name 中輸入第二個機(jī)器的主機(jī)名，ZJDB, Quorum Votes：不填，然后點擊確定。5.4 添加添加 Fence 設(shè)備設(shè)備5.4.1 增加第一個增加第一個 Fence 設(shè)備設(shè)備輸入第一個 Fence 設(shè)備的信息，點擊 Cluster-Fence Devices-Add a Fence Device 來加入第一個 ipm 設(shè)備：Name:為 appipmi 的名字Login:USERID:為 ipmi 的登錄名Password:為 ipmi 的登陸密碼Hostname:為 ipmi 的主機(jī)名 RedHat 5.

19、5 RHCS 雙機(jī)配置文檔 13 / 315.4.2 增加第二個增加第二個 Fence 設(shè)備設(shè)備輸入第二個 Fence 設(shè)備的信息，點擊 Cluster-Fence Devices-Add a Fence Device 來加入第二個 ipmi 設(shè)備：Name:為 dbipmi 的名字Login:USERID:為 ipmi 的登錄名Password:為 ipmi 的登陸密碼Hostname:為 ipmi 的主機(jī)名5.5 建立建立 Fence 設(shè)備和節(jié)點聯(lián)系設(shè)備和節(jié)點聯(lián)系在添加了 fence 設(shè)備后，需要建立 fence 設(shè)備和每個節(jié)點的對應(yīng)關(guān)系，使每個節(jié)點可以通過 Fence 設(shè)備對節(jié)點的開機(jī)，

20、關(guān)機(jī)和重啟進(jìn)行管理或者對節(jié)點的狀態(tài)進(jìn)行查詢。 RedHat 5.5 RHCS 雙機(jī)配置文檔 14 / 315.5.1 建立第一個節(jié)點和建立第一個節(jié)點和 Fence 設(shè)備的關(guān)系設(shè)備的關(guān)系點擊 Cluster Nodes-ZJAPP-Manage Fencing For This Node 按鈕。進(jìn)入圖所示界面，點擊 Add a New Fence Lenvl 按鈕，進(jìn)入界面，點擊 Fence-Level-1,進(jìn)入所示界面，點擊Add a New Fence to this Level,進(jìn)入所示界面，選擇 ipmi,然后點擊確定按鈕，進(jìn)入所示界面，最后點擊關(guān)閉按鈕。 RedHat 5.5 RHCS

21、 雙機(jī)配置文檔 15 / 31 RedHat 5.5 RHCS 雙機(jī)配置文檔 16 / 31 RedHat 5.5 RHCS 雙機(jī)配置文檔 17 / 31 RedHat 5.5 RHCS 雙機(jī)配置文檔 18 / 315.5.2 建立第二個節(jié)點和建立第二個節(jié)點和 Fence 設(shè)備的關(guān)系設(shè)備的關(guān)系點擊 Cluster Nodes-ZJDB-Manage Fencing For This Node 按鈕。進(jìn)入圖所示界面，點擊 Add a New Fence Lenvl 按鈕，進(jìn)入界面，點擊 Fence-Level-1,進(jìn)入所示界面，點擊Add a New Fence to this Level,進(jìn)入

22、所示界面，選擇 ipmi,然后點擊確定按鈕，進(jìn)入所示界面，最后點擊關(guān)閉按鈕。 RedHat 5.5 RHCS 雙機(jī)配置文檔 19 / 31 RedHat 5.5 RHCS 雙機(jī)配置文檔 20 / 31 RedHat 5.5 RHCS 雙機(jī)配置文檔 21 / 31 RedHat 5.5 RHCS 雙機(jī)配置文檔 22 / 315.6 創(chuàng)建一個實效域創(chuàng)建一個實效域選擇 Cluster -Managed Resources-Failover Domains-Create a Failover Domain。在 name for new Failover Domain 中輸入:APP，點擊確定按鈕。注：

23、Failover Domain 的名字要符合統(tǒng)一命名規(guī)范。點擊 Available Cluster Nodes，分別選中 ZJAPP 和 ZJDB，然后點擊關(guān)閉按鈕。 RedHat 5.5 RHCS 雙機(jī)配置文檔 23 / 315.7 創(chuàng)建集群資源創(chuàng)建集群資源5.7.1 添加一個文件系統(tǒng)資源添加一個文件系統(tǒng)資源在 select a Resource Type:File SystemName：share_fsFile System Type：ext3Mount Point ：/share_fsDevice： /dev/mapper/wasvg-waslv選中：Force unmount 點擊確定

24、按鈕。 RedHat 5.5 RHCS 雙機(jī)配置文檔 24 / 315.7.2 添加一個服務(wù)添加一個服務(wù) IP 地址資源地址資源點擊 Cluster-Managed Resources-Resources-Create a Resource在 select a Resource Type：IP Address 輸入：172.16.60.20，點擊確定按鈕。 RedHat 5.5 RHCS 雙機(jī)配置文檔 25 / 315.7.3 添加一個服務(wù)控制腳本資源添加一個服務(wù)控制腳本資源點擊 Cluster-Managed Resources-Resources-Creat a Resource ，在 select a Resource Type：Script Name： File :/etc/rc.d/init.d/websphere，點擊確定按鈕。5.8 創(chuàng)建一個群集服務(wù)創(chuàng)建一個群集服務(wù)點擊 Cluster-Man