1、SUN雙機(jī)安裝文檔 (Solaris 10 + sybase + SVM + Sun Cluster 3.2)文檔版本：1.0參考資料:Sun Cluster 3.2 發(fā)行說明（適用于 Solaris OS）Sun Cluster 軟件安裝指南（適用于 Solaris OS）Sun Cluster 系統(tǒng)管理指南（適用于 Solaris OS） 用于 Sybase 的 Sun Cluster 數(shù)據(jù)服務(wù)指南（適用于 Solaris OS）SolarisVolume Manager 管理指南Sun StorageTekCommon Array Manager 軟件安裝指南Sun StorageTek

2、 6140 陣列硬件安裝指南日 期：2010.06.07硬件環(huán)境：1） 服務(wù)器：2SUN T52402） 磁盤陣列：SUN Stortek 6140軟件環(huán)境：1） Solaris 102） Sun Cluster 3.23） Sybase4） Solaris Volume Manager主機(jī)命名規(guī)則：服務(wù)器：第一臺(tái)T5240：node1 ；第二臺(tái)T5240：node2Sun cluster + sybase 安裝規(guī)劃（如表K-1所示）： 表K-1操作系統(tǒng) Sun Solaris 10u8 集群軟件 Sun Cluster 3.2卷管理軟件Solaris Volume Manager數(shù)據(jù)庫軟件

3、Sybase節(jié)點(diǎn)1 10.50.1.2節(jié)點(diǎn)2 10.50.1.4浮動(dòng)IP地址 10.50.1.1/10.50.1.3子網(wǎng)掩碼255.255.255.0網(wǎng)關(guān) 10.50.1.254節(jié)點(diǎn)1對(duì)應(yīng)的主機(jī)名Node1節(jié)點(diǎn)2對(duì)應(yīng)的主機(jī)名Node2系統(tǒng)用戶sybase (syabse組)浮動(dòng)IP對(duì)應(yīng)的主機(jī)名gcard11_db1/gcard11_db2一 服務(wù)器T5240的安裝： 1.安裝前的規(guī)劃每臺(tái)服務(wù)器配有兩個(gè)146G的硬盤做raid1，系統(tǒng)安裝好之后，兩個(gè)節(jié)點(diǎn)的分區(qū)一致，避免出現(xiàn)不可預(yù)料的情況。2.操作系統(tǒng)安裝 1） 操作系統(tǒng)：Solaris 10注意：在安裝操作系統(tǒng)的過程中千萬要注意兩臺(tái)主機(jī)都不要接

4、存儲(chǔ)，不然的話兩臺(tái)主機(jī)的系統(tǒng)盤和Stortek 6140的Target 號(hào)會(huì)不一致，會(huì)對(duì)以后的安裝產(chǎn)生影響。2） 安裝操作系統(tǒng)EIS補(bǔ)丁詳細(xì)步驟3) 按照以下的規(guī)劃安裝操作系統(tǒng)node1與node2相同：由于要安裝SC3.2+svm，請(qǐng)預(yù)留系統(tǒng)盤的第3分區(qū)空間512M，用來建立/globaldevices，第七分區(qū)空間100MB用來放置metadb信息 注：/globaldevices - 創(chuàng)建一個(gè)512 兆字節(jié)的文件系統(tǒng)供scinstall實(shí)用程序針對(duì)全局設(shè)備使用。（分片7）meta分區(qū)用于存放卷管理器的狀態(tài)數(shù)據(jù)庫副本在磁盤的最后一個(gè)分片上創(chuàng)建一個(gè)20 兆字節(jié)的分區(qū)供卷管理器使用。表K-2分

5、區(qū)號(hào) 分區(qū)名分區(qū)大小 說明 0 / 50GB為分片1 至7 分配空間后磁盤中剩余的空閑空間?？晒㏒olarisOS、Sun Cluster 軟件、數(shù)據(jù)服務(wù)軟件、卷管理器軟件、SunManagement Center 代理和Sun Cluster 模塊代理軟件包、根文件系統(tǒng)以及數(shù)據(jù)庫和應(yīng)用程序軟件使用。 1 Swap 32G 2 Overlap MB整個(gè)磁盤 3/globaldevices512MSun Cluster 軟件稍后會(huì)給該盤片指定一個(gè)不同的裝載點(diǎn)并將它裝載為一個(gè)群集文件系統(tǒng)。 4/Sybase3G 5/dataclient3B 6/gcpro2G 7卷管理器100MBmetadb 專

6、用 5) 配置/etc/hosts，輸入所有cluster節(jié)點(diǎn)和邏輯主機(jī)IP記錄：在兩臺(tái)主機(jī)上配置好IPMP連接兩條ce口私網(wǎng)線 配置IPMPnode1的/etc/hosts信息# Internet host table#:1 localhost 127.0.0.1 localhost 10.50.1.2 node1 loghost 10.50.1.4 node210.50.1.1 gcard11_bd1 10.50.1.3 gcard11_bd2node1 的/etc/hostname.nxge0信息10.50.1.2 netmask + broadcast + group ipmp0 up

7、 node1 的/etc/hostname.nxge1信息group ipmp0 up standbynode2的/etc/hosts信息rootnode2 # cat /etc/hosts# Internet host table#:1 localhost 127.0.0.1 localhost 10.50.1.4 node2 loghost 10.50.1.2 node110.50.1.1 gcard11_bd1 10.50.1.3 gcard11_bd2node2 的/etc/hostname.nxge0信息10.50.1.4 netmask + broadcast + group ip

8、mp0 up node2 的/etc/hostname.nxge1信息group ipmp0 up standby以下在兩機(jī)上完成6) 修改文件/etc/defaultrouter，設(shè)置缺省路由vi /etc/defaultrouter 10.50.1.254二Stortek 6140安裝識(shí)別.1配置StorEdge 6140：詳細(xì)配置注：StorEdge 6140共有5塊146GFC硬盤，其中4個(gè)硬盤做RAID5，剩下的1個(gè)做hot spare盤。由于sun cluster需要一個(gè)quorum盤， sybase需使用raw做文件系統(tǒng)，所以劃分了三個(gè)partion。Quorum分區(qū)1024MB

9、即可。讓系統(tǒng)重新掃描硬件設(shè)備rootnode1 # reboot - -r 可以看見盤陣rootnode1 # formatSearching for disks.doneAVAILABLE DISK SELECTIONS: 0. c1t0d0 /pci400/pci0/pci8/scsi0/sd0,0 1. c2tA0BCd31 /pci400/pci0/pcid/SUNW,emlxs0/fp0,0/ssdwa0bc,1f 2. c5tA0BCd31 /pci500/pci0/pci9/SUNW,qlc0/fp0,0/ssdwa0bc,1f 3. c6t600A0BABFCA02Bd0 /s

10、csi_vhci/ssdg600a0babfca02b 4. c6t600A0BABFCA0E5d0 /scsi_vhci/ssdg600a0babfca0e5 5. c6t600A0BECA4BFC9D3Dd0 /scsi_vhci/ssdg600a0beca4bfc9d3d 6. c6t600A0BECD4BFC9DD6d0 /scsi_vhci/ssdg600a0becd4bfc9dd6Specify disk (enter its number): rootnode2 # formatSearching for disks.doneAVAILABLE DISK SELECTIONS:

11、0. c1t0d0 /pci400/pci0/pci8/scsi0/sd0,0 1. c2tA0BCd31 /pci400/pci0/pcid/SUNW,qlc0/fp0,0/ssdwa0bc,1f 2. c3tA0BCd31 /pci500/pci0/pci9/SUNW,qlc0/fp0,0/ssdwa0bc,1f 3. c4t600A0BABFCA02Bd0 /scsi_vhci/ssdg600a0babfca02b 4. c4t600A0BABFCA0E5d0 /scsi_vhci/ssdg600a0babfca0e5 5. c4t600A0BECA4BFC9D3Dd0 /scsi_vh

12、ci/ssdg600a0beca4bfc9d3d 6. c4t600A0BECD4BFC9DD6d0 /scsi_vhci/ssdg600a0becd4bfc9dd6Specify disk (enter its number):三Cluster 軟件安裝配置1.Sun軟件的安裝雙機(jī)軟件采用sun公司的sun cluster3.2 ，此軟件已經(jīng)集成到JES（Java Enterprise System）軟件包中?？赏ㄟ^運(yùn)行以下命令進(jìn)行安裝：GUI mode:./installerCLI mode:./installer -nodisplay2. Sun Cluster環(huán)境配置兩個(gè)節(jié)點(diǎn)通訊用ro

13、otnode1 # vi .rhosts +3，打EIS補(bǔ)丁軟件安裝完畢之后，也需要打補(bǔ)丁。不過sun cluster安裝完畢之后，系統(tǒng)默認(rèn)已經(jīng)啟動(dòng)服務(wù)，安裝補(bǔ)丁之前需停用sun cluster服務(wù)。（兩個(gè)節(jié)點(diǎn)上做）安裝完畢后，執(zhí)行reboot - -x 重啟之后不進(jìn)入sun cluster環(huán)境安裝SC3.1的patches；rootnode1 # lofiadm -a /eis-dvd.iso /dev/lofi/1rootnode1 # lofiadm Block Device File/dev/lofi/1 /opt/iso/eis-dvd.isorootnode1 # mount -F

14、 /dev/lofi/1 /mnt/rootnode1 # mount -F hsfs /dev/lofi/1 /mnt/rootnode1 # cd /mnt/sun/installrootnode1 # ./setup-standard.shrootnode1 # unpack-patches注：（進(jìn)入cluster補(bǔ)丁包的目錄，用這個(gè)命令一次打EIS補(bǔ)丁集）然后執(zhí)行命令 init 6 重啟系統(tǒng)。在node2上執(zhí)行以上相同的步驟4.Scintall 配置配置主節(jié)點(diǎn)node1 具體內(nèi)容摘錄:rootnode1 # scinstall * 主菜單 * 請(qǐng)選擇以下某一帶 (*) 的選項(xiàng)： * 1

15、) 安裝群集或群集節(jié)點(diǎn) 2) 將群集配置為從此安裝服務(wù)器中快速啟動(dòng) 3) 在此群集節(jié)點(diǎn)中添加對(duì)新數(shù)據(jù)服務(wù)的支持 4) 升級(jí)此群集節(jié)點(diǎn) 5) 打印此群集節(jié)點(diǎn)的發(fā)行信息 * ?) 菜單選項(xiàng)中的幫助 * q) 退出 選項(xiàng)： 1 * 安裝菜單 * 請(qǐng)選擇以下任一選項(xiàng)： 1) 安裝新群集的所有節(jié)點(diǎn) 2) 只將此機(jī)器安裝為新群集的第一個(gè)節(jié)點(diǎn) 3) 將此機(jī)器添加為現(xiàn)有群集中的節(jié)點(diǎn) ?) 菜單選項(xiàng)中的幫助 q) 返回主菜單 選項(xiàng)： 2 * 只安裝新群集的第一個(gè)節(jié)點(diǎn) * 此選項(xiàng)用于建立新的群集，該群集使用此機(jī)器作為其第一個(gè)節(jié)點(diǎn)。 安裝群集框架軟件之后，系統(tǒng)將要求您輸入群集的名稱。 然后，您可以運(yùn)行 scchec

16、k(1M) 來測(cè)試此機(jī)器是否滿足 Sun Cluster 預(yù)配置的基本要求。 sccheck(1M) 通過后，系統(tǒng)將要求您輸入最初將加入該群集的其他節(jié)點(diǎn)的名稱 。除非此群集為單節(jié)點(diǎn)群集，否則系統(tǒng)還將要求您輸入某些群集傳輸配置信息 。 可以隨時(shí)按 Control-d 組合鍵返回 主菜單。 是否要繼續(xù) (yes/no) yes? y 安裝類型 群集名 檢查 群集節(jié)點(diǎn) 群集節(jié)點(diǎn) Type of Installation Autodiscovery of Cluster Transport Do you want to use autodiscovery (yes/no) yes?y9) Do you

17、 want scinstall to reboot for you (yes/no) yes? y 5.執(zhí)行命令 scstat p 檢查確認(rèn)所有cluster節(jié)點(diǎn)都處于online狀態(tài)；具體內(nèi)容摘錄:rootnode1 # scstat- Cluster Nodes - Node name Status - - Cluster node: node2 Online Cluster node: node1 Online- Cluster Transport Paths - Endpoint Endpoint Status - - - Transport path: node2:nxge3 nod

18、e1:nxge3 Path online Transport path: node2:nxge2 node1:nxge2 Path online- Quorum Summary from latest node reconfiguration - Quorum votes possible: 3 Quorum votes needed: 2 Quorum votes present: 3- Quorum Votes by Node (current status) - Node Name Present Possible Status - - - - Node votes: node2 1 1

19、 Online Node votes: node1 1 1 Online- Quorum Votes by Device (current status) - Device Name Present Possible Status - - - - Device votes: /dev/did/rdsk/d4s2 1 1 Online- Resource Groups and Resources - Group Name Resources - - IPMP Groups - Node Name Group Status Adapter Status - - - - - IPMP Group:

20、node2 ipmp0 Online nxge1 Standby IPMP Group: node2 ipmp0 Online nxge0 Online IPMP Group: node1 ipmp0 Online nxge1 Standby IPMP Group: node1 ipmp0 Online nxge0 Online- IPMP Groups in Zones - Zone Name Group Status Adapter Status - - - - -7.設(shè)置quorum disk盤1） 在所有節(jié)點(diǎn)執(zhí)行命令scdidadm L 查看硬盤ID，選擇兩Cluster節(jié)點(diǎn)主機(jī)都能看

21、到的硬盤ID；具體內(nèi)容摘錄:查看共享磁盤設(shè)備(se 6140)的全局設(shè)備號(hào)（did）。d4 為quorum盤、d5，d6,d7 為RAW設(shè)備。rootnode1 # scdidadm -L1 node2:/dev/rdsk/c0t0d0 /dev/did/rdsk/d1 2 node2:/dev/rdsk/c1t0d0 /dev/did/rdsk/d2 3 node1:/dev/rdsk/c5tA0BCd31 /dev/did/rdsk/d3 3 node1:/dev/rdsk/c2tA0BCd31 /dev/did/rdsk/d3 3 node2:/dev/rdsk/c3tA0BCd31 /

22、dev/did/rdsk/d3 3 node2:/dev/rdsk/c2tA0BCd31 /dev/did/rdsk/d3 4 node1:/dev/rdsk/c6t600A0BABFCA0E5d0 /dev/did/rdsk/d4 4 node2:/dev/rdsk/c4t600A0BABFCA0E5d0 /dev/did/rdsk/d4 5 node1:/dev/rdsk/c6t600A0BABFCA02Bd0 /dev/did/rdsk/d5 5 node2:/dev/rdsk/c4t600A0BABFCA02Bd0 /dev/did/rdsk/d5 6 node1:/dev/rdsk/

23、c6t600A0BECD4BFC9DD6d0 /dev/did/rdsk/d6 6 node2:/dev/rdsk/c4t600A0BECD4BFC9DD6d0 /dev/did/rdsk/d6 7 node1:/dev/rdsk/c6t600A0BECA4BFC9D3Dd0 /dev/did/rdsk/d7 7 node2:/dev/rdsk/c4t600A0BECA4BFC9D3Dd0 /dev/did/rdsk/d7 8 node1:/dev/rdsk/c1t0d0 /dev/did/rdsk/d8 9 node1:/dev/rdsk/c0t0d0 /dev/did/rdsk/d9 81

24、91 node1:/dev/rmt/0 /dev/did/rmt/1 2)在節(jié)點(diǎn)1，執(zhí)行命令scsetup指定d6作為quorum disk盤Is it okay to continue (yes/no) yes? yesWhich global device do you want to use (d)? d4Is it okay to proceed with the update (yes/no) yes? yesDo you want to add another quorum disk (yes/no)? noIs it okay to reset “installmode” (ye

25、s/no) yes? yes四.磁盤資源配置1. 重啟所有節(jié)點(diǎn)重新識(shí)別設(shè)備：scshutdown ; boot -r1)創(chuàng)建磁盤集data_vg,dbvg1,dbvg2metaset-sdatavg -a -h node1 node2metaset -s dbvg1 -a -h node1metaset -s dbvg2 -a -h node2注：（關(guān)于不能使用-M項(xiàng)，-M是用來創(chuàng)建多屬主主機(jī)磁盤的，就是在同一時(shí)間兩節(jié)點(diǎn)都可以對(duì)磁盤集有讀寫的權(quán)限，這是sun cluster for ORACLE RAC的東西，要滿足一定要件才能創(chuàng)建成功）metaset: 只允許在多屬主磁盤集上使用 -M 選項(xiàng)

26、用法: metaset -s 集名稱 -a -A enable | disable -h 主機(jī)名. metaset -s 集名稱 -a -M -h 主機(jī)名. metaset -s 集名稱 -a -M -l 長(zhǎng)度 -L 驅(qū)動(dòng)器名稱. metaset -s 集名稱 -d -M -h 主機(jī)名. metaset -s 集名稱 -d -M -f -h 所有主機(jī)名 metaset -s 集名稱 -d -M -f 驅(qū)動(dòng)器名稱. metaset -s 集名稱 -d -M -f 主機(jī)名. metaset -s 集名稱 -A enable | disable metaset -s 集名稱 -t -f metase

27、t -s 集名稱 -r metaset -s 集名稱 -j -M metaset -s 集名稱 -w -M metaset -s 集名稱 -P -M metaset -s 集名稱 -b -M metaset -s 集名稱 -o -M -h 主機(jī)名 metaset -s 集名稱 主機(jī)名 = /etc/nodename 的內(nèi)容 驅(qū)動(dòng)器名稱 = cNtNdN 無盤片 -M 對(duì)于多屬主集是可選的，但在創(chuàng)建集時(shí)例外2).將共享磁盤d5,d6,d7 添加到磁盤集中metaset s datavg a /dev/did/rdsk/d7s0metaset -s dbvg1 -a /dev/did/rdsk/d

28、5s0metaset -s dbvg2 -a /dev/did/rdsk/d6s0注：（did設(shè)備只映射2個(gè)有意義的slice，slice0和7，s7只有8m放一個(gè)metadb，s0代表全部可用空）3) 查看磁盤集屬性 rootnode1 # metaset -s datavgSet name = datavg, Set number = 1Host Owner node1 Yes node2 Driv Dbased7 Yesrootnode1 # metaset -s dbvg1Set name = dbvg1, Set number = 1Host Owner node1 Yes Driv

29、 Dbased5 Yesrootnode2 # metaset -s dbvg2Set name = dbvg2, Set number = 1Host Owner node2 Yes Driv Dbased6 Yes創(chuàng)建磁盤集在任意一個(gè)節(jié)點(diǎn)操作即可注:(關(guān)于磁盤集屬主的問題，在哪臺(tái)機(jī)器上創(chuàng)建先創(chuàng)建了磁盤集那個(gè)節(jié)點(diǎn)就默認(rèn)為磁盤集的數(shù)組，在實(shí)施中如果還未對(duì)cluster配置資源，會(huì)發(fā)生節(jié)點(diǎn)不能對(duì)磁盤集設(shè)置和寫入的問題，可以用命令在需要切換的節(jié)點(diǎn)上運(yùn)行命令metaset s datavg t 進(jìn)行切換)4)查看sun cluster中磁盤集datavg狀態(tài)rootnode1 #scstat p -

30、 Device Group Servers - Device Group Primary Secondary - - - Device group servers: datavg node1 node2 Device group servers: dbvg1 node1 Device group servers: dbvg2 node2- Device Group Status - Device Group Status - - Device group status: datavg OnlineDevice group status: dbvg1 OnlineDevice group sta

31、tus: dbvg2 Online 5）初始化d5,d6,d7為metadevicesmetainit -s datavg d200 1 1 /dev/did/dsk/d7s0metainit -s dbvg1 d500 1 1 /dev/did/dsk/d5s0metainit -s dbvg2 d600 1 1 /dev/did/dsk/d6s0按照sybase規(guī)劃劃分軟分區(qū)metainit -s datavg d201 -p d200 10gmetainit -s datavg d202 -p d200 10gmetainit -s datavg d203 -p d200 10gmeta

32、init -s datavg d204 -p d200 10gmetainit -s datavg d205 -p d200 10gmetainit -s datavg d206 -p d200 10gmetainit -s datavg d207 -p d200 10gmetainit -s datavg d208 -p d200 10gmetainit -s datavg d209 -p d200 5gmetainit -s datavg d210 -p d200 5gmetainit -s datavg d211 -p d200 5gmetainit -s datavg d212 -p

33、d200 1gmetainit -s datavg d213 -p d200 1gmetainit -s datavg d214 -p d200 1gmetainit -s datavg d215 -p d200 1gmetainit -s datavg d216 -p d200 512mmetainit -s datavg d217 -p d200 512mmetainit -s datavg d218 -p d200 512mmetainit -s datavg d219 -p d200 512mmetainit -s datavg d220 -p d200 256mmetainit -s

34、 datavg d221 -p d200 256mmetainit -s datavg d222 -p d200 256mmetainit -s datavg d223 -p d200 256mmetainit -s datavg d224 -p d200 256mmetainit -s datavg d225 -p d200 2gmetainit -s dbvg1 d501 -p d500 10gmetainit -s dbvg2 d601 -p d600 10gmetainit -s dbvg2 d602 -p d600 256mmetainit -s dbvg2 d603 -p d600 256m4)查看磁盤集datavg狀態(tài)rootnode1 # metastat -s datavgdatavg/d226: Soft Partition Device: datavg/d200 State: Okay Size: blocks (10 GB) Extent Start Block Block count 0 datavg/d200: Concat/Stripe Size: blocks (199 GB) Stripe 0: Device Start Block Dbase State Reloc Hot Spare d7