1、STARSINOLINUXmulti-path安裝配置測(cè)試報(bào)告RenYang浙江星漢侑思博1存有限公司一、測(cè)試環(huán)境摘要4二、檢查安裝multipath42.1檢查是否已安裝42.2若未安裝則安裝42.2.1搭建yum源42.2.2通過(guò)yum源安裝并自啟動(dòng)42.3核查安裝是否成功52.4設(shè)為開(kāi)機(jī)自動(dòng)啟動(dòng)5三、酉己置multipath52.1創(chuàng)建配置腳本52.2賦予腳本執(zhí)行權(quán)限72.3執(zhí)行腳本82.4確認(rèn)配置結(jié)果82.5正常使用磁盤(pán)9四、測(cè)試92負(fù)載均衡測(cè)試92路徑切換測(cè)試9五、常用操作命令10啟停mulitipath服務(wù)10刪除現(xiàn)有路徑10格式化路徑（重新掃描）10查看多路徑10重載multip

2、athd月艮務(wù)10查看所有磁盤(pán)wwid10顯示當(dāng)前devicemapper信息11說(shuō)明:本文檔中安裝部署部分所提到的步驟都在測(cè)試環(huán)境中通過(guò)。署參考手冊(cè)。但因環(huán)境不同而無(wú)法保證在其他環(huán)境中準(zhǔn)確無(wú)誤環(huán)境自行修改）。本文檔僅供參考，建議按照官方手冊(cè)安裝配置。藍(lán)色字體一命令行綠色字體一腳本或輸出結(jié)果暗紅字體一表示變量（可更改）紅色字體一需注意之處#root用戶下執(zhí)行可以作為安裝部（配置請(qǐng)按照特定一、測(cè)試環(huán)境摘要FreeNAS模擬iSCSI存儲(chǔ)并劃分空間分配給Linux5系統(tǒng)二、檢查安裝multipath檢查是否已安裝rootlinux5#rpm-qa|grepmapperdevice-mapper-1

3、.02.55-2.el5device-mapper-1.02.55-2.el5device-mapper-event-1.02.55-2.el5device-mapper-multipath-0.4.7-42.el5若未安裝則安裝搭建 yum 源mkdir-p/mnt/yummount/dev/cdrom/mnt/yum如果從ISO掛載，則使用如下命令：mount-oloop-tiso9660/tmp/Redhat_5.0_U6_64.ISO/mnt/yumecho”yum/etc/yum.repos.d/yum.repoechoname=yum/etc/yum.repos.d/yum.rep

4、oechobaseurl=file:/mnt/yum/Server/etc/yum.repos.d/yum.repoechoenabled=1/etc/yum.repos.d/yum.repoechogpgcheck=1/etc/yum.repos.d/yum.repoechogpgkey=file:/mnt/yum/RPM-GPG-KEY-redhat-release/etc/yum.repos.d/yum.repo通過(guò) yum 源安裝并自啟動(dòng)yum-yinstalldevice-mapperdevice-mapper-multipath核查安裝是否成功rootlinux5#lsmod|gr

5、epdm_multipathdm_multipath569210scsi_dh421771dm_multipathdm_mod1013934dm_mirror,dm_multipath,dm_raid45,dm_log如果模塊沒(méi)有加載成功請(qǐng)使用下列命初始化DM或重啟系統(tǒng):modprobedm-multipathmodprobedm-round-robinservicemultipathdstartmultipath-v2設(shè)為開(kāi)機(jī)自動(dòng)啟動(dòng)chkconfig-level2345multipathdon三、酉己置multipath創(chuàng)建配置腳本Multipath的配置文件是/etc/multipath

6、.conf,為了快速進(jìn)行配置， 可直接在linux系統(tǒng)任意目錄創(chuàng)建一個(gè)腳本并將以下內(nèi)容復(fù)制到腳本中：cp/etc/multipath.conf/etc/multipath.conf.bakechoblacklistdevnodeA(ram|raw|loop|fd|md|dm-|sr|scd|st)0-9*devnodeAhda-zdevnodeAcciss!c0-9d0-9*devnodeAsda-b)defaultsudev_dir/devpolling_interval10failbackimmediateno_path_retry5rr_min_io100path_checkerturs

7、electorround-robin0path_grouping_policyfailoveruser_friendly_namesyesmultipaths/etc/multipath.confforpvincat/proc/partitions|awkprint$4|grepsd|grepechoscsi_id-g-u-s/block/$pv$.wwid;doneforwwidinawkNF$.wwid|sort|uniq|awkprint$1、;doechoFoundadevice:forpvincat/proc/partitions|awkprint$4|grepa-z$;doifsc

8、si_id-g-u-s/block/$pv=$wwid;thenecho$pv:scsi_id-g-u-s/block/$pv;fidonestop=0while$stop-lt1;doif$mode=0600;thenecho$mode/etc/multipath.conf;fiecho/etc/multipath.confstop=1elseif$add=n;thenstop=1elseif$add=q;thenrm-fr$.wwid;break2;fififidonedoneecho/etc/multipath.confrm-fr$.wwida-z$;dosd|grepread-pWhe

9、thertoadd$wwid?y,n,q(y)addif-z$add|$add=y;thenechomultipath/etc/multipath.confechowwid$wwid/etc/multipath.confread-palias:(none)aliasif-n$alias;then$alias/etc/multipath.conf;firead-pgid:(none)gidif-n$gid;then$gid/etc/multipath.conf;firead-puid:(none)uidif-n$uid;then$uid/etc/multipath.conf;firead-pmo

10、de:0600,none(none)modeechoechoechoaliasgiduidmode備注：1、紅色字體部分根據(jù)現(xiàn)場(chǎng)環(huán)境進(jìn)行修改；2、也可以按wwid或device進(jìn)行排除(示例如下)按wwid方式：blacklistwwid26353900f02796769)按device方式：blacklistdevicevendorIBMproduct3S42#DS4200Product10)devicevendorHPproduct*)3、也可以選擇性使用blacklist_exceptions進(jìn)行排除：例如：如果有大量設(shè)備，但只有一個(gè)需要多路徑(WWI師112233445566),此時(shí)不

11、需要將想要使用多路徑的設(shè)備之外的每個(gè)設(shè)備單獨(dú)加入黑名單，只需要將所有設(shè)備都加入黑名單，然后只允許想要使用多路徑的設(shè)備即可：blacklistwwid*)blacklist_exceptionswwid112233445566)賦予腳本執(zhí)行權(quán)限chmod+xtmp.sh執(zhí)行腳本rootlinux5#Foundadevice:sdd:3300000001f548fcaWhethertoadd3300000001f548fca?y,n,q(y)略去N字備注：根據(jù)提示操作即可，alias、gid、uid、mod/E強(qiáng)制要求，根據(jù)具體環(huán)境及需求選擇。確認(rèn)配置結(jié)果1、啟動(dòng)服務(wù)：/etc/init.d/mu

12、ltipathdrestart2、查看多路徑：rootlinux5mapper#multipath-lltest2(330000000c2112572)dm-0FreeBSD,iSCSIDISKsize=2.0Gfeatures=1queue_if_no_pathhwhandler=0rw_round-robin0prio=1active_31:0:0:0sdc8:32activereadytest1(3300000001f548fca)dm-1FreeBSD,iSCSIDISKsize=100Gfeatures=1queue_if_no_pathhwhandler=0rw_round-rob

13、in0prio=1active_32:0:0:0sdd8:48activeready./tmp.sh回車alias:(none)gid:(none)uid:(none)test113001101mode:0600,none(none)06003、其他核查方式會(huì)在/dev/mapper/目錄下多出類似mpath0、mpath1之類設(shè)備（如果指定了alias則以別名方式顯示）用fdisk-l命令可以看到多路徑軟件創(chuàng)建的磁盤(pán)，如/dev/dm-0-3等正常使用磁盤(pán)要使用多路徑生成的磁盤(pán)直接操作/dev/mapper/目錄下的磁盤(pán)就便可。在對(duì)多路徑軟件生成的磁盤(pán)進(jìn)行分區(qū)之前最好運(yùn)行一下pvcreate

14、命令：pvcreate/dev/mapper/test1fdisk/dev/mapper/test1備注：如果磁盤(pán)數(shù)目較多，可采用for循環(huán)操作：fordiskinocrvotelocrvote2oradataloradata2;dopvcreate/dev/mapper/$diskdone四、測(cè)試負(fù)載均衡測(cè)試1、使用dd命令來(lái)對(duì)設(shè)備進(jìn)行寫(xiě)操作，并同時(shí)通過(guò)iostat來(lái)查看I/0狀態(tài)：ddif=/dev/zeroof=/dev/mapper/test12、另開(kāi)啟一個(gè)終端令查看IO情況：iostat1010說(shuō)明：當(dāng)對(duì)/dev/mapper/test1讀寫(xiě)時(shí)，實(shí)際上是對(duì)其所包含的所有設(shè)備（當(dāng)前active）的寫(xiě)過(guò)程。路徑切換測(cè)試拔掉服務(wù)器或存儲(chǔ)任意一根光纖跳線，稍等一會(huì)通過(guò)multipath-ll查看路徑狀態(tài)。五、常用操作命令刪除現(xiàn)有路徑multipath-F格式化路徑（重新掃描）multipath-v2multipath-v3查看多路徑multipath-ll入該文件。servicemultipathdreload查看所有磁盤(pán) wwidforiincat/proc/partitions|awkprint$4|grepsd|grepa-z$;doecho$i:scsi_id-g-u-s/block/$i;done5.1 啟停 mulitipath服務(wù)/e