1、VMware虛擬化平臺(tái)服務(wù)器日常維護(hù)和應(yīng)急處理規(guī)范1目的為提高部門處理VMware虛擬化服務(wù)器故障的能力，形成科學(xué)、有效、反應(yīng)迅速的日常管理流程和應(yīng)急處理機(jī)制，確保虛擬化平臺(tái)的安全和穩(wěn)定運(yùn)行，最大限度地減小服務(wù)器故障對(duì)生產(chǎn)的影響，降低業(yè)務(wù)中斷風(fēng)險(xiǎn)，特制定本規(guī)范。2適用范圍本規(guī)范適用于公司局域網(wǎng)中所有提供VMware虛擬化平臺(tái)服務(wù)的服務(wù)器管理，應(yīng)對(duì)發(fā)生和可能發(fā)生的故障。3規(guī)范內(nèi)容虛擬化平臺(tái)服務(wù)器運(yùn)維和應(yīng)急處理應(yīng)包括風(fēng)險(xiǎn)評(píng)估，檢測(cè)體系和應(yīng)急處理三個(gè)環(huán)節(jié)，合理有效的執(zhí)行控制將防止故障影響擴(kuò)大。3.1 故障分類虛擬化平臺(tái)故障包括服務(wù)器硬件和虛擬化軟件的故障；自然災(zāi)害(水、火、電等)造成的物理破壞；電腦

2、病毒等惡意代碼危害；人為誤操作造成的損害等。3.2 應(yīng)急準(zhǔn)備部門責(zé)任人員明確職責(zé)和管理范圍，根據(jù)實(shí)際情況，安排應(yīng)急值班，確保到崗到人，聯(lián)絡(luò)暢通，處理及時(shí)準(zhǔn)確。3.3 具體措施(1)建立安全、可靠、穩(wěn)定運(yùn)行的機(jī)房環(huán)境，防火、防雷電、防水、防靜電、防塵；建立備份電源系統(tǒng)。(2)虛擬化平臺(tái)服務(wù)器應(yīng)采用可靠、穩(wěn)定、兼容性硬件，落實(shí)責(zé)任管理機(jī)制，遵守安全操作規(guī)范；對(duì)虛擬機(jī)和管理服務(wù)器進(jìn)行定時(shí)備份；采用有效的虛擬化監(jiān)控工具，及時(shí)發(fā)現(xiàn)問題和日?qǐng)?bào)告。4故障處理規(guī)范機(jī)房停電接到停電通知后，相關(guān)人員應(yīng)及時(shí)部署應(yīng)對(duì)具體措施，啟動(dòng)備用電源，保證服務(wù)器正常運(yùn)行。硬件維護(hù)(1)平臺(tái)服務(wù)器出現(xiàn)硬件告警需要停機(jī)維護(hù)，服務(wù)器責(zé)

3、任人應(yīng)立即通知相關(guān)人員，將業(yè)務(wù)虛機(jī)遷移到集群中其他服務(wù)器主機(jī)上，再將故障服務(wù)器切換至維護(hù)模式并從HA集群中移除，負(fù)責(zé)陪同硬件廠家現(xiàn)場(chǎng)更換至成功恢復(fù)。(2)若服務(wù)器硬件24小時(shí)內(nèi)無法恢復(fù)，服務(wù)器責(zé)任人需書面報(bào)告原因并立即通知業(yè)務(wù)管理人員進(jìn)行數(shù)據(jù)應(yīng)急備份，防止災(zāi)難擴(kuò)大。(3)若虛擬化存儲(chǔ)硬件出現(xiàn)告警，第一目擊人應(yīng)立即通知存儲(chǔ)管理員，并上報(bào)主管領(lǐng)導(dǎo)，存儲(chǔ)管理員應(yīng)在報(bào)告1小時(shí)內(nèi)聯(lián)系廠家到場(chǎng)處理，處理完成后因報(bào)告原因，找到解決方法；并立即對(duì)數(shù)據(jù)做完整性檢查，消除重復(fù)發(fā)生隱患。虛擬化平臺(tái)故障(1)虛擬化服務(wù)器應(yīng)保證雙機(jī)群集配置，并同時(shí)配置好一套備用服務(wù)器群集，隨時(shí)待命。(2)發(fā)生平臺(tái)故障后，相關(guān)人員應(yīng)及時(shí)

4、查找、確定故障原因，進(jìn)行先期處置。若故障在短時(shí)間內(nèi)無法修復(fù)，相關(guān)人員應(yīng)將業(yè)務(wù)遷移到備用平臺(tái)環(huán)境中，保持業(yè)務(wù)系統(tǒng)的正常運(yùn)行；將故障服務(wù)器脫離網(wǎng)絡(luò)，進(jìn)行故障排除工作。虛擬機(jī)軟件系統(tǒng)故障(1)日常做好虛擬機(jī)的定時(shí)備份和快照，系統(tǒng)崩潰后，能夠及時(shí)恢復(fù)虛擬機(jī)。(2)發(fā)生虛擬機(jī)系統(tǒng)故障后，相關(guān)人員應(yīng)及時(shí)通知業(yè)務(wù)人員檢查出現(xiàn)故障的原因并盡快排除。(3)如遇虛擬機(jī)系統(tǒng)需要啟用備份系統(tǒng)進(jìn)行恢復(fù)時(shí)，應(yīng)在恢復(fù)后和業(yè)務(wù)管理員仔細(xì)檢查業(yè)務(wù)是否恢復(fù)并做好恢復(fù)記錄。虛擬化管理服務(wù)器故障預(yù)防虛擬化服務(wù)器采用群集配置。平臺(tái)選用VMware勺企業(yè)版，配套管理選用VMwarevCenter標(biāo)準(zhǔn)版對(duì)虛擬數(shù)據(jù)中心管理單元進(jìn)行集中管理，

5、系統(tǒng)平臺(tái)常年24小時(shí)運(yùn)行，每天將產(chǎn)生大量的任務(wù)日志和記錄信息。同時(shí)vCenter器擔(dān)任了整個(gè)平臺(tái)主機(jī)管理和集中配置的角色，使用率極高。為了安全，應(yīng)定期備份VIM數(shù)據(jù)庫，定期檢查告警日志。同時(shí)考慮利用虛擬化平臺(tái)定時(shí)P2V服務(wù)器為備用虛擬機(jī)。當(dāng)實(shí)體化vCenter服務(wù)器出現(xiàn)不可恢復(fù)的硬件故障時(shí)，馬上在虛擬化平臺(tái)上啟動(dòng)備用虛擬機(jī)，從而減小平臺(tái)失去管理的故障風(fēng)險(xiǎn)。虛擬化平臺(tái)日常告警故障排除當(dāng)虛擬化平臺(tái)出現(xiàn)告警信息，通過以下步驟排除：(1)確定故障原因。查看已觸發(fā)的警報(bào)內(nèi)容，確定故障前操作是否是引發(fā)該故障的原因，對(duì)合規(guī)操作引起的告警，進(jìn)行消除CHA：ii琬要盅損機(jī)主機(jī)口花責(zé)通臼t區(qū)能任再與事件目上枳陽恥

6、肘身置文件含加性4ftms酷：已觸發(fā)的萼報(bào)定義名稱包畬”虛假機(jī)內(nèi)存候用，盾況vShieldVirtualMachineAlannv5hdEndpainESVMstatusvshieldEndpointHos煢瞰s虛限機(jī)需要整合1#在vSphersDistnbuted成狙匹酉?狀態(tài)虎拇機(jī)CPU使用情況v5phereDistributedSwitchMiRJ匹配狀態(tài)vSphereDistnbuted'AM中拿隹狀態(tài)生機(jī)詳可證版本與Valiter%Tver詳可v5phtreH虎擬機(jī)告慘錯(cuò)誤v£p屜mHA虎撰機(jī)監(jiān)隹操祚SphereM虛楹機(jī)苴彈切抽失政生機(jī)班勞凌制臺(tái)交損案vSpbtrc

7、HA主機(jī)1越戰(zhàn)不到vSphereHA主代理Sphere1正在遂行故障切摘uSpbeitbZ成障切描,怎不足定義范國(guó)描逑mt-監(jiān)悖成楸機(jī)內(nèi)存使用，胤兄的萼認(rèn)二"vCente.vShieldVirtualMadiineAlarm.Eeev.yCente.MgnitgrvShieldEndpointSVMstatus.vCente.MionltorShieldEndpointHo-stMatus.北行也，說發(fā)虛限機(jī)需要整合抬窈后將-1:nte監(jiān)控vSphereDistributedSivibch1監(jiān)控虛掇機(jī)匚網(wǎng)使用情況四-VCen'Le.監(jiān)修vSfShteDistributedSw

8、itchMjCtnte監(jiān)性丫牛11£m口話tributEdSwitchM”Cenze溫度wSpheraDi&iributed&h'tchVL.，-“監(jiān)控生機(jī)法可證版本是否不允詳vsohtrcW無法重置制班機(jī)時(shí)發(fā)<ente.丫殳帆障HA重量虛擺棚寸發(fā)出等.壯打陰.-Sphere+無法故障切換由期機(jī)監(jiān)控主機(jī)眼片控制白內(nèi)存交樵章-，vCtnti監(jiān)|空由vSbhrruH;報(bào)告的主機(jī):常工.YQntuS«rva長(zhǎng)fl寸間無沽連攫到，心田.在Sphere，J一應(yīng)府9帥沒有足白繆群集資置r口aua泉#Lili.R3王田田田田sla日(2)對(duì)提示硬件產(chǎn)生的告警

9、，應(yīng)查看硬件狀態(tài)信息，對(duì)確認(rèn)是硬件的問題按硬件維護(hù)預(yù)案處理a»；pftiSB與顯示所存?zhèn)鞲衅黠@示后有志批工息至郭曬他喜科狀花,本期生電也存與正常PC1民度©正常電壓e正常坦度®正常取加未知網(wǎng)決。1個(gè)善病1個(gè)臣也普吉gDiskDriveBay3ROME。譽(yù)U送粕狀況：AssertQOkkDriveSay3ROME推普舍當(dāng)It桃況：AssertUvmMeArutrd1PMnSA7T*出產(chǎn)M?：H:DFMCi*rt(3)對(duì)提示因資源不足或性能引發(fā)的告警，因查看近期性能圖表,找出原因，消除故障提示性篇圖表圖例項(xiàng)員擒剜里匯度單位最希ftm最低平均1使用情況平均侑%1.313

10、.960J110.141使用情況平均值%1.392.311.0311工1。211停用慌*MH1：用均值MHz221啾1&S2的二AH：任秀與串件髻振面后存甘翩制心旭砌W»子，.孑一戊電暗(4)對(duì)于無法判斷的故障，可導(dǎo)出系統(tǒng)日志發(fā)給廠家分析處理H辱出系虢日志|tpxd-pr&filervpjtd-pcafiler.log_J全部顯示顯示不一組才備行|日熬目SectionforVMv/areVirtualCeoterr：pid=12745rver5ion=5.L“build=79973，option=Rfilease/ActivatiionStats/Task/Actyv

11、im.vm.check.CQmpAtlbilityChecker.checkCompitibility/WnMostmnstnjdmeari0/ActivatinSats/Task/Adv='vim.vm.dieck.CampatibilityChecker.chedcCompatibilityjVmHostcorTjdBrjhm0_>/ArtivationSlats/Task/Aitv=、im.vm.dieck.CompahbilltyChecker.chtdcCompatiblliity'/VmHosterfitrmtor/numSamples4一>/Artlv

12、ationSats/Task/Artv='vim.vm,dieck.Campatibilityhecker.checkCompatibHi1y)VmHcKtconructo曲北由0一>/ActivationStats/Task/Actv-vim.vm.check.CompatibilityChecker.checkConipatibilityB/Vrn0口erdtioMFiraiBeOperati口甘阿0->/ActivationStats/Task/Artv-'vim.vm.check.CompalibiIityCheckeracheckComp4tibility

13、'/Vm?？趀raitionwFinafaBOpergtion/m&an0->/ActivationStats/Task/A-dtv-'vim.vm.check.Compatibilit>'Checker-ch已匚kCompatibility8/VmOperatkyK：HnafcperoriTm0->/ActivatinStats/Tfl$k/ACtv"'wim.vrri.check.CompstibilityChecker.checikCOmpatibilitv'/Vin0口電廠成2口:FinafaeOperagiV

14、ngSanRl,4>/ActivationStats/Task/Adv=，imuvE.dieck.CompatibilityChecker.checkCompatibility!/VmOpe：atiDn:Finafee3perati口0>/AftivatiOrtSlM5r«l</Aav«,vim,vm!checkXofflpstibilltyCheckerachedlcCompbilitY，/VmSlatec&ft5truaorwhitoksKSfingvtscO>/ActivationSatsfTask/Actv=vim.vm.dieck.

15、CompatibilityChecker.checkCompatibility'/VmStateconstructorwhichtakesanadstingvnymean0->/ActivatidnStats/Task/Actv«vim.m.dieck.Connpabbl11tyChecker.chedcCompatib11ity'/VmStMeconstructorwhfditaksansasangvnymin0->/ActivationSats/Taisk/Adv=Vim.vm.check.CompatibiIityChecker.cherikComp

16、stibiIity'/VmState-canstrudorwhichtakesanastingwrnumSamp->/ActivationSlats/Task/A<iv=*vim.vm.check.Compahbi11tyChecker.checkCompatib11ity'/VrnStateconstructarwhiditrikesaneastingvrrjitotal0->/ActivationSats/Task/Actv='vim.vm.check.CampatibiIityChecker.checkCompatibiIity'/VmS

17、atecdroonstoxtoi/m®0->/ActivationStats/Task/Actv=vim.vm.check.CampatibiIityChecker.checkConipatibiIity8mStateconstrudomeafi0->/ActivationStats/Task/Adv=Vim.vm.check.CompabbilityCheckerBcheckCgm口司tibility'/VmStatebwconstoud)00fminQ->/ActivationStats/Task/A-dtv-'vim.vm.check.Comp

18、atibilit'Checker-ch已匚kCompatibility8/VmSlate-匚0(犀co阻rudDiWjmSMndes2->/ActivatinStats/Taik/Actv"'wim.vrri.check.CompstibilityChecker.checikCOmpatibilitv'AmStoterowBEudg加3I0一、jfiir+iu/innQai-s/TawlffumrlirLnmnTilHliiiIibuFhP-rLprrhP-rlri"nmhiIiK/1A/mTAcHrhjwr/TnHinihTrn»,fli5、虛擬化平臺(tái)故障預(yù)防平臺(tái)管理初始狀態(tài)備份安裝配置好vcenter服務(wù)器軟件系統(tǒng)，經(jīng)測(cè)試能夠正常投入生產(chǎn)使用后，將數(shù)據(jù)庫進(jìn)行一次完成的備份，并記錄配置信息。備份文件本機(jī)一份，移動(dòng)存儲(chǔ)一份。虛擬機(jī)實(shí)時(shí)狀態(tài)備份平臺(tái)上的虛擬機(jī)包括vmware提供的其他功能性服務(wù)器，應(yīng)在測(cè)試通過后進(jìn)