XX科技有限公司

XXX高性能計(jì)算網(wǎng)管中心建設(shè)項(xiàng)目

修訂記錄

文檔審核/審批

此文號(hào)需如下審核。

姓名職務(wù)/職稱簽名簽名曰期

文檔分發(fā)

此文號(hào)將分發(fā)至如下各人

姓名職務(wù)儆稱

目錄

1.介紹10

1.1項(xiàng)目背景10

1.2文檔目的11

1.2.1角色和職責(zé)11

1.3范圍和假設(shè)11

1.3.1范圍11

1.3.2假設(shè)11

1.3.3前提11

2.數(shù)據(jù)中心架構(gòu)介紹12

2.1構(gòu)建塊設(shè)計(jì)12

2.2物理架構(gòu)13

2.3邏輯架構(gòu)13

2.4設(shè)備用途與IP列表14

2.5軟件版本16

3.高可用場(chǎng)景18

4.高可用場(chǎng)景測(cè)試用例19

4.1測(cè)試環(huán)境說(shuō)明19

4.2高可用故障19

4.2.1單臺(tái)存儲(chǔ)故障錯(cuò)誤!未定義書簽。

4.2.2單臺(tái)云平臺(tái)計(jì)算節(jié)點(diǎn)故障錯(cuò)誤!未定義書簽。

4.2.3存儲(chǔ)雙活節(jié)點(diǎn)故障35

4.2.4單臺(tái)云平臺(tái)管理節(jié)點(diǎn)錯(cuò)誤!未定義書簽。

4.2.5服務(wù)器單塊硬盤故障錯(cuò)誤!未定義書簽。

4.2.6服務(wù)器單網(wǎng)卡故障錯(cuò)誤!未定義書簽。

4.2.7服務(wù)器單HBA卡故障錯(cuò)誤!未定義書簽。

4.2.8核心交換機(jī)單臺(tái)故障錯(cuò)誤!未定義書簽。

4.2.9防火墻單臺(tái)故障錯(cuò)誤!未定義書簽。

4.2.10存儲(chǔ)交換機(jī)單臺(tái)故障錯(cuò)誤!未定義書簽。

4.2.11存儲(chǔ)單控制器故障錯(cuò)誤!未定義書簽。

4.2.12VPN單臺(tái)故障錯(cuò)誤!未定義書簽。

4.2.13存儲(chǔ)單塊硬盤故障錯(cuò)誤!未定義書簽。

4.2.14存儲(chǔ)控制器級(jí)聯(lián)線故障錯(cuò)誤!未定義書簽。

4.2.15存儲(chǔ)磁盤柜Loop線故障錯(cuò)誤!未定義書簽。

4.2.16云平臺(tái)關(guān)鍵進(jìn)程錯(cuò)誤!未定義書簽。

4.2.17堡壘機(jī)故障錯(cuò)誤!未定義書簽。

4.2.18運(yùn)維平臺(tái)故障錯(cuò)誤!未定義書簽。

4.2.19應(yīng)急通道錯(cuò)誤!未定義書簽。

5.組件狀態(tài)驗(yàn)證步驟267

5.1機(jī)房狀態(tài)驗(yàn)證267

5.1.1命令行操作步驟267

5.1.2圖形界面操作步驟267

5.1.3人工操作步驟267

5.2全局網(wǎng)絡(luò)狀態(tài)驗(yàn)證267

5.2.1命令行操作步驟267

5.2.2圖形界面操作步驟267

5.2.3人工操作步驟268

5.3網(wǎng)絡(luò)設(shè)備狀態(tài)驗(yàn)證268

5.3.1命令行操作步驟268

5.3.2圖形界面操作步驟268

5.3.3人工操作步驟269

5.4存儲(chǔ)狀態(tài)驗(yàn)證269

5.5存儲(chǔ)網(wǎng)絡(luò)狀態(tài)驗(yàn)證269

5.6服務(wù)器狀態(tài)驗(yàn)證269

5.6.1命令行操作步驟269

5.6.2圖形界面操作步驟269

5.6.3人工操作步驟270

5.7云平臺(tái)狀態(tài)驗(yàn)證270

5.7.1命令行操作步驟270

5.7.2圖形界面操作步驟271

5.7.3人工操作步驟272

5.8云管理節(jié)點(diǎn)狀態(tài)驗(yàn)證273

5.8.1命令行操作步驟273

5.8.2圖形界面操作步驟273

5.8.3人工操作步驟273

5.9云計(jì)算節(jié)點(diǎn)狀態(tài)驗(yàn)證273

5.9.1命令行操作步驟273

5.9.2圖形界面操作步驟273

5.9.3人工操作步驟274

5.10VPN狀態(tài)驗(yàn)證274

5.10.1命令行操作步驟274

5.10.2圖形界面操作步驟274

5.10.3人工操作步驟275

5.11負(fù)載均衡狀態(tài)驗(yàn)證275

5.11.1命令行操作步驟275

5.11.2圖形界面操作步驟275

5.11.3人工操作步驟276

5.12態(tài)勢(shì)感知狀態(tài)驗(yàn)證276

5.12.1命令行操作步驟276

5.12.2圖形界面操作步驟276

5.12.3人工操作步驟277

5.13日志審計(jì)納管設(shè)備監(jiān)控狀態(tài)277

5.13.1命令行操作步驟277

5.13.2圖形界面操作步驟277

5.13.3人工操作步驟278

5.14監(jiān)控平臺(tái)納管設(shè)備監(jiān)控狀態(tài)278

5.14.1命令行操作步驟278

5.14.2圖形界面操作步驟278

5.14.3人工操作步驟279

6.組件啟動(dòng)步驟280

6.1機(jī)房供電啟動(dòng)步驟280

6.1.1命令行操作步驟280

6.1.2圖形界面操作步驟280

6.1.3人工操作步驟280

6.2全局網(wǎng)絡(luò)啟動(dòng)步驟281

6.2.1命令行操作步驟281

6.2.2圖形界面操作步驟281

6.2,3人工操作步驟281

6.3網(wǎng)絡(luò)設(shè)備啟動(dòng)步驟281

6.3.1命令行操作步驟281

6.3.2圖形界面操作步驟281

6.3.3人工操作步驟281

6.4存儲(chǔ)及存儲(chǔ)網(wǎng)絡(luò)啟動(dòng)步驟281

6.5云平臺(tái)啟動(dòng)步驟282

6.5.1命令行操作步驟282

6.5.2圖形界面操作步驟283

6.5.3人工操作步驟283

6.6對(duì)外網(wǎng)絡(luò)關(guān)閉及啟動(dòng)步驟284

6.6.1命令行操作步驟284

6.6.2圖形界面操作步驟284

6.6.3人工操作步驟284

6.7VPN啟動(dòng)步驟284

6.7.1命令行操作步驟284

6.7.2圖形界面操作步驟284

6.7.3人工操作步驟284

6.8負(fù)載均衡啟動(dòng)步驟284

6.8.1命令行操作步驟284

6.8.2圖形界面操作步驟285

6.8.3人工操作步驟285

6.9態(tài)勢(shì)感知狀態(tài)啟動(dòng)步驟285

6.9.1命令行操作步驟285

6.9.2圖形界面操作步驟285

6.9.3人工操作步驟285

7.組件日志收集方法286

7.1服務(wù)器硬件日志286

7.1.1命令行操作步驟286

7.1.2圖形界面操作步驟286

7.1.3人工操作步驟286

7.2存儲(chǔ)網(wǎng)絡(luò)交換機(jī)日志287

7.2.1命令行操作步驟287

7.2.2圖形界面操作步驟287

7.2.3人工操作步驟287

7.3云平臺(tái)日志288

7.3.1命令行操作步驟288

7.3.2圖形界面操作步驟288

7.3.3人工操作步驟289

7.4云節(jié)點(diǎn)日志289

7.4.1命令行操作步驟289

7.4.2圖形界面操作步驟289

7.4.3人工操作步驟289

7.5VPN日志290

7.5.1命令行操作步驟290

7.5.2圖形界面操作步驟290

7.5.3人工操作步驟290

7.6負(fù)載均衡日志291

7.6.1命令行操作步驟291

7.6.2圖形界面操作步驟291

7.6.3人工操作步驟291

7.7態(tài)勢(shì)感知日志291

7.7.1命令行操作步驟291

7.7.2圖形界面操作步驟292

7.7.3人工操作步驟293

1.介紹

1.1項(xiàng)目背景

惠民數(shù)科XXX統(tǒng)一管理服務(wù)平臺(tái)項(xiàng)目主要包括XXX統(tǒng)一權(quán)益共享應(yīng)用子系統(tǒng)、統(tǒng)一業(yè)務(wù)綜

合服務(wù)子系統(tǒng)以及統(tǒng)一客戶服務(wù)子系統(tǒng)，其中統(tǒng)一權(quán)益共享應(yīng)用系統(tǒng)部署在六里橋聯(lián)通政務(wù)

云上、業(yè)務(wù)綜合服務(wù)及客戶服務(wù)系統(tǒng)部署在騰訊公有云上，兩者通過(guò)專線互聯(lián)實(shí)現(xiàn)權(quán)益信息

的共享交換?？◤S系統(tǒng)、銀行系統(tǒng)通過(guò)專線連接金控大數(shù)據(jù)平臺(tái)，進(jìn)而實(shí)現(xiàn)同綜合服務(wù)系

統(tǒng)、權(quán)益共享應(yīng)用的互聯(lián)互通。

截至目前，服務(wù)XXX業(yè)務(wù)共連接機(jī)構(gòu)23家，其中銀行15家，卡商7家，加上聯(lián)通政

務(wù)云，專線計(jì)46條。隨著xxx發(fā)卡、用卡相關(guān)業(yè)務(wù)的開(kāi)展，并通過(guò)統(tǒng)一運(yùn)營(yíng)中心實(shí)現(xiàn)對(duì)xxx

的業(yè)務(wù)運(yùn)營(yíng)和商業(yè)化運(yùn)營(yíng)，實(shí)現(xiàn)業(yè)務(wù)的推廣、客戶的增長(zhǎng)，以及未來(lái)的商業(yè)化變現(xiàn)等數(shù)據(jù)類

應(yīng)用的開(kāi)展需要計(jì)算存儲(chǔ)網(wǎng)絡(luò)安全等相關(guān)資源的承載。由于業(yè)務(wù)發(fā)展的現(xiàn)實(shí)需要，原有亦莊

數(shù)據(jù)中心難以滿足新增的業(yè)務(wù)需求，迫切需要新建xxx高性能計(jì)算網(wǎng)管中心，進(jìn)行計(jì)算存儲(chǔ)資

源購(gòu)置，并配套匹配的網(wǎng)絡(luò)交換、安全防護(hù)、監(jiān)控運(yùn)維等系統(tǒng)，按照三級(jí)等保要求，進(jìn)行分

區(qū)化設(shè)計(jì)，劃分為核心區(qū)、外聯(lián)區(qū)、xxx專線接入?yún)^(qū)、安全區(qū)、管理區(qū)、互聯(lián)網(wǎng)區(qū)等區(qū)域，滿

足公司未來(lái)3-5年的業(yè)務(wù)增長(zhǎng)需求，提供一個(gè)統(tǒng)一、穩(wěn)定、可靠的金融科技基礎(chǔ)設(shè)施平臺(tái)。

1-2文檔目的

本文檔的目的是提供XXX高性能計(jì)算網(wǎng)管中心建設(shè)項(xiàng)目中關(guān)于數(shù)據(jù)中心的應(yīng)急響應(yīng)預(yù)案說(shuō)

明，用于指導(dǎo)緊急情況的處理。

1-2.1角色和職責(zé)

本文是由總集成商聯(lián)想根據(jù)涉及到的相關(guān)廠商和代理商的提供的應(yīng)急響應(yīng)方案，根據(jù)該

項(xiàng)目的實(shí)際情況，進(jìn)行合并編寫，并交付給北京惠民數(shù)字科技有限公司留存使用。

13范圍和假設(shè)

1.3.1范圍

本文的范圍包括XXX二期數(shù)據(jù)中心建設(shè)項(xiàng)目的相關(guān)內(nèi)容：

>XXX二期數(shù)據(jù)中心建設(shè)項(xiàng)目中所涉及到的軟、硬件；

>XXX二期數(shù)據(jù)中心建設(shè)項(xiàng)目總體設(shè)計(jì)中所涉及到的內(nèi)容。

后期客戶新增的設(shè)備、運(yùn)行應(yīng)用系統(tǒng)不在此文檔、即本項(xiàng)目范圍。

1.3.2假設(shè)

本文的假設(shè)：

>XXX二期數(shù)據(jù)中心建設(shè)項(xiàng)目所設(shè)計(jì)到的組件的規(guī)模、版本、等等相關(guān)配置均未發(fā)生

變化。

1.33前提

本文所涉及的個(gè)產(chǎn)品提交的應(yīng)急步驟均正確無(wú)誤。

2.數(shù)據(jù)中心架構(gòu)介紹

2.1構(gòu)建塊設(shè)計(jì)

本項(xiàng)目XXX高性能計(jì)算網(wǎng)管中心構(gòu)建塊設(shè)計(jì)如下:

民生卡高性能計(jì)算網(wǎng)管中心

安

H運(yùn)

網(wǎng)絡(luò)

全

堆

網(wǎng)

等

管

絡(luò)互聯(lián)網(wǎng)

外聯(lián)區(qū)

理

保

安接入?yún)^(qū)

全

數(shù)據(jù)中心

??核心區(qū)牌業(yè)務(wù)區(qū)

云平臺(tái)（接入網(wǎng)絡(luò)）

虛擬化資源池

業(yè)

運(yùn)

運(yùn)

維

罐

集

集

fat云

群

彝

?管

理

存儲(chǔ)網(wǎng)絡(luò)

包括如下設(shè)計(jì)構(gòu)建塊：

＞安全等保：包括等保建設(shè)依據(jù)、整體方案、網(wǎng)絡(luò)安全以及云安全資源池；

＞網(wǎng)絡(luò)構(gòu)建塊：包括邊界網(wǎng)絡(luò)如互聯(lián)網(wǎng)接入?yún)^(qū)、外聯(lián)區(qū)、XXX接入?yún)^(qū)，數(shù)據(jù)中心網(wǎng)絡(luò)

如核心區(qū)、數(shù)據(jù)業(yè)務(wù)區(qū)，數(shù)據(jù)業(yè)務(wù)區(qū)也是云平臺(tái)接入網(wǎng)絡(luò)；

＞云平臺(tái)構(gòu)建塊：包括計(jì)算資源、存儲(chǔ)資源、接入網(wǎng)絡(luò)，以及云平臺(tái)軟件（包含云管

理平臺(tái)），云安全資源池（在安全等保中設(shè)計(jì)）；

運(yùn)維管理：包括設(shè)備監(jiān)控、云管理（在云平臺(tái)中設(shè)計(jì)）。

2.2物理架構(gòu)

XXX高性能計(jì)算網(wǎng)管中心的物理架構(gòu)如下圖:

2.3邏輯架構(gòu)

XXX高性能計(jì)算網(wǎng)管中心邏輯架構(gòu)可分為應(yīng)用層、云平臺(tái)、運(yùn)維平臺(tái)、資源池、設(shè)備控

制層、基礎(chǔ)設(shè)施層，其中應(yīng)用對(duì)上支撐層、資源池為虛擬抽象層，架構(gòu)圖如下：

艮生卡立身大R■業(yè)務(wù)

2.4設(shè)備用途與IP列表

機(jī)柜設(shè)備編號(hào)用途說(shuō)明帶外IP備注

D1T2-EXT-FW-D1U26外聯(lián)區(qū)防火墻0

D1T2-EXT-SW-D1U20外聯(lián)區(qū)接入交換機(jī)1

D1T2-EXT-FW-D1U17外聯(lián)區(qū)防火墻2

D2T2-EXT-FW-D2U26外聯(lián)區(qū)防火墻0

D2T2-EXT-SW-D2U20外聯(lián)區(qū)接入交換機(jī)1

D2T2-EXT-FW-D2U17外聯(lián)區(qū)防火墻2

D1T2-WAN-FW-D1U36接入?yún)^(qū)防火墻10

D1T2-WAN-SW-D1U33接入?yún)^(qū)接入交換機(jī)11

D1T2-WAN-FW-D1U30接入?yún)^(qū)防火墻12

D2T2-WAN-FW-D2U36接入?yún)^(qū)防火墻20

D2T2-WAN-SW-D2U33接入?yún)^(qū)接入交換機(jī)21

D2T2-WAN-FW-D2U30接入?yún)^(qū)防火墻22

D3T2-DMZ-SW-D3U38互聯(lián)網(wǎng)區(qū)接入交換機(jī)0

D3T2-DMZ-LB-D3U35互聯(lián)網(wǎng)區(qū)負(fù)載均衡172.18.23531

D3T2-DMZ-FW-D3U33互聯(lián)網(wǎng)區(qū)防火墻2

D3T2-DMZ-WAF-D3U30互聯(lián)網(wǎng)區(qū)WAF3

D3T2-DMZ-VPN-D3U28互聯(lián)網(wǎng)區(qū)VPN172.18.23534

D3T2-DMZ-SW-D3U26互聯(lián)網(wǎng)區(qū)接入交換機(jī)172.18.23535

D4T2-DMZ-SW-D4U38互聯(lián)網(wǎng)區(qū)接入交換機(jī)0

D4T2-DMZ-LB-D4U35互聯(lián)網(wǎng)區(qū)負(fù)載均衡1

D4T2-DMZ-FW-D4U33互聯(lián)網(wǎng)區(qū)防火墻2

D4T2-DMZ-WAF-D4U30互聯(lián)網(wǎng)區(qū)WAF3

D4T2-DMZ-VPN-D4U28互聯(lián)網(wǎng)區(qū)VPN4

D4T2-DMZ-SW-D4U26互聯(lián)網(wǎng)區(qū)接入交換機(jī)5

D3T2-CCR-CR-D3U03核心路由器/2

D3T2-CCR-FW-D3U14核心防火墻01

D4T2-CCR-FW-D4U14核心防火墻02

D4T2-CCR-CR-D4U03核心路由器172.18.2353/4

D3T2-CLD-SW-D3U24安全池接入交換機(jī)30

D3T2-CLD-LA-D3U19日志審計(jì)31

D3T2-CLD-VS-D3U17漏洞掃描32

D4T2-CLD-SW-D4U24安全池接入交換機(jī)40

D4T2-CLD-SA-D4U19態(tài)勢(shì)感知41

D4T2-CLD-DA-D4U17數(shù)據(jù)庫(kù)審計(jì)42

D5T2-CLD-SW-D5U38云資源池接入交換機(jī)40

D5T2-CLD-SW-D5U36云資源池接入交換機(jī)41

D6T2-CLD-SW-D6U38云資源池接入交換機(jī)50

D6T2-CLD-SW-D6U36云資源池接入交換機(jī)51

D7T2-CLD-SW-D7U38云資源池接入交換機(jī)60

D7T2-CLD-SW-D7U36云資源池接入交換機(jī)61

D7T2-CLD-SW-D7U27云資源池接入交換機(jī)33

D8T2-CLD-SW-D8U38云資源池接入交換機(jī)70

D8T2-CLD-SW-D8U36云資源池接入交換機(jī)71

D8T2-CLD-SW-D8U29云資源池接入交換機(jī)44

D8T2-CLD-SW-D8U27云資源池接入交換機(jī)43

D9T2-CLD-SW-D9U38云資源池接入交換機(jī)80

D9T2-CLD-SW-D9U36云資源池接入交換機(jī)81

D9T2-CLD-SW-D9U27云資源池接入交換機(jī)34

DIOT2-CLD-SW-DAU38云資源池接入交換機(jī)90

DIOT2-CLD-SW-DAU36云資源池接入交換機(jī)91

DIOT2-CLD-SW-DAU29云資源池接入交換機(jī)46

DIOT2-CLD-SW-DAU27云資源池接入交換機(jī)45

D5T2-CLD-CMC-D5UO3云平臺(tái)管理節(jié)點(diǎn)0

D5T2-CLD-CCN-D5U06云平臺(tái)計(jì)算節(jié)點(diǎn)1

D5T2-CLD-CCN-D5U09云平臺(tái)計(jì)算節(jié)點(diǎn)2

D5T2-CLD-CCN-D5U12云平臺(tái)計(jì)算節(jié)點(diǎn)3

D5T2-CLD-CCN-D5U15云平臺(tái)計(jì)算節(jié)點(diǎn)4

D5T2-CLD-CCN-D5U18云平臺(tái)計(jì)算節(jié)點(diǎn)5

D5T2-CLD-CCN-D5U21云平臺(tái)計(jì)算節(jié)點(diǎn)6

D5T2-CLD-CCN-D5U24云平臺(tái)計(jì)算節(jié)點(diǎn)7

D5T2-CLD-DB-D5U27數(shù)據(jù)庫(kù)節(jié)點(diǎn)8

D6T2-CLD-CMN-D6U03云平臺(tái)運(yùn)維節(jié)點(diǎn)0

D6T2-CLD-CCN-D6U06云平臺(tái)計(jì)算節(jié)點(diǎn)1

D6T2-CLD-CCN-D6U09云平臺(tái)計(jì)算節(jié)點(diǎn)2

D6T2-CLD-CCN-D6U12云平臺(tái)計(jì)算節(jié)點(diǎn)3

D6T2-CLD-CCN-D6U15云平臺(tái)計(jì)算節(jié)點(diǎn)4

D6T2-CLD-CCN-D6U18云平臺(tái)計(jì)算節(jié)點(diǎn)5

D6T2-CLD-CCN-D6U21云平臺(tái)計(jì)算節(jié)點(diǎn)6

D6T2-CLD-CCN-D6U24云平臺(tái)計(jì)算節(jié)點(diǎn)7

D6T2-CLD-DB-D6U27數(shù)據(jù)庫(kù)節(jié)點(diǎn)8

D7T2-CLD-CMC-D7U03云平臺(tái)管理節(jié)點(diǎn)0

D7T2-CLD-CCN-D7U06云平臺(tái)計(jì)算節(jié)點(diǎn)1

D7T2-CLD-CCN-D7U09云平臺(tái)計(jì)算節(jié)點(diǎn)2

D7T2-CLD-CCN-D7U12云平臺(tái)計(jì)算節(jié)點(diǎn)3

D7T2-CLD-CCN-D7U15云平臺(tái)計(jì)算節(jié)點(diǎn)4

D7T2-CLD-CCN-D7U18云平臺(tái)計(jì)算節(jié)點(diǎn)5

D7T2-CLD-CCN-D7U21云平臺(tái)計(jì)算節(jié)點(diǎn)6

D7T2-CLD-CCN-D7U24云平臺(tái)計(jì)算節(jié)點(diǎn)7

D8T2-CLD-CMN-D8U03云平臺(tái)運(yùn)維節(jié)點(diǎn)0

D8T2-CLD-CCN-D8U06云平臺(tái)計(jì)算節(jié)點(diǎn)1

D8T2-CLD-CCN-D8U09云平臺(tái)計(jì)算節(jié)點(diǎn)2

D8T2-CLD-CCN-D8U12云平臺(tái)計(jì)算節(jié)點(diǎn)3

D8T2-CLD-CCN-D8U15云平臺(tái)計(jì)算節(jié)點(diǎn)4

D8T2-CLD-CCN-D8U18云平臺(tái)計(jì)算節(jié)點(diǎn)172.18236.85

D8T2-CLD-CCN-D8U21云平臺(tái)計(jì)算節(jié)點(diǎn)6

D8T2-CLD-CCN-D8U24云平臺(tái)計(jì)算節(jié)點(diǎn)7

D9T2-CLD-CMC-D9U03云平臺(tái)管理節(jié)點(diǎn)0

D9T2-CLD-CCN-D9U06云平臺(tái)計(jì)算節(jié)點(diǎn)1

D9T2-CLD-CCN-D9U09云平臺(tái)計(jì)算節(jié)點(diǎn)2

D9T2-CLD-CCN-D9U12云平臺(tái)計(jì)算節(jié)點(diǎn)3

D9T2-CLD-CCN-D9U15云平臺(tái)計(jì)算節(jié)點(diǎn)4

D9T2-CLD-CCN-D9U18云平臺(tái)計(jì)算節(jié)點(diǎn)5

D9T2-CLD-CCN-D9U21云平臺(tái)計(jì)算節(jié)點(diǎn)6

D9T2-CLD-CCN-D9U24云平臺(tái)計(jì)算節(jié)點(diǎn)7

DIDT2-CLD-CMN-DAU03云平臺(tái)運(yùn)維節(jié)點(diǎn)00

DIDT2-CLD-CCN-DAU06云平臺(tái)計(jì)算節(jié)點(diǎn)01

DIOT2-CLD-CCN-DAU09云平臺(tái)計(jì)算節(jié)點(diǎn)02

DIOT2-CLD-CCN-DAU12云平臺(tái)計(jì)算節(jié)點(diǎn)03

DIOT2-CLD-CCN-DAU15云平臺(tái)計(jì)算節(jié)點(diǎn)04

DIOT2-CLD-CCN-DAU18云平臺(tái)計(jì)算節(jié)點(diǎn)05

DIOT2-CLD-CCN-DAU21云平臺(tái)計(jì)算節(jié)點(diǎn)06

DIOT2-CLD-CCN-DAU24云平臺(tái)計(jì)算節(jié)點(diǎn)07

DIT2-CLD-CST-D1U03存儲(chǔ)/2/3/4

DIT2-CLD-CSW-D1U12存儲(chǔ)交換機(jī)1

DIT2-CLD-CSW-D1U14存儲(chǔ)交換機(jī)2

D2T2-CLD-CST-D2UO3存儲(chǔ)/6/7/8

D2T2-CLD-CSW-D2U12存儲(chǔ)交換機(jī)1

D2T2-CLD-CSW-D2U14存儲(chǔ)交換機(jī)2

2.5軟件版本

基礎(chǔ)平臺(tái)以騰訊云為主，采用OpenStackM版，組件版本如下:

組件名稱版本號(hào)備注

CentOS7.6.1810操作系統(tǒng)

Docker1.12.6容器技術(shù)

Keystone2016.6認(rèn)證服務(wù)

ceilometer2016.6監(jiān)控服務(wù)

Cinder2016.6塊存儲(chǔ)服務(wù)

Glance2016.6鏡像服務(wù)

Influxdb0.13.0監(jiān)控?cái)?shù)據(jù)庫(kù)

Kapacitor0.13.1數(shù)據(jù)處理/異常探測(cè)

memcache1.4.33緩存服務(wù)

Neutron2016.6網(wǎng)絡(luò)服務(wù)

組件名稱版本號(hào)備注

Nova2016.6計(jì)算服務(wù)

Rabbitmq3.6.5消息隊(duì)列

KolamitakaOpenStack組件容器化

Nomad0.5.2集群管理軟件

Consul1.2.0服務(wù)發(fā)現(xiàn)軟件

Ansible自動(dòng)化運(yùn)維工具

openvswitch2.9.0網(wǎng)絡(luò)虛擬化軟件

qemu/kvm2.12.0虛擬化軟件

Libvirt4.5.0虛擬化管理工具

elasticsearch2.4.4搜索服務(wù)

Heka0.10.0日志收集服務(wù)

Telegraf48988bc數(shù)據(jù)采集工具

3.高可用場(chǎng)景

從設(shè)計(jì)到建設(shè)實(shí)施，整個(gè)數(shù)據(jù)中心均采用高可用冗余的方式，相比于傳統(tǒng)數(shù)據(jù)中，發(fā)生

發(fā)非影響故障時(shí)，都無(wú)須人工干預(yù)，依靠架構(gòu)本身、云平臺(tái)機(jī)制自動(dòng)處理，對(duì)應(yīng)用無(wú)影響；

此類故障，在驗(yàn)收時(shí)進(jìn)行測(cè)試，驗(yàn)證高可用機(jī)制完備性，并進(jìn)行定期的演練，驗(yàn)證高可用機(jī)

制的穩(wěn)定性，測(cè)試或演練步驟是否合理，非影響故障類型包括：

1.單臺(tái)設(shè)備（非存儲(chǔ)）故障

2.連線故障

3.存儲(chǔ)設(shè)備單組件故障

4.單路電源故障

5.單路對(duì)外鏈路故障

6.云管平臺(tái)故障

7.云平臺(tái)關(guān)鍵進(jìn)程故障

8.堡壘機(jī)故障

9.運(yùn)維平臺(tái)故障

除第8,9個(gè)故障外，其余故障可以通過(guò)運(yùn)維平臺(tái)發(fā)現(xiàn)此類故障，并進(jìn)行相關(guān)的恢復(fù)處

理；若發(fā)現(xiàn)運(yùn)維平臺(tái)無(wú)法登錄使用：

1.首先判斷是否機(jī)房類全局故障，可以通過(guò)電話進(jìn)行確認(rèn)；

2.若不是機(jī)房類故障，通過(guò)應(yīng)急通道，判斷是否是堡壘機(jī)故障還是網(wǎng)絡(luò)類全局故隙；

3.若不是網(wǎng)絡(luò)類全局故障，判斷為堡壘機(jī)故障，則聯(lián)系堡壘機(jī)廠商，進(jìn)行修復(fù)；

4.若不是堡壘機(jī)故障，則聯(lián)系運(yùn)維廠商，進(jìn)行修復(fù)。

4.高可用場(chǎng)景測(cè)試用例

根據(jù)故障應(yīng)用測(cè)試場(chǎng)景，編寫應(yīng)用演練測(cè)試用例，應(yīng)用演練需要定期進(jìn)行，并根據(jù)演練

結(jié)果更新用例步驟，以達(dá)到優(yōu)化的效果。

4.1測(cè)試環(huán)境說(shuō)明

運(yùn)維平臺(tái)的采用高可用的部署架構(gòu)，前端訪問(wèn)通過(guò)一組nginx,分別部署在兩個(gè)存儲(chǔ)上，

可以用于硬件演練測(cè)試，通過(guò)是否能夠訪問(wèn)運(yùn)維平臺(tái)，確認(rèn)是否對(duì)環(huán)境造成影響。

4.2高可用故障

現(xiàn)有的云數(shù)據(jù)中心采用全棧式的高可用，從設(shè)計(jì)理念上規(guī)避單點(diǎn)故障、以及故障處理的

操作步驟，增強(qiáng)了業(yè)務(wù)連續(xù)性。

但這些高可用架構(gòu)，需要進(jìn)行測(cè)試驗(yàn)證，保證規(guī)劃與實(shí)施工藝一致；同時(shí)，也需要定期

進(jìn)行演練，驗(yàn)證高可用設(shè)計(jì)的延續(xù)性，并優(yōu)化處理步驟。

4.2.1云平臺(tái)軟件高可用測(cè)試

云平臺(tái)關(guān)健進(jìn)程(neutron-server)測(cè)試

云平臺(tái)關(guān)9進(jìn)程(r>eutron-se(ver>洲試

C-001-1

序決作名續(xù)作實(shí)際結(jié)

操作對(duì)象讖作步磔預(yù)用培果利長(zhǎng)開(kāi)始時(shí)謂錯(cuò)京時(shí)，處作人檢疊人備注

號(hào)陳方式*

環(huán)境備潘足頓

1?無(wú)無(wú)無(wú)

找到

登錄云計(jì)11底層節(jié)點(diǎn)n(xte*1

neutron-

172.181820,執(zhí)行命令

RUMneutron-serverserverfi2022/9/72022/9/7XXX.

2今令nomadstatusneutron-server|grepNode1mmXXX

作對(duì)象迸程節(jié)點(diǎn)程所在第期10:151016XXX

-A6nomadnode-status|

?fl

grepd8c8dbd1

node-18

登錄neutron-server進(jìn)程節(jié)點(diǎn)所在節(jié)點(diǎn)

k謂關(guān)也neutron-servern(xfe-18執(zhí)行命令道程成功滿足預(yù)2022M2022所XXX,

3的令I(lǐng)minXXX

VM進(jìn)程節(jié)點(diǎn)ps-?f|grepneutroc-$erve?lgrep-vgrep|被kill10:1610:17XQC

awk{print$2)'|xargskill-9

neutron-

登錄neutron-server進(jìn)程節(jié)點(diǎn)所在節(jié)怠

USMneutron-serverserver在滿足頸2022陽(yáng)72022/9/7KXX,

4node-18.執(zhí)行命令1minXXX

認(rèn)進(jìn)程節(jié)點(diǎn)本節(jié)點(diǎn)上n10:1710:18XXX

ps-efIgrepneutron-servef

自動(dòng)重啟

9染neutron-server進(jìn)料節(jié)點(diǎn)兩在節(jié)UI

日志記neutron-server服務(wù)日毒滿足頸XXX.

5畬令node-18.執(zhí)行畬令XXX

錄進(jìn)程節(jié)息5E?a期XXX

tailfA/ar/log^neutrorVneutron-serverlag

無(wú)我包.

?務(wù)找業(yè)務(wù)虛機(jī)：在入試期間滿足福XXX,

6命令系統(tǒng)運(yùn)行XXX

i￡172.18.17.65ping172.1817.65期XXX

正常

己在

環(huán)境恢node-18XX3C,

7/t己自動(dòng)■自.恢箕/XXX

ft上自玲■XXX

自

rootfnoderon-Mrver

X，”…3uX.m

1M971M14?S4P<4?/rwi/*?vtrwi<o?f?n”?nu

.?E?8-c?Rfig-fir/vU/nwtrvn/cvn**FtD

216%M；14.2S/vtr/ttla/nevirtnsarvtrfSA/MUtraB?3f-CMfMh”/ft

?nfUi..ceRfMflir/etc/nMitm/conftt/MMtroB-lbMtv2<aQ?<t

110，00；U91rw*?wrwrT3,W./Xc/aMMtroMawvt—<8?*-c?*<&?**!1?/H

cent.IAA--c?R*l^*41r/??<2n?MtroA7cenf.4/MMtroa-lbM?r2-e9??t

71SM>>70S?pe4，M;UtX""QIAMwtrsr-r*tll?,0

cent.Mc?nf&g*<ir/ttc/nwtrwi/canf^nmtroB-lbMtr^avmt

2163900.U30fMr/bm/pytM2r?ir/DUfn?utren*sefwr.?ccafio*niefetc/Mutron/Mutra?.coaf??cgf“?，n?/tt

,€?nf.1McoRfio-Cir“WMvtreA/C”…troalbM“2?oe?Q

/rfc/aMwtrwK/?Mtr.C8?.一(■■“???a'c

-JiI

IJ79S?p?4T8.12.”/wsr/?WyV>wZ/?1r/0U^Wtr?ni?rvtr.-c^nfftefile/tWwwtrR*??tP.45f??《…”?門"/ft

confIM??(cnfig.4ir/etc/nnitron/confWftrot?I6??■?】

21“2序，eS4^?4?00；12：XZ??r/bU79ytMii2/?Sr/bU/，?ut/eA??，"r/?〃4t■一3f

<?nf1A1一(8，卬4"，?"/cwtr?f^C8，"Pt"?H”】??《??，

33r-JIM)M:l>:44/??r/bi*/??vtrww?rwr?>c??ftf*F|1?--CO?*>f-f!<?/9t

U.cenf.Mctnfr”“/n?rrWQE."FKS

21644esepMr90a29fwr/BUVpFtMPZ/??rrt>Xafr??vtr?nierwr.?c?efiofilefetc/MwtrMir?c?tr?iconf?cot”mtret

€?nfUIr?if&o-eir/?tc/RMitrvA/rvif-QoI

，1“S60:11:3?/??r/toin/pytMn2/?tr/blA/n?utr?R-a?r*?ry，A.?，Al?/?fcyaevt.coof

<ir/etc/nwtr??/c?*f?/ZMtB?tbM"2?中?，

NC8.F

roottnoda*IB?]?p??3|grepM?tron???r”r|@repfgrap|M(pryitS2)|JUifQikill?9

rMtMiMeIB-)1ps?，|MwtrtRMrvcr

KMMSU1M1113：2T?00WM八??x?to<f3)?M1!--HU-aUtf-B454H4<Jbtr?.-??r??

…Mmil””9M)1u；27TWWW/E/?WyV?WlZ4|r/tHAMwtr?nstrver??一，“””V

“\"MI,■〃■!?_<?nf?皿?cer/?"/CMrsn/，6f"MW?I-?a^KM

[ro(rt*icde10tailf/rar/1neutron/neviron-serverlog

^odellrwntron-wr^flHTMl：DHCPX2236M：43：5?

iodi.18rwutrofl.Hnwr|16TW)：Ztt2-W-?12：?34M3IKIUFOMutrM.vsgi[req?65?)eM?ba59?<WeM16?95dB20f6cE17fN51t464C丸M”7?W5U>28

%f243?MUS恂HS9MW--]：'；?任，.」；：3M?'>>M.l/wtwodcs)mhMc2?M0-Uh4Hb4ScS.

KTw/i.rmm<.wiu

，他HEE”E416M|;M22"XU;$S:34,M(IMI呻“?優(yōu)UM&1ctH4?M$l?4$4c5321H?27^2Sb2I

153aMfMMMIUfl7f5)M27--11218%4：,J2