計(jì)算機(jī)系統(tǒng)故障應(yīng)急預(yù)案一、目標(biāo)/范圍1、目標(biāo)與范圍在計(jì)算機(jī)信息管理系統(tǒng)面臨各種緊急情況（例如：數(shù)據(jù)庫系統(tǒng)錯誤、服務(wù)器操作系統(tǒng)錯誤等情況）時，把數(shù)據(jù)損失降到最低，并且把這些情況對醫(yī)療流程和醫(yī)療收費(fèi)業(yè)務(wù)的影響降到最低。背景描述=1\*GB2⑴關(guān)鍵業(yè)務(wù)中聯(lián)醫(yī)院信息系統(tǒng)：包括門診醫(yī)生站、住院醫(yī)生站、住院護(hù)士站、藥品流通系統(tǒng)、藥品發(fā)藥系統(tǒng)、門診掛號收費(fèi)、住院收費(fèi)管理一整套醫(yī)院主要業(yè)務(wù)的基礎(chǔ)系統(tǒng)。=2\*GB2⑵現(xiàn)有技術(shù)平臺數(shù)據(jù)庫系統(tǒng)：xx業(yè)務(wù)服務(wù)器OS：xx終端工作站OS：MicrosoftWindowsxx=3\*GB2⑶與其他系統(tǒng)的接口PACS系統(tǒng)接口：中聯(lián)PACS系統(tǒng)LIS系統(tǒng)接口：中聯(lián)LIS系統(tǒng)PASS系統(tǒng)接口：xxx二、啟動應(yīng)急方案的標(biāo)準(zhǔn)/引發(fā)時間保存數(shù)據(jù)庫數(shù)據(jù)文件的存儲設(shè)備出現(xiàn)故障，一定要停止系統(tǒng)的時候，啟動系統(tǒng)中心級應(yīng)急方案；數(shù)據(jù)庫系統(tǒng)發(fā)生問題使得關(guān)鍵業(yè)務(wù)出現(xiàn)問題，無法正常進(jìn)行的時候，啟動系統(tǒng)中心級應(yīng)急方案；網(wǎng)絡(luò)核心交換機(jī)出現(xiàn)問題，使關(guān)鍵業(yè)務(wù)無法正常進(jìn)行的時候，啟動網(wǎng)絡(luò)級應(yīng)急方案；為系統(tǒng)安全進(jìn)行數(shù)據(jù)庫冷備份的時候啟動數(shù)據(jù)庫級應(yīng)急方案；系統(tǒng)硬件設(shè)備軟件、固件進(jìn)行升級，導(dǎo)致必須停機(jī)的時候，啟動設(shè)備中心級應(yīng)急方案（此種情況一般包括進(jìn)行數(shù)據(jù)庫冷備份操作，即啟動數(shù)據(jù)庫級應(yīng)急方案）；三、應(yīng)急方案預(yù)期實(shí)施時間數(shù)據(jù)庫級應(yīng)急方案的預(yù)期實(shí)施時間為2個小時；設(shè)備中心級應(yīng)急方案的預(yù)期實(shí)施時間為4-6小時；系統(tǒng)中心級應(yīng)急方案的預(yù)期實(shí)施時間為最短6-8小時；網(wǎng)絡(luò)級應(yīng)急方案的預(yù)期實(shí)施時間至少6個小時；四、應(yīng)急方案的運(yùn)行、管理和實(shí)施1、組織機(jī)構(gòu)和職責(zé)=1\*GB2⑴應(yīng)急指揮中心醫(yī)院信息系統(tǒng)應(yīng)急處理領(lǐng)導(dǎo)小組組長由分管院領(lǐng)導(dǎo)擔(dān)任，副組長由信息中心主任擔(dān)任，成員由院辦、黨辦、醫(yī)務(wù)部、門診部、護(hù)理部、財(cái)務(wù)部、藥劑科、醫(yī)?？频炔块T負(fù)責(zé)人組成，應(yīng)急指揮中心設(shè)在住信息中心。應(yīng)急指揮中心主要職責(zé)是組織、指揮和協(xié)調(diào)人力和資源，使得HIS系統(tǒng)盡快恢復(fù)正常并且使得系統(tǒng)故障對醫(yī)療流程的影響降到最低。=2\*GB2⑵應(yīng)急/恢復(fù)小組按照應(yīng)急方案的流程盡快恢復(fù)關(guān)鍵業(yè)務(wù)的運(yùn)行，使得系統(tǒng)故障對醫(yī)療流程的影響降到最低。故障影響范圍負(fù)責(zé)人執(zhí)行人操作系統(tǒng)全院業(yè)務(wù)倪建禮xx數(shù)據(jù)庫核心網(wǎng)絡(luò)xxxx匯聚層或樓層網(wǎng)絡(luò)樓宇/層業(yè)務(wù)xxx數(shù)據(jù)庫部分科室業(yè)務(wù)xxPASS服務(wù)器/存儲設(shè)備部分科室業(yè)務(wù)Xxxx空調(diào)、UPS等硬件故障信息中心Xxxx2、啟動應(yīng)急工作模式的程序每隔4個月進(jìn)行一次數(shù)據(jù)庫冷備份，啟動數(shù)據(jù)庫應(yīng)急方案；業(yè)務(wù)系統(tǒng)運(yùn)行設(shè)備（EVA6400存儲設(shè)備、HPrx8640服務(wù)器）軟件、固件或配件升級需要啟動設(shè)備中心級應(yīng)急方案；運(yùn)行業(yè)務(wù)系統(tǒng)的設(shè)備或正在運(yùn)行業(yè)務(wù)的數(shù)據(jù)庫突然出錯并且使得應(yīng)用工作站運(yùn)行程序時無法登錄系統(tǒng)根本無法繼續(xù)進(jìn)行HIS系統(tǒng)正常業(yè)務(wù)操作時啟動系統(tǒng)中心級應(yīng)急方案；業(yè)務(wù)系統(tǒng)運(yùn)行設(shè)備（EVA6400存儲設(shè)備、HPrx8640服務(wù)器）以及HIS系統(tǒng)數(shù)據(jù)庫都呈現(xiàn)正常狀態(tài)，但是核心網(wǎng)絡(luò)設(shè)備（CISCO4506交換機(jī)）出現(xiàn)不正常狀態(tài)導(dǎo)致下面的工作站無法連接數(shù)據(jù)庫HIS系統(tǒng)正常業(yè)務(wù)無法繼續(xù)下去，這時啟動網(wǎng)絡(luò)級應(yīng)急方案；3、應(yīng)急工作的信息管理程序一切協(xié)調(diào)各科室運(yùn)作的指令由指揮中心或指揮中心授權(quán)人員傳達(dá)，所有傳達(dá)的協(xié)調(diào)指令應(yīng)該按照以下各式保存：指令發(fā)出時間發(fā)出指令人指令內(nèi)容接受指令人年月日分秒***********…………4、在應(yīng)急模式下運(yùn)行的程序=1\*ROMANI數(shù)據(jù)庫級應(yīng)急方案：停止數(shù)據(jù)庫，把存儲上的數(shù)據(jù)文件拷貝到主機(jī)或備份機(jī)的本地硬盤上，重新啟動數(shù)據(jù)庫。執(zhí)行步驟如下：=1\*GB2⑴通知各部門停止使用HIS系統(tǒng)；=2\*GB2⑵停止系統(tǒng)數(shù)據(jù)庫服務(wù)；=3\*GB2⑶把存儲上的數(shù)據(jù)文件拷貝到備機(jī)或主機(jī)的本地硬盤上；=4\*GB2⑷重新啟動數(shù)據(jù)庫；=5\*GB2⑸通知各部門開始恢復(fù)使用計(jì)算機(jī)系統(tǒng)；至此，數(shù)據(jù)庫級應(yīng)急方案結(jié)束。=2\*ROMANII設(shè)備中心級應(yīng)急方案：系統(tǒng)現(xiàn)在使用的是主機(jī)群集狀態(tài)，數(shù)據(jù)庫所有數(shù)據(jù)文件都放在存儲上，如果存儲設(shè)備固件或配件升級就需要長時間停止存儲的服務(wù)，此時就需要停止數(shù)據(jù)庫，把存儲上的數(shù)據(jù)文件拷貝到主機(jī)或備份機(jī)的本地硬盤上，并仿照數(shù)據(jù)文件在存儲上的路徑在主機(jī)上重建存儲文件夾，啟動數(shù)據(jù)庫，檢查系統(tǒng)業(yè)務(wù)是否正常，確認(rèn)系統(tǒng)業(yè)務(wù)可以正常使用后開始手工收費(fèi)，先為收費(fèi)劃價(jià)人員開啟一個劃價(jià)功能的終端，配置好一個新的tns連接，指到備份的pcserver上的數(shù)據(jù)庫。收費(fèi)劃價(jià)人員根據(jù)計(jì)算機(jī)中劃價(jià)的金額收款，手寫發(fā)票。如果升級過程出現(xiàn)異常導(dǎo)致升級時間超出6-8小時迎來業(yè)務(wù)高峰就可以考慮使用備機(jī)暫時使業(yè)務(wù)正常運(yùn)行，升級完成后再恢復(fù)正常。實(shí)施步驟如下：=1\*GB2⑴為收款和藥局新建連接到備用PCServer的tns連接字串；=2\*GB2⑵通知各部門停止使用HIS系統(tǒng)；=3\*GB2⑶停止系統(tǒng)數(shù)據(jù)庫服務(wù)；=4\*GB2⑷把存儲上的數(shù)據(jù)文件拷貝到備機(jī)或主機(jī)的本地硬盤上；=5\*GB2⑸把主機(jī)或備機(jī)的文件目錄更改成和原來數(shù)據(jù)庫文件存儲的路徑一致；=6\*GB2⑹在主機(jī)或備機(jī)上啟動數(shù)據(jù)庫，如果應(yīng)用可以正常使用，就繼續(xù)下一步，否則就找出原因，直到拷貝出來的數(shù)據(jù)文件可以正常使用；=7\*GB2⑺維修或維護(hù)存儲設(shè)備，做軟件和固件升級；=8\*GB2⑻如果在正常的預(yù)期時間范圍內(nèi)完成就可以啟動數(shù)據(jù)庫，應(yīng)用程序正常后通知各部門恢復(fù)使用HIS系統(tǒng)；通常情況下，到這一步系統(tǒng)正常使用后就完成工作了，但是一旦出現(xiàn)異常情況導(dǎo)致系統(tǒng)在升級過程拉長，面對即將到來的業(yè)務(wù)高峰，應(yīng)該采取以下步驟：=1\*GB2⑴把主機(jī)或備機(jī)的文件目錄更改成和原來數(shù)據(jù)庫文件存儲的路徑一致；=2\*GB2⑵在主機(jī)或備機(jī)上啟動數(shù)據(jù)庫，應(yīng)用程序就可以正常使用，然后繼續(xù)維修或維護(hù)存儲或做軟件和固件升級；=3\*GB2⑶當(dāng)維修或維護(hù)完成，設(shè)備正常后，選擇在夜間業(yè)務(wù)不忙的時候通知各部門在停止使用計(jì)算機(jī)系統(tǒng)；=4\*GB2⑷停止在主機(jī)或備機(jī)的數(shù)據(jù)庫服務(wù)；=5\*GB2⑸把主機(jī)或備機(jī)上的數(shù)據(jù)文件拷貝到存儲設(shè)備上；=6\*GB2⑹啟動數(shù)據(jù)庫服務(wù)，確認(rèn)系統(tǒng)正常后通知各科室恢復(fù)使用HIS系統(tǒng)；備用PCServerIP地址：123.123.123.3以上就是完整的設(shè)備中心級應(yīng)急方案。=3\*ROMANIII系統(tǒng)中心級應(yīng)急方案：把存儲上的數(shù)據(jù)文件拷貝到主機(jī)或備份機(jī)的本地硬盤上，啟動手工收費(fèi)程序，現(xiàn)在醫(yī)療收費(fèi)項(xiàng)目多、藥品項(xiàng)目也很多因此要給收費(fèi)劃價(jià)人員開啟一個劃價(jià)功能的終端，配置好一個新的tns連接，指向備份的pcserver上的數(shù)據(jù)庫。收費(fèi)劃價(jià)人員根據(jù)計(jì)算機(jī)中劃價(jià)的金額收款，手寫發(fā)票，直到數(shù)據(jù)庫恢復(fù)完成后再使用計(jì)算機(jī)系統(tǒng)。實(shí)施步驟如下：=1\*GB2⑴為收款和藥局新建連接到備用PCServer的tns連接字串；=2\*GB2⑵通知各部門停止使用HIS系統(tǒng)；=3\*GB2⑶讓藥局和收費(fèi)部門使用后來建立的連接字串進(jìn)行劃價(jià)，然后手工收費(fèi)；=4\*GB2⑷把存儲上的數(shù)據(jù)文件拷貝到備機(jī)或主機(jī)的本地硬盤上；=5\*GB2⑸對數(shù)據(jù)庫進(jìn)行恢復(fù)；=6\*GB2⑹數(shù)據(jù)庫恢復(fù)完成，應(yīng)用程序正常后，通知各部門開始使用HIS系統(tǒng)；=4\*ROMANIV網(wǎng)絡(luò)級應(yīng)急方案：系統(tǒng)核心交換機(jī)出現(xiàn)問題導(dǎo)致網(wǎng)絡(luò)癱瘓，所有或部分工作站無法連接數(shù)據(jù)庫。如果是樓層交換機(jī)有問題，可以用備用交換機(jī)替換下來，如果發(fā)生了兩臺核心交換機(jī)出了問題，就要進(jìn)行下面的緊急方案。實(shí)施步驟如下：=1\*GB2⑴把兩臺PCSever搬到一樓和二樓；=2\*GB2⑵更改好兩臺服務(wù)器各自的ip地址，為收款和藥局工作站配好新的tns連接字串；=3\*GB2⑶收款和藥局進(jìn)行手工劃價(jià)收費(fèi)；=4\*GB2⑷排除核心交換機(jī)問題后，恢復(fù)使用HIS系統(tǒng)；=5\*ROMANV環(huán)境級應(yīng)急方案：系統(tǒng)機(jī)房的空調(diào)、機(jī)房UPS、以及樓層交換機(jī)電源故障。1、系統(tǒng)機(jī)房空調(diào)現(xiàn)在分布狀況是主機(jī)房4臺，UPS室1臺。如果出現(xiàn)電源閃斷，會出現(xiàn)在機(jī)房所有空調(diào)停機(jī)，如果我院供電出現(xiàn)閃斷或因其它原因造成停電，相關(guān)部門必須通知計(jì)算機(jī)中心，計(jì)算機(jī)中心要安排值班人員，待供電恢復(fù)正常手工啟動空調(diào)。如果因空調(diào)故障或空調(diào)供電線路出現(xiàn)故障，可以打開機(jī)房的兩個大門，利環(huán)境溫度降溫。如果環(huán)境溫度較高，降溫效果不好，則要手工關(guān)閉小型機(jī)和存儲設(shè)備，待環(huán)境溫度正常后再重新開啟。2、樓層交換機(jī)故障新門診大樓的樓層交換機(jī)都配有UPS，如果UPS故障，可以先把交換機(jī)電源直接接