15I 2 3 3 4 4 5 5 6 7 8 8 8 8 9 本文件按照GB/T1.1—2020《標(biāo)準(zhǔn)化工作導(dǎo)則第1部分：標(biāo)準(zhǔn)化文件的結(jié)構(gòu)和起草規(guī)則》的規(guī)定請注意本文件的某些內(nèi)容可能涉及專利。本文件的發(fā)布機(jī)構(gòu)不承擔(dān)識別專利的責(zé)任。內(nèi)蒙古匯鑫軟件股份有限公司、內(nèi)蒙古慧瑞系1IT運(yùn)維大模型能力要求本文件規(guī)定了IT運(yùn)維大模型構(gòu)建、IT運(yùn)維大模型能GB/T43208.1信息技術(shù)服務(wù)智能運(yùn)維第1部分：通用GB/T44109信息技術(shù)大數(shù)據(jù)數(shù)據(jù)治理GB/T25069、GB/T43208.1界定的以及下列術(shù)語和定義適用于2ITIT運(yùn)維大模型場景實(shí)現(xiàn)IT運(yùn)維大模型能力與評估數(shù)據(jù)采集數(shù)據(jù)加工數(shù)據(jù)存儲質(zhì)量管理數(shù)據(jù)服務(wù)數(shù)據(jù)安全可視化IT運(yùn)維大模型3IT運(yùn)維大模型構(gòu)建是針對IT運(yùn)維業(yè)務(wù)中構(gòu)建大模型應(yīng)用所需的基礎(chǔ)步驟，是對于構(gòu)建IT運(yùn)維大模IT運(yùn)維大模型能力與評估是針對IT運(yùn)維大模型應(yīng)該具備的能力與評估指標(biāo)的說明，定義了對IT運(yùn)安全可信的分析決策能力，含接入管控、安全管控、過c)網(wǎng)絡(luò)通信：根據(jù)模型參數(shù)量級和訓(xùn)練數(shù)據(jù)量，采用的b)微調(diào)算法選擇：結(jié)合算力和時(shí)間要求，選擇微調(diào)時(shí)采用的算法。d)數(shù)據(jù)格式：評估文本數(shù)據(jù)、音頻數(shù)據(jù)或其他格式類型4工程層評估要根據(jù)需求目標(biāo)和構(gòu)建成本對配套工具或第三方平臺進(jìn)行選擇。評估內(nèi)容包括但不限b)數(shù)據(jù)標(biāo)注平臺：評估是否提供數(shù)據(jù)標(biāo)注作業(yè)、場景數(shù)據(jù)挖掘等數(shù)據(jù)服務(wù)；e)部署兼容性：評估部署平臺與IT運(yùn)維大模型的兼容性，以及升級方式；模型選擇是根據(jù)IT運(yùn)維大模型的應(yīng)用領(lǐng)域，確定選擇的模型b)數(shù)據(jù)標(biāo)注：對文本、圖像、視頻、音頻類非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行標(biāo)注；c)數(shù)據(jù)集劃分：將數(shù)據(jù)集劃分為5時(shí)間、資源消耗和穩(wěn)定性。根據(jù)評估結(jié)果，判聯(lián)調(diào)則確保模型輸出能夠被運(yùn)維系統(tǒng)正確理解和處理，同時(shí)保證系統(tǒng)的其他部分能夠按照預(yù)期與模型況、收集用戶反饋、處理模型漂移問題以及按需進(jìn)行模型6e)數(shù)據(jù)存儲：按照數(shù)據(jù)存儲標(biāo)準(zhǔn)在計(jì)算機(jī)的存儲裝置或外圍的存儲設(shè)備中存儲海量離線與實(shí)時(shí)數(shù)據(jù)質(zhì)量問題，進(jìn)行識別、度量、監(jiān)控、預(yù)警和處置，提高數(shù)據(jù)質(zhì)量g)數(shù)據(jù)服務(wù)：提供運(yùn)維數(shù)據(jù)消費(fèi)接口1)數(shù)據(jù)一致性：確保數(shù)據(jù)在各個(gè)系統(tǒng)和3)元數(shù)據(jù)覆蓋率：衡量元數(shù)據(jù)管理完整性的指標(biāo)，即已有元數(shù)據(jù)覆蓋的數(shù)據(jù)中提取出對預(yù)測和分類任務(wù)最有用的信息。71)數(shù)據(jù)覆蓋率：通過查詢和篩選手段覆蓋的數(shù)據(jù)種IT運(yùn)維大模型在自動控制能力方面主要包括接入管控、安全2)服務(wù)響應(yīng)時(shí)間：用戶發(fā)起服務(wù)請求到系統(tǒng)做出響應(yīng)的85)合規(guī)性檢查通過率：自動化IT運(yùn)維任務(wù)和用戶操作在符合運(yùn)維政策和監(jiān)管標(biāo)準(zhǔn)方面的合6)流程編排效率：通過工具自動化編排運(yùn)維活動的效率，通常指完成特定任9)自動化執(zhí)行覆蓋率：通過自動化技術(shù)執(zhí)行的運(yùn)維操作占所有運(yùn)10)執(zhí)行結(jié)果驗(yàn)證準(zhǔn)確率：自動化執(zhí)行后，對執(zhí)行結(jié)果進(jìn)行驗(yàn)證的準(zhǔn)確率。b)評估場景實(shí)現(xiàn)的可行性，包括成本c)識別場景實(shí)現(xiàn)的共性需求，優(yōu)先采用平臺化建設(shè)思路，避免功能重復(fù)建設(shè)；d)評估相關(guān)場景對現(xiàn)狀的影響，如組織、過程、相關(guān)方等，并制定風(fēng)險(xiǎn)應(yīng)對措施；g)重點(diǎn)評估安全要求，考慮數(shù)據(jù)訪問權(quán)限控制、信息保密、模i)基于數(shù)據(jù)管理、分析決策、自動控制能力，確定待建設(shè)的能力項(xiàng)和待提升的能力要素；j)設(shè)立可評估或可量化的指標(biāo)，如故障k)根據(jù)場景分析的結(jié)論，形成場景構(gòu)建方案和計(jì)劃。a)按照場景構(gòu)建方案和計(jì)劃，研發(fā)、優(yōu)化、建設(shè)相關(guān)能力項(xiàng)；c)確保場景構(gòu)建過程可追溯，交付結(jié)果可計(jì)量或可評估；e)對于涉及自動化和批量操作的場景，增加必要的約束措施，設(shè)計(jì)安全控制點(diǎn)和回退功能；g)將規(guī)則知識、專家經(jīng)驗(yàn)、模型訓(xùn)練結(jié)果等固化到信息系統(tǒng)中；i)場景構(gòu)建需要包含IT運(yùn)維大模型微調(diào)與優(yōu)化部署，滿足IT運(yùn)維大模型相關(guān)能力指標(biāo)要求。(常見IT運(yùn)維大模型場景說明參見附錄A)9場景交付是場景構(gòu)建完成后進(jìn)行實(shí)施交付及配套活動，應(yīng)遵守以下要a)按既定計(jì)劃完成場景實(shí)施交付，交付物包括但不限于交付方案、使用手冊、應(yīng)急預(yù)案b)開展培訓(xùn)工作，如場景的使用、運(yùn)維、應(yīng)急處理等；a)建立評估機(jī)制，組織相關(guān)方開展效果評估；b)評估已建場景是否滿足既定目標(biāo)，對d)評估已建場景是否滿足運(yùn)維相關(guān)安全要e)制定改進(jìn)措施和提升計(jì)劃，并持續(xù)改進(jìn)、快速迭在IT運(yùn)維大模型場景實(shí)現(xiàn)過程中,宜從實(shí)際出發(fā),立足當(dāng)前運(yùn)維痛點(diǎn),從場景切入,由點(diǎn)到面進(jìn)行IT運(yùn)維大模型體系建設(shè),并通過設(shè)立評價(jià)指標(biāo)對實(shí)施效果進(jìn)行測量,確保已建場景滿足既定運(yùn)維目標(biāo)并有效體現(xiàn)大模型特征。本附錄選取和描述了常見IT運(yùn)維大模型場景,說明應(yīng)用系統(tǒng)異該場景通過超文本傳輸協(xié)議(HTTP)請求、傳輸控制協(xié)議/網(wǎng)際協(xié)議(TCP/I請求、應(yīng)用系統(tǒng)應(yīng)用程序編程接口(API)請求等不同形式,對應(yīng)用系統(tǒng)運(yùn)應(yīng)用系統(tǒng)異常撥測率=撥測發(fā)現(xiàn)異常對象該場景通過自動化方式對系統(tǒng)、中間快速處置率=處置對等相同原因觸發(fā)的告警合并為一個(gè)告警告警聚合率=1-聚合故障自愈率=自愈故能感知、可決該場景通過實(shí)時(shí)收集運(yùn)維對象的業(yè)務(wù)運(yùn)行模型,實(shí)時(shí)檢測運(yùn)行數(shù)據(jù),實(shí)現(xiàn)快異常發(fā)現(xiàn)準(zhǔn)確率=有異常發(fā)現(xiàn)漏報(bào)率=(應(yīng)自適應(yīng)、自學(xué)故障影響分析故障影響分析準(zhǔn)確率=影響范圍分析正確的故障數(shù)量/故障總數(shù)可決策、會描述故障根因定位該場景通過排障決策樹、對象關(guān)聯(lián)圖異常告警進(jìn)行根因分析定位和根因故故障根因定位準(zhǔn)確率=準(zhǔn)確推薦根因故障數(shù)/總推薦根因故障數(shù)；故障根因定位覆蓋率=準(zhǔn)確推薦根因能感知、可決各方面，有效提高運(yùn)維服務(wù)對象的運(yùn)行穩(wěn)該場景通過收集和處理運(yùn)維對象歷史故障預(yù)測準(zhǔn)確率=準(zhǔn)自學(xué)習(xí)、會診斷數(shù)據(jù)等，利用同類運(yùn)維對象的橫向比健康檢查覆蓋率=自動健康檢查運(yùn)維對象能感知、會描智能網(wǎng)絡(luò)負(fù)載通過采用軟件定義網(wǎng)絡(luò)(SDN)技術(shù)架業(yè)務(wù)路徑調(diào)優(yōu),充分利用網(wǎng)絡(luò)資源,降網(wǎng)絡(luò)堵塞年度減少次數(shù)=上一年度發(fā)生數(shù)-會診斷、自執(zhí)行本運(yùn)維工單流工單自動化率=自動化工單流程的數(shù)量/資源彈性伸縮回收資源,避免資源的浪費(fèi),如數(shù)據(jù)庫資源調(diào)整自動化率=自動化調(diào)整資源次數(shù)能感知、自學(xué)在基礎(chǔ)設(shè)施、應(yīng)用系統(tǒng)等運(yùn)維領(lǐng)域(資源)方面，有效降低服務(wù)對象的運(yùn)行和管理成本應(yīng)用系統(tǒng)性應(yīng)用系統(tǒng)性能預(yù)測準(zhǔn)確率=準(zhǔn)確預(yù)測數(shù)/總能感知、自學(xué)應(yīng)用智能混型等等),同一應(yīng)用服務(wù)在不同時(shí)間資過智能計(jì)算和預(yù)測將不同資源類型的應(yīng)用混合部署自動化率=自動化混合部署次數(shù)/總混合部署次數(shù)能感知、自學(xué)機(jī)房能耗智能感知、自學(xué)日常巡檢自日常巡檢自動化率=自動巡檢任務(wù)數(shù)/總軟件分發(fā)配通過向客戶端下發(fā)備份副本、配置信應(yīng)用系統(tǒng)的服務(wù)狀態(tài)與相關(guān)日志信息軟件分發(fā)配置自動化率=自動化分發(fā)的運(yùn)維對象數(shù)量/運(yùn)維對服務(wù)編排等技術(shù),對運(yùn)維對象定期巡檢,根據(jù)規(guī)則判定并給出巡檢結(jié)果,提機(jī)器人巡檢準(zhǔn)確率=正確巡檢隱患數(shù)量/實(shí)際隱患數(shù)量；機(jī)器人巡檢自動化率=機(jī)器完成的巡檢任務(wù)數(shù)能感知、會診運(yùn)維知識庫知識檢索率=被檢索使用的知識條目數(shù)/能感知、會描智能作業(yè)調(diào)度智能作業(yè)調(diào)度準(zhǔn)確率=完成作業(yè)正確數(shù)/作能感知、可決量性該場景通過定期對運(yùn)維對象進(jìn)行漏洞漏洞檢測準(zhǔn)確率=正確檢測漏洞數(shù)量/實(shí)訪問控制審核訪問控制審核準(zhǔn)確率=正確審核高危需求數(shù)據(jù)中心人人機(jī)房的人員身份鑒別和行為活動的數(shù)據(jù)中心人員出入管控準(zhǔn)確