版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)
文檔簡介
CTG-MBOSSOSS2.5規(guī)范
培訓(xùn)材料運行服務(wù)分析系統(tǒng)(ODS-O)第1頁ODS-O規(guī)范關(guān)鍵內(nèi)容聚焦客戶信息化創(chuàng)新戰(zhàn)略O(shè)DS能夠分域建設(shè),能夠集中建設(shè)未建ODS、只建ODS-B、分建ODS-B/ODS-O圍繞一個目標(biāo),明確兩種模式;結(jié)合三種現(xiàn)實狀況,驗證四大專題數(shù)據(jù)整合-明晰數(shù)據(jù)分類整合標(biāo)準(zhǔn)數(shù)據(jù)共享-規(guī)范企業(yè)基礎(chǔ)數(shù)據(jù)架構(gòu)數(shù)據(jù)質(zhì)量-提升后端優(yōu)異運行能力數(shù)據(jù)應(yīng)用-支撐運維更加好使用網(wǎng)絡(luò)一個目標(biāo)四大專題二種模式三種現(xiàn)實狀況從ODS在OSS域?qū)嶋H需求出發(fā),明確ODS能夠集中建設(shè)也能夠分域建設(shè),面向運行生產(chǎn)驗證了OSS數(shù)據(jù)整合、數(shù)據(jù)共享、數(shù)據(jù)質(zhì)量、數(shù)據(jù)應(yīng)用四大專題,明晰了OSS數(shù)據(jù)分類及整合標(biāo)準(zhǔn),規(guī)范了企業(yè)基礎(chǔ)數(shù)據(jù)架構(gòu),提升后端優(yōu)異運行能力,支撐運維部門更加好使用網(wǎng)絡(luò),表達(dá)了ODS-O作為OSS價值和能力窗口基本主題。第2頁目錄系統(tǒng)綜述系統(tǒng)架構(gòu)重點專題系統(tǒng)演進(jìn)集成接口第3頁目錄系統(tǒng)綜述ODS-O建設(shè)驅(qū)動力ODS-O規(guī)范體系現(xiàn)實狀況及目標(biāo)ODS-O系統(tǒng)定位ODS-O系統(tǒng)目標(biāo)第4頁ODS-O建設(shè)驅(qū)動力分析融合業(yè)務(wù)發(fā)展,意味著IT系統(tǒng)之間需要更多接口和協(xié)同,沉淀在IT系統(tǒng)之內(nèi)分散、孤立數(shù)據(jù)需要建立更多關(guān)聯(lián),以支撐融合業(yè)務(wù)運行和監(jiān)控ODS-O作為一個實現(xiàn)數(shù)據(jù)共享技術(shù)模式,其關(guān)鍵目標(biāo)之一就是實現(xiàn)OSS系統(tǒng)從網(wǎng)狀互聯(lián)接口現(xiàn)實狀況到以星型接口為主,網(wǎng)狀接口為輔轉(zhuǎn)變,以支撐系統(tǒng)間互聯(lián)互通和全程全網(wǎng)運行。服務(wù)質(zhì)量中不論是向客戶包含開通、保障、接觸服務(wù)質(zhì)量,還是用戶產(chǎn)品本身運行質(zhì)量、網(wǎng)絡(luò)質(zhì)量都需要對OSS數(shù)據(jù)進(jìn)行整合和分析,以做出服務(wù)質(zhì)量調(diào)整相關(guān)對策ODS-O整合了OSS域(含網(wǎng)管)數(shù)據(jù),所以經(jīng)過ODS-O實現(xiàn)OSS跨系統(tǒng)網(wǎng)絡(luò)能力分析及網(wǎng)絡(luò)運行情況分析,能夠使網(wǎng)絡(luò)運行維護(hù)部門更加好使用、維護(hù)網(wǎng)絡(luò)。ODS-O應(yīng)用驅(qū)動特征和數(shù)據(jù)收斂特征決定ODS-O能夠?qū)ιa(chǎn)系統(tǒng)內(nèi)開通、保障,網(wǎng)管數(shù)據(jù)進(jìn)行整合和匯總后,形成圍繞全業(yè)務(wù)服務(wù)標(biāo)準(zhǔn)指標(biāo)現(xiàn)實狀況統(tǒng)計,從而為運行考評提供數(shù)據(jù)支撐。聚焦客戶全業(yè)務(wù)運行信息化創(chuàng)新戰(zhàn)略對OSS能力提升需求分解業(yè)務(wù)融合支持全業(yè)務(wù)運行OSS能力提升對ODS-O要求聚焦客戶提升客戶體驗全程全網(wǎng)實現(xiàn)一體化管理集中高效支撐網(wǎng)絡(luò)轉(zhuǎn)型準(zhǔn)確智能實現(xiàn)運行優(yōu)異第5頁ODS-O建設(shè)驅(qū)動力(價值)OSS價值企業(yè)價值規(guī)范OSS域基礎(chǔ)數(shù)據(jù)架構(gòu)需要
網(wǎng)狀互聯(lián)接口現(xiàn)實狀況到以星型接口為主,網(wǎng)狀接口為輔轉(zhuǎn)變,優(yōu)化OSS基礎(chǔ)數(shù)據(jù)架構(gòu)。6OSS域互聯(lián)互通數(shù)據(jù)共享需要
明確運行數(shù)據(jù)唯一起源,保持OSS各系統(tǒng)數(shù)據(jù)副本一致性。7OSS域系統(tǒng)數(shù)據(jù)質(zhì)量提升需要
面向分析應(yīng)用,對源系統(tǒng)數(shù)據(jù)進(jìn)行質(zhì)量稽核,提升源系統(tǒng)數(shù)據(jù)質(zhì)量,完善ODS-O應(yīng)用。8滿足移動業(yè)務(wù)生產(chǎn)運行時效性需要移動業(yè)務(wù)引入,對OSS整體提出更高時效性要求,ODS-O整合OSS(含網(wǎng)管/設(shè)備)數(shù)據(jù),經(jīng)過準(zhǔn)實時、跨系統(tǒng)分析應(yīng)用,提升網(wǎng)絡(luò)運維反應(yīng)時間和運行生產(chǎn)時效性;1滿足業(yè)務(wù)融合系統(tǒng)互聯(lián)互通需要
融合業(yè)務(wù)發(fā)展,要求IT系統(tǒng)之間需要更多接口和協(xié)同,ODS-O面向業(yè)務(wù)融合,為OSS系統(tǒng)提供數(shù)據(jù)共享基礎(chǔ)平臺,增加系統(tǒng)間互聯(lián)互通協(xié)同。2實施聚焦客戶提升服務(wù)質(zhì)量需要
面向開通、保障,網(wǎng)絡(luò)質(zhì)量等對OSS數(shù)據(jù)進(jìn)行整合分析,做出服務(wù)質(zhì)量調(diào)整相關(guān)對策。
3面向生產(chǎn)提升網(wǎng)絡(luò)運行效能需要
經(jīng)過網(wǎng)絡(luò)能力分析及網(wǎng)絡(luò)運行情況分析,使網(wǎng)絡(luò)運行維護(hù)部門更加好使用、維護(hù)網(wǎng)絡(luò)。4支撐準(zhǔn)確化運行、推進(jìn)落實全業(yè)務(wù)服務(wù)標(biāo)準(zhǔn)需要
圍繞全業(yè)務(wù)服務(wù)標(biāo)準(zhǔn)進(jìn)行指標(biāo)現(xiàn)實狀況統(tǒng)計,為企業(yè)各種運行考評提供數(shù)據(jù)支撐。5第6頁目錄系統(tǒng)綜述ODS-O建設(shè)驅(qū)動力ODS-O規(guī)范體系現(xiàn)實狀況及目標(biāo)ODS-O系統(tǒng)定位ODS-O系統(tǒng)目標(biāo)第7頁ODS當(dāng)前規(guī)范體系情況EDAODSEDMEDA-ODS總體規(guī)范V1.0EDA-ODS技術(shù)規(guī)范V1.0CTG-EDMV3.0CTG-EDMV2.0CTG-EDMV1.0EDA規(guī)范V1.0EDWEDW實施指南V1.0EDW技術(shù)指南V1.0EDW業(yè)務(wù)需求V1.0ODS-O系統(tǒng)規(guī)范2.5EDA規(guī)范V1.0:規(guī)范了中國電信企業(yè)數(shù)據(jù)架構(gòu),系統(tǒng)地提出了數(shù)據(jù)管控體系,明確了中國電信EDA建設(shè)標(biāo)準(zhǔn),并為數(shù)據(jù)魔方、經(jīng)營分析模板、企業(yè)數(shù)據(jù)模型(EDM)、運行數(shù)據(jù)倉儲(ODS)和數(shù)據(jù)倉庫(EDW)提供框架和依據(jù)。年2月,除運行數(shù)據(jù)倉儲(ODS)規(guī)范集未編寫外,其它規(guī)范集均編寫完成。EDA-ODS規(guī)范V1.0:包含總體分冊和技術(shù)分冊,年7月公布。對ODS建設(shè)驅(qū)動力、業(yè)務(wù)目標(biāo)、系統(tǒng)目標(biāo)、系統(tǒng)架構(gòu)、系統(tǒng)邊界及系統(tǒng)演進(jìn)等方面內(nèi)容進(jìn)行了規(guī)范;規(guī)范V1.0中沒有包括OSS域相關(guān)ODS需求;CTG-EDMV1.0:包含參加人、產(chǎn)品、帳務(wù)、市場營銷、事件、地域6個主題域,年12月公布。CTG-EDMV2.0:增加了資源主題域,并對現(xiàn)有主題域進(jìn)行了完善,205月公布。CTG-EDMV3.0:圍繞CRM與計費系統(tǒng)數(shù)據(jù)模型一致性、ODS模型統(tǒng)一性等目標(biāo),優(yōu)化和完善參加人、產(chǎn)品、帳務(wù)、市場營銷、事件和地域六個主題域,204月公布。聚焦客戶全業(yè)務(wù)運行對ODS-O提出了建設(shè)需求,OSS域需要自己ODS,規(guī)范ODS-O建設(shè)勢在必行EDW規(guī)范V1.0分為技術(shù)指南、實施指南和業(yè)務(wù)需求分冊,公布時間年。規(guī)范對企業(yè)EDW目標(biāo)、標(biāo)準(zhǔn)進(jìn)行了界定,對EDW技術(shù)體系架構(gòu),項目實施方法,數(shù)據(jù)挖掘方法等給出了實施參考。第8頁ODS-O相關(guān)規(guī)范體系現(xiàn)實狀況及規(guī)范目標(biāo)1、ITSP2.0為ODS-O分冊編寫提供了指導(dǎo)和定位;2、OSS生產(chǎn)系統(tǒng)規(guī)范為ODS-O功效、接口定義提供主要輸入;3、ODS-O分冊繼承了ODSV1.0規(guī)范中體系架構(gòu),參考EDM和OSS域應(yīng)用,實現(xiàn)OSS域數(shù)據(jù)整合、數(shù)據(jù)共享管理、數(shù)據(jù)質(zhì)量管理和數(shù)據(jù)應(yīng)用;4、結(jié)合OSS系統(tǒng)全網(wǎng)建設(shè)現(xiàn)實狀況,為ODS-O系統(tǒng)建設(shè)、實施和演進(jìn)提供了指導(dǎo)思緒。OSS規(guī)范開通規(guī)范資源規(guī)范……CTG-EDMV1.0CTG-EDMV2.0CTG-EDMV3.0EDM規(guī)范ODS規(guī)范總體規(guī)范技術(shù)規(guī)范ITSP2.0ODS-O規(guī)范系統(tǒng)綜述驅(qū)動力目標(biāo)定位系統(tǒng)架構(gòu)功效架構(gòu)技術(shù)架構(gòu)數(shù)據(jù)架構(gòu)重點專題數(shù)據(jù)共享數(shù)據(jù)質(zhì)量數(shù)據(jù)應(yīng)用系統(tǒng)演進(jìn)演進(jìn)步驟階段評定集成接口系統(tǒng)邊界接口分類接口技術(shù)規(guī)范目標(biāo)1、ODS-O規(guī)范為各省ODS建設(shè),提供OSS域建設(shè)指導(dǎo)2、ODS-O可依據(jù)各省實際,單獨建設(shè)或建設(shè)企業(yè)級ODS框架后逐步收斂OSS域;EDA1.0EDW規(guī)范業(yè)務(wù)需求技術(shù)指南實施指南數(shù)據(jù)整合第9頁目錄系統(tǒng)綜述ODS-O建設(shè)驅(qū)動力ODS-O規(guī)范體系現(xiàn)實狀況及目標(biāo)ODS-O系統(tǒng)定位ODS-O系統(tǒng)目標(biāo)第10頁集團(tuán)數(shù)據(jù)交換樞紐集團(tuán)省當(dāng)?shù)鼐W(wǎng)企業(yè)應(yīng)用集成(EAI)企業(yè)應(yīng)用集成(EAI)外部認(rèn)證服務(wù)平臺集團(tuán)CRM集團(tuán)計費結(jié)算系統(tǒng)綜合服務(wù)開通綜合資源綜合網(wǎng)絡(luò)管理綜合服務(wù)開通綜合網(wǎng)絡(luò)管理施工調(diào)度綜合網(wǎng)絡(luò)管理外部認(rèn)證服務(wù)平臺CRM互聯(lián)網(wǎng)門戶融合計費充值平臺綜合結(jié)算采集預(yù)處理生產(chǎn)分析域ODS運行型數(shù)據(jù)應(yīng)用綜合服務(wù)保障自動激活綜合服務(wù)保障專業(yè)網(wǎng)絡(luò)管理生產(chǎn)分析域EDW分析型數(shù)據(jù)應(yīng)用專業(yè)網(wǎng)絡(luò)管理生產(chǎn)分析域ODS運行型數(shù)據(jù)應(yīng)用生產(chǎn)分析域EDW分析型數(shù)據(jù)應(yīng)用專業(yè)網(wǎng)絡(luò)管理BSSOSSEDA企業(yè)內(nèi)部門戶管理支撐系統(tǒng)MSS語音門戶互聯(lián)網(wǎng)門戶10000/10001語音門戶自動激活自動激活財務(wù)管理人力資源供給鏈項目管理管理支撐系統(tǒng)財務(wù)管理人力資源供給鏈項目管理OAKM內(nèi)部用戶認(rèn)平臺證企業(yè)內(nèi)部門戶生產(chǎn)分析域數(shù)據(jù)應(yīng)用平臺數(shù)據(jù)應(yīng)用OAKM內(nèi)部用戶認(rèn)平臺證網(wǎng)絡(luò)運維管理網(wǎng)絡(luò)運維管理綜合資源1.運行數(shù)據(jù)倉儲(ODS)屬于企業(yè)數(shù)據(jù)應(yīng)用,包含按主題分類面向運行準(zhǔn)實時數(shù)據(jù),提供統(tǒng)一企業(yè)數(shù)據(jù)視圖;2.EDA域沿襲“兩級系統(tǒng),三級應(yīng)用”不變。即系統(tǒng)分省和集團(tuán)兩級建設(shè),集團(tuán)、省、當(dāng)?shù)胤謩e按照不一樣需求使用系統(tǒng),其中當(dāng)?shù)財?shù)據(jù)應(yīng)用平臺使用ODS和EDW數(shù)據(jù)或分析結(jié)果。3.與EDA1.0相比,ODS不但包含運行數(shù)據(jù)存放,更強調(diào)基于運行數(shù)據(jù)上分析應(yīng)用(ITSP2.0)。ODS在ITSP2.0IT應(yīng)用系統(tǒng)遠(yuǎn)景目標(biāo)中位置第11頁依靠企業(yè)ODS,深化OSS數(shù)據(jù)管理和數(shù)據(jù)應(yīng)用12ODS-O在OSS2.5功效藍(lán)圖位置企業(yè)管理-O企業(yè)數(shù)據(jù)架構(gòu)-O運行管理OSS數(shù)據(jù)架構(gòu)績效考評成本管理知識管理供給商管理運維組織與人員管理公文流轉(zhuǎn)工程管理檔案管理日常事務(wù)管理數(shù)據(jù)質(zhì)量公共管理數(shù)據(jù)共享數(shù)據(jù)整合數(shù)據(jù)應(yīng)用代維管理12門戶OSS門戶個人門戶單點登錄移動辦公知識搜索運維協(xié)同專題論壇綜合信息公布服務(wù)開發(fā)與運行規(guī)劃運行支撐與就緒開通保障服務(wù)規(guī)劃資源規(guī)劃服務(wù)問題服務(wù)質(zhì)量資源測試管理資源存量資源調(diào)整協(xié)議與流量服務(wù)故障服務(wù)性能服務(wù)開通資源開通自動激活資源問題資源故障資源性能施工調(diào)度網(wǎng)絡(luò)配置管理生產(chǎn)指揮服務(wù)測試管理資源開發(fā)與運行備品備件服務(wù)問題服務(wù)故障服務(wù)性能服務(wù)質(zhì)量匯報服務(wù)質(zhì)量評定服務(wù)質(zhì)量分析接收與解析預(yù)處理與分析處理與修復(fù)驗證與評定反饋與消障服務(wù)能力規(guī)劃變更管理事件監(jiān)視事件申告事件分析性能指標(biāo)分析性能監(jiān)視定單接收服務(wù)方案設(shè)計資源配置服務(wù)配置服務(wù)激活測試工具測試執(zhí)行生產(chǎn)任務(wù)管理重大事件上報測試工具測試執(zhí)行網(wǎng)調(diào)方案設(shè)計變更數(shù)據(jù)調(diào)整資源設(shè)計與分配客戶方案設(shè)計資源配置工單接收與解析預(yù)處理與分析處理與修復(fù)驗證與評定反饋與消障性能指標(biāo)分析性能監(jiān)視性能控制備品備件激活過程管理協(xié)議/信令管理流量管理激活適配工作資源存量調(diào)度應(yīng)用自動發(fā)覺與同時資源規(guī)格管理碼號管理組網(wǎng)管理設(shè)備實體管理地域管理數(shù)據(jù)采集故障、性能、參數(shù)數(shù)據(jù)適配資源能力規(guī)劃資源設(shè)計事件監(jiān)視事件申告事件分析配置適配用戶數(shù)據(jù)配置運行就緒產(chǎn)品就緒服務(wù)存量運行管控運行管控產(chǎn)品能力規(guī)劃第12頁ODS-O和周圍系統(tǒng)關(guān)系ODS-O定位ODS-O是ODS(OSS域)縮寫;ODS-O是企業(yè)級ODS一個域是屬于EDA一部分;ODS-O能夠單獨建設(shè)和布署,也能夠是ODS系統(tǒng)中OSS域數(shù)據(jù)、應(yīng)用;ODS-O不是最終建設(shè)目標(biāo),ODS-O是企業(yè)級ODS一個發(fā)展階段;ODS-O與生產(chǎn)系統(tǒng)關(guān)系OSS生產(chǎn)系統(tǒng)為ODS-O提供操作型數(shù)據(jù);ODS-O系統(tǒng)將整合后數(shù)據(jù)共享給OSS生產(chǎn)系統(tǒng);ODS-O系統(tǒng)與OSS生產(chǎn)系統(tǒng)相互獨立、彼此促進(jìn);生產(chǎn)系統(tǒng)內(nèi)小批量,短時間跨度查詢、統(tǒng)計,ODS-O內(nèi)大數(shù)據(jù)量、長時間跨度計算、統(tǒng)計;ODS-O與EDW關(guān)系ODS-O是EDW主要O域數(shù)據(jù)源,EDW依據(jù)需求將分析結(jié)果反饋ODS-O;ODS-O應(yīng)用更多面向生產(chǎn)運行,EDW更多面向管理決議;ODS-O應(yīng)用以操作型數(shù)據(jù)和分析型數(shù)據(jù)結(jié)合展現(xiàn)為主,EDW應(yīng)用以分析型數(shù)據(jù)為主;ODS-O應(yīng)用時間維度以小時和天為主,EDW應(yīng)用時間維度以月、年為主;EDW實現(xiàn)了企業(yè)內(nèi)信息共享,ODS-O實現(xiàn)是OSS系統(tǒng)數(shù)據(jù)共享;ODS-O與集團(tuán)ODS關(guān)系省級ODS-O向集團(tuán)ODS提交各類運行生產(chǎn)數(shù)據(jù)統(tǒng)計結(jié)果,,省級ODS-O需按集團(tuán)統(tǒng)一規(guī)劃,具備靈活數(shù)據(jù)上報定制能力,集團(tuán)ODS匯總各省ODS數(shù)據(jù)后統(tǒng)一展現(xiàn)全網(wǎng)運行生產(chǎn)現(xiàn)實狀況。集團(tuán)ODS負(fù)責(zé)從集團(tuán)級OSS、網(wǎng)元和平臺(主要以移動業(yè)務(wù)平臺為主)獲取數(shù)據(jù),并將數(shù)據(jù)送達(dá)各省ODS-O。各省取得集團(tuán)數(shù)據(jù)后,結(jié)合本省OSS數(shù)據(jù),進(jìn)行面向運行生產(chǎn)分析應(yīng)用第13頁目錄系統(tǒng)綜述ODS-O建設(shè)驅(qū)動力ODS-O規(guī)范體系現(xiàn)實狀況及目標(biāo)ODS-O系統(tǒng)定位ODS-O系統(tǒng)目標(biāo)第14頁ODS-O系統(tǒng)目標(biāo)統(tǒng)一企業(yè)運行數(shù)據(jù)視圖企業(yè)運行數(shù)據(jù)質(zhì)量提升企業(yè)運行數(shù)據(jù)共享和管理跨系統(tǒng)生產(chǎn)運行分析及應(yīng)用ODS-O剛性落地EDM中OSS域相關(guān)數(shù)據(jù)模型規(guī)則、總線型、可管控可擴展數(shù)據(jù)共享接口提升生產(chǎn)系統(tǒng)運行效能統(tǒng)一數(shù)據(jù)應(yīng)用和分析平臺兩級系統(tǒng)、三級應(yīng)用省級ODS-O要收斂省級OSS系統(tǒng)、網(wǎng)元/平臺和當(dāng)?shù)豋SS系統(tǒng)、網(wǎng)元/平臺數(shù)據(jù)。省對集團(tuán)OSS系統(tǒng)及網(wǎng)元/平臺數(shù)據(jù)需求,由集團(tuán)ODS到省ODS-O方式獲取。
在實時性滿足要求后直接替換數(shù)據(jù)源系統(tǒng)成為統(tǒng)一共享數(shù)據(jù)源。ODS-O實現(xiàn)實時數(shù)據(jù)共享后,標(biāo)準(zhǔn)上ODS-O是EDW在OSS域(網(wǎng)元/平臺)唯一數(shù)據(jù)源,EDW不在直接從生產(chǎn)系統(tǒng)提取數(shù)據(jù)。業(yè)務(wù)目標(biāo)技術(shù)目標(biāo)布署目標(biāo)發(fā)展目標(biāo)ODS-O作為企業(yè)運行數(shù)據(jù)平臺,收斂各生產(chǎn)系統(tǒng)中運行數(shù)據(jù),按照集團(tuán)企業(yè)數(shù)據(jù)模型進(jìn)行數(shù)據(jù)整合,提升運行數(shù)據(jù)質(zhì)量,提供運行數(shù)據(jù)共享,支撐跨系統(tǒng)數(shù)據(jù)應(yīng)用,同時也為企業(yè)前端、EDW提供標(biāo)準(zhǔn)運行數(shù)據(jù)支撐。總體目標(biāo)第15頁業(yè)務(wù)目標(biāo)1:統(tǒng)一企業(yè)運行數(shù)據(jù)視圖提供及展現(xiàn)企業(yè)統(tǒng)一運行數(shù)據(jù)視圖信息,支撐網(wǎng)運部門更加好使用網(wǎng)絡(luò),為客服人員、客戶經(jīng)理和網(wǎng)監(jiān)人員提供全方位運行數(shù)據(jù)信息;建立客戶、產(chǎn)品、服務(wù)和資源關(guān)聯(lián)全視圖,為服務(wù)保障、集中告警等系統(tǒng)提供影響分析、承載關(guān)系分析數(shù)據(jù)支撐。資源管理管線設(shè)備碼號基站端局激活/調(diào)度激活工單拆單規(guī)則施工工單ODS-B參加人產(chǎn)品定價事件營銷帳務(wù)服務(wù)開通步驟工單服務(wù)定單定單流程MSS固資工程財務(wù)網(wǎng)管系統(tǒng)告警性能配置服務(wù)保障障礙信息統(tǒng)一企業(yè)運行數(shù)據(jù)視圖(ODS-O)其它系統(tǒng)其它信息企業(yè)數(shù)據(jù)模型第16頁業(yè)務(wù)目標(biāo)2:企業(yè)運行數(shù)據(jù)質(zhì)量提升數(shù)據(jù)質(zhì)量校驗:依據(jù)規(guī)則對ODS-O所存放數(shù)據(jù)進(jìn)行一致性、完整性、正確性校驗,形成數(shù)據(jù)校驗結(jié)果并交付源業(yè)務(wù)系統(tǒng)進(jìn)行修正;數(shù)據(jù)質(zhì)量管控:經(jīng)過建立企業(yè)數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)、數(shù)據(jù)管控組織、數(shù)據(jù)管控流程,對數(shù)據(jù)質(zhì)量進(jìn)行統(tǒng)一管控。數(shù)據(jù)清洗數(shù)據(jù)容錯數(shù)據(jù)稽核反饋處理對單一系統(tǒng)不正確數(shù)據(jù)進(jìn)行過清洗過濾對于系統(tǒng)間不一致數(shù)據(jù)或錯誤不做清洗,逐步制訂對應(yīng)規(guī)則進(jìn)行轉(zhuǎn)換發(fā)揮數(shù)據(jù)共享價值,定義數(shù)據(jù)質(zhì)量目標(biāo)允許系統(tǒng)建設(shè)早期及應(yīng)用接口中數(shù)據(jù)不一致、不匹配造成錯誤,最大程度發(fā)揮數(shù)據(jù)可用性針對重點及接口數(shù)據(jù)建立數(shù)據(jù)審計規(guī)則形成數(shù)據(jù)稽查匯報,促進(jìn)應(yīng)用系統(tǒng)升級處理形成批量數(shù)量修改腳本進(jìn)行人工或自動反饋對反饋結(jié)果經(jīng)過系統(tǒng)接口向源系統(tǒng)進(jìn)行反饋對需要人工干預(yù)發(fā)起相關(guān)工作流程流程人工第17頁業(yè)務(wù)目標(biāo)3:企業(yè)運行數(shù)據(jù)共享和管理ODS-O為各業(yè)務(wù)系統(tǒng)提供統(tǒng)一共享數(shù)據(jù)接口,降低系統(tǒng)間相互接口重復(fù)性,降低接口復(fù)雜度,提升系統(tǒng)間接口效率與質(zhì)量;ODS-O系統(tǒng)以實時服務(wù)調(diào)用或準(zhǔn)實時數(shù)據(jù)同時方式將ODS-O系統(tǒng)內(nèi)整合數(shù)據(jù)向外提供。ODS-O數(shù)據(jù)共享層服務(wù)調(diào)用數(shù)據(jù)提供接口共享模式服務(wù)開通EDW其它系統(tǒng)ODS-B網(wǎng)絡(luò)資源第18頁業(yè)務(wù)目標(biāo)4:跨系統(tǒng)生產(chǎn)運行分析及應(yīng)用ODS-OODS-O基于整合運行數(shù)據(jù)統(tǒng)一數(shù)據(jù)源,提供統(tǒng)一指標(biāo)體系,實現(xiàn)企業(yè)運行分析指標(biāo)統(tǒng)一提供和展示;支撐企業(yè)運行全業(yè)務(wù)開通、全障礙流程KPI考評,提供端到端全業(yè)務(wù)流程分析和監(jiān)視服務(wù)質(zhì)量分析數(shù)據(jù)質(zhì)量分析專題分析服務(wù)時限統(tǒng)計分析成功率及時率分析客戶網(wǎng)絡(luò)質(zhì)量分析運行考評數(shù)據(jù)支撐重大保障事件分析重大災(zāi)害事件分析割接事件專題分析合作搭檔專題分析特定客戶專題分析特定服務(wù)專題分析其它專題分析網(wǎng)絡(luò)能力分析利用程度分析實際能力分析客戶網(wǎng)絡(luò)能力分析OSS數(shù)據(jù)質(zhì)量核查BSS/OSS數(shù)據(jù)核查BSS/網(wǎng)元數(shù)據(jù)核查網(wǎng)絡(luò)運行分析網(wǎng)絡(luò)業(yè)務(wù)量分析網(wǎng)絡(luò)流量分析網(wǎng)絡(luò)質(zhì)量分析第19頁布署目標(biāo)OSSBSS/OSS/MSSBSS/OSS/MSS統(tǒng)一報表企業(yè)數(shù)據(jù)應(yīng)用門戶EDW統(tǒng)一報表企業(yè)數(shù)據(jù)應(yīng)用門戶ODSB/O/MODSB/O/MEDW當(dāng)?shù)財?shù)據(jù)應(yīng)用平臺生產(chǎn)系統(tǒng)->ODSODS->EDW省ODS/EDW->當(dāng)?shù)貞?yīng)用平臺省ODS/EDW<->集團(tuán)ODSEDW分析結(jié)果反饋當(dāng)?shù)鼐W(wǎng)省企業(yè)集團(tuán)111234522334455第20頁數(shù)據(jù)源系統(tǒng)數(shù)據(jù)目標(biāo)系統(tǒng)ODS-O參加人資源事件產(chǎn)品服務(wù)其它數(shù)據(jù)源系統(tǒng)數(shù)據(jù)目標(biāo)系統(tǒng)ODS-O參加人資源事件產(chǎn)品服務(wù)其它ODS-O建設(shè)目標(biāo)ODS-O發(fā)展目標(biāo)實時數(shù)據(jù)共享準(zhǔn)實時數(shù)據(jù)共享數(shù)據(jù)整合數(shù)據(jù)整合數(shù)據(jù)共享發(fā)展目標(biāo)說明:ODS-O經(jīng)過提供準(zhǔn)實時批量數(shù)據(jù)和實時查詢服務(wù)來實現(xiàn)跨系統(tǒng)數(shù)據(jù)共享,在實時性滿足要求后能夠直接替換數(shù)據(jù)源系統(tǒng)成為統(tǒng)一共享數(shù)據(jù)源。企業(yè)基礎(chǔ)數(shù)據(jù)架構(gòu)網(wǎng)狀結(jié)構(gòu)將得到較大程度改進(jìn),向星型結(jié)構(gòu)發(fā)展。標(biāo)準(zhǔn)上ODS-O是EDW在OSS域(含網(wǎng)元/平臺)唯一數(shù)據(jù)源,EDW不在直接從生產(chǎn)系統(tǒng)提取數(shù)據(jù)第21頁目錄系統(tǒng)綜述系統(tǒng)架構(gòu)重點專題系統(tǒng)演進(jìn)集成接口第22頁目錄系統(tǒng)架構(gòu)功效架構(gòu)數(shù)據(jù)架構(gòu)布署架構(gòu)技術(shù)架構(gòu)第23頁ODS-O功效架構(gòu)(0級視圖)數(shù)據(jù)應(yīng)用:利用整合層和匯總層數(shù)據(jù),經(jīng)過查詢、固定報表、動態(tài)報表及計算等基礎(chǔ)功效來實現(xiàn)網(wǎng)絡(luò)能力分析、網(wǎng)絡(luò)運行分析、服務(wù)質(zhì)量分析、數(shù)據(jù)質(zhì)量分析、專題分析等應(yīng)用。數(shù)據(jù)共享:基于ODS-O整合后跨系統(tǒng)數(shù)據(jù)所形成統(tǒng)一數(shù)據(jù)視圖,為外圍系統(tǒng)提供準(zhǔn)實時數(shù)據(jù)共享服務(wù)。數(shù)據(jù)整合:ODS-O準(zhǔn)實時從源系統(tǒng)抽取并整合、匯總數(shù)據(jù),形成整合層數(shù)據(jù)、匯總層數(shù)據(jù)。數(shù)據(jù)質(zhì)量管理:制訂質(zhì)量管理規(guī)范,確定對應(yīng)工作流程方法,并在系統(tǒng)中實現(xiàn)質(zhì)量檢驗、修正、考評功效,形成數(shù)據(jù)質(zhì)量管理閉環(huán)機制。公共管理:為系統(tǒng)提供通用基礎(chǔ)服務(wù),包含系統(tǒng)管理和元數(shù)據(jù)管理功效。公共管理數(shù)據(jù)共享數(shù)據(jù)整合數(shù)據(jù)應(yīng)用數(shù)據(jù)質(zhì)量管理第24頁ODS-O功效架構(gòu)(1級視圖)公共管理數(shù)據(jù)共享數(shù)據(jù)整合系統(tǒng)管理元數(shù)據(jù)管理共享配置管理數(shù)據(jù)共享管控數(shù)據(jù)共享過程數(shù)據(jù)整合過程數(shù)據(jù)整合配置數(shù)據(jù)應(yīng)用基礎(chǔ)功效關(guān)鍵應(yīng)用數(shù)據(jù)質(zhì)量管理任務(wù)定義配置稽核過程管控質(zhì)量評定考評數(shù)據(jù)整合管控專題分析第25頁ODS-O功效架構(gòu)(2級視圖)公共管理數(shù)據(jù)共享數(shù)據(jù)整合系統(tǒng)管理元數(shù)據(jù)管理共享配置管理數(shù)據(jù)共享管控數(shù)據(jù)共享過程系統(tǒng)用戶管理權(quán)限管理備份與恢復(fù)角色管理系統(tǒng)日志管理元數(shù)據(jù)獲取元數(shù)據(jù)更新元數(shù)據(jù)存放元數(shù)據(jù)展現(xiàn)數(shù)據(jù)整合過程數(shù)據(jù)抽取數(shù)據(jù)清洗數(shù)據(jù)轉(zhuǎn)換數(shù)據(jù)加載數(shù)據(jù)整合配置整合規(guī)則配置整合方式配置整合頻度配置元數(shù)據(jù)接口共享服務(wù)配置共享權(quán)限配置共享配置下發(fā)視圖數(shù)據(jù)共享小批量數(shù)據(jù)同時大批量數(shù)據(jù)同時實時數(shù)據(jù)查詢共享過程監(jiān)控過程異常處理共享日志管理查詢統(tǒng)計分析數(shù)據(jù)應(yīng)用基礎(chǔ)數(shù)據(jù)配置基礎(chǔ)功效關(guān)鍵應(yīng)用基礎(chǔ)查詢批量計算固定報表動態(tài)報表數(shù)據(jù)質(zhì)量管理任務(wù)定義配置稽核過程管控檢驗過程監(jiān)控過程異常處理質(zhì)量檢驗日志查詢統(tǒng)計分析質(zhì)量評定與考評數(shù)據(jù)修正考評數(shù)據(jù)質(zhì)量匯報異常數(shù)據(jù)匯報異常通知稽核任務(wù)定義查詢統(tǒng)計分析檢驗策略配置預(yù)警策略配置質(zhì)量預(yù)警告警數(shù)據(jù)閥值監(jiān)控策略調(diào)度數(shù)據(jù)整合管控整合異??刂普先蝿?wù)管理整合查詢統(tǒng)計專題分析組織管理網(wǎng)絡(luò)能力分析網(wǎng)絡(luò)運行分析服務(wù)質(zhì)量分析數(shù)據(jù)質(zhì)量分析第26頁目錄系統(tǒng)架構(gòu)功效架構(gòu)數(shù)據(jù)架構(gòu)布署架構(gòu)技術(shù)架構(gòu)第27頁目標(biāo)數(shù)據(jù)架構(gòu)遠(yuǎn)景(ITSP2.0)設(shè)計目標(biāo):確保信息共享提升數(shù)據(jù)質(zhì)量整合數(shù)據(jù)應(yīng)用設(shè)計關(guān)鍵點:模型定義關(guān)聯(lián)生產(chǎn)與分析分離明確元數(shù)據(jù)和主數(shù)據(jù)增強數(shù)據(jù)管控
28資源系統(tǒng)CRM系統(tǒng)計費系統(tǒng)ODSEDW數(shù)據(jù)模型數(shù)據(jù)應(yīng)用數(shù)據(jù)管控模型定義和驗證計費系統(tǒng)數(shù)據(jù)CRM系統(tǒng)數(shù)據(jù)資源系統(tǒng)數(shù)據(jù)……數(shù)據(jù)公布中心數(shù)據(jù)質(zhì)量管理實時查詢數(shù)據(jù)集市數(shù)據(jù)挖掘動態(tài)分析系統(tǒng)建設(shè)管控數(shù)據(jù)遷移管控數(shù)據(jù)維護(hù)管控布署管控模型管控規(guī)劃管控分析生產(chǎn)第28頁ODS-O數(shù)據(jù)架構(gòu)元數(shù)據(jù)層匯總數(shù)據(jù)層接口數(shù)據(jù)層整合數(shù)據(jù)層參加人產(chǎn)品事件資源地域服務(wù)數(shù)據(jù)共享層ODS-B/BSS綜合網(wǎng)管服務(wù)質(zhì)量服務(wù)保障服務(wù)開通自動激活資源管理網(wǎng)絡(luò)運維EDW……系統(tǒng)數(shù)據(jù)架構(gòu)說明:ODS-O接口數(shù)據(jù)層存放從源系統(tǒng)抽取數(shù)據(jù),數(shù)據(jù)模型與源系統(tǒng)保持一致;ODS-O整合數(shù)據(jù)層 對接口層數(shù)據(jù)進(jìn)行清洗、轉(zhuǎn)換、整合,形成整合數(shù)據(jù)層,整合數(shù)據(jù)層存放ODS-O關(guān)鍵數(shù)據(jù);ODS-O匯總數(shù)據(jù)層對整合層數(shù)據(jù)進(jìn)行統(tǒng)計、計算形成匯總層數(shù)據(jù)。匯總層數(shù)據(jù)主要是面向應(yīng)用;ODS-O數(shù)據(jù)共享層基于ODS-O中收斂整合好數(shù)據(jù),對外提供數(shù)據(jù)共享。數(shù)據(jù)共享層標(biāo)準(zhǔn)上不存放數(shù)據(jù);ODS-O元數(shù)據(jù)層ODS-O系統(tǒng)建設(shè)過程中所產(chǎn)生相關(guān)數(shù)據(jù)源定義,目標(biāo)定義,轉(zhuǎn)換規(guī)則等相關(guān)關(guān)鍵數(shù)據(jù)。源系統(tǒng)數(shù)據(jù)匯總數(shù)據(jù)OSS/業(yè)務(wù)平臺服務(wù)開通服務(wù)保障施工調(diào)度網(wǎng)絡(luò)運維傳輸網(wǎng)管交換網(wǎng)管C網(wǎng)網(wǎng)管數(shù)據(jù)網(wǎng)管資源管理綜合網(wǎng)管測試管理自動激活服務(wù)質(zhì)量信令監(jiān)測ISMPODS-B/BSSODS-M/MSS商務(wù)領(lǐng)航號百平臺EDW…………第29頁目錄系統(tǒng)架構(gòu)功效架構(gòu)數(shù)據(jù)架構(gòu)布署架構(gòu)技術(shù)架構(gòu)第30頁技術(shù)架構(gòu)數(shù)據(jù)層ETL平臺應(yīng)用集成平臺報表平臺數(shù)據(jù)服務(wù)層集成接口服務(wù)公共支撐框架業(yè)務(wù)邏輯層控制層客戶端其它外部系統(tǒng)ODS-O數(shù)據(jù)整合:1:外部系統(tǒng)-ETL平臺-數(shù)據(jù)層;2:外部系統(tǒng)-應(yīng)用集成平臺-集成接口服務(wù)-數(shù)據(jù)服務(wù)層-數(shù)據(jù)層數(shù)據(jù)共享:1:數(shù)據(jù)層-數(shù)據(jù)服務(wù)層-集成接口服務(wù)-應(yīng)用集成平臺-外部系統(tǒng)2:數(shù)據(jù)層-ETL平臺-外部系統(tǒng)數(shù)據(jù)應(yīng)用:1:數(shù)據(jù)層-報表平臺-界面展現(xiàn)層-客戶端;2:數(shù)據(jù)層-數(shù)據(jù)服務(wù)層-業(yè)務(wù)邏輯層-控制層-界面展現(xiàn)層-客戶端。同功效架構(gòu)關(guān)系報表平臺和ETL平臺能夠作為企業(yè)級平臺獨立于ODS-O系統(tǒng)界面展現(xiàn)層接口層整合層匯總層第31頁目錄系統(tǒng)架構(gòu)功效架構(gòu)數(shù)據(jù)架構(gòu)布署架構(gòu)技術(shù)架構(gòu)第32頁布署架構(gòu)數(shù)據(jù)層ETL平臺報表平臺數(shù)據(jù)服務(wù)層集成接口服務(wù)業(yè)務(wù)邏輯層控制層ODS-O界面展現(xiàn)層生產(chǎn)數(shù)據(jù)庫服務(wù)器分析數(shù)據(jù)庫服務(wù)器ETL服務(wù)器報表服務(wù)器應(yīng)用服務(wù)器WEB服務(wù)器接口服務(wù)器數(shù)據(jù)層數(shù)據(jù)層數(shù)據(jù)層數(shù)據(jù)層ETL平臺ETL平臺數(shù)據(jù)服務(wù)層業(yè)務(wù)邏輯層業(yè)務(wù)邏輯層數(shù)據(jù)訪問層控制層界面展現(xiàn)層界面展現(xiàn)層控制層報表平臺報表平臺集成接口服務(wù)集成接口服務(wù)1.各平臺均可獨立布署,也能夠與其它服務(wù)器合并布署2.從實際情況出發(fā),能夠考慮應(yīng)用服務(wù)器與WEB服務(wù)器合并3.報表服務(wù)器和ETL服務(wù)器能夠考慮與其它系統(tǒng)合設(shè),作為企業(yè)級平臺4.全部服務(wù)器都省集中布署第33頁目錄系統(tǒng)綜述系統(tǒng)架構(gòu)重點專題系統(tǒng)演進(jìn)集成接口第34頁目錄重點專題OSS數(shù)據(jù)共享管理專題OSS數(shù)據(jù)質(zhì)量管理專題數(shù)據(jù)分類及抽取標(biāo)準(zhǔn)數(shù)據(jù)整合功效設(shè)計數(shù)據(jù)整合概述ODS-O數(shù)據(jù)應(yīng)用專題ODS-O數(shù)據(jù)整合專題第35頁ODS-O數(shù)據(jù)整合概述數(shù)據(jù)整合管控數(shù)據(jù)清洗抽取范圍抽取標(biāo)準(zhǔn)抽取方式數(shù)據(jù)轉(zhuǎn)換數(shù)據(jù)加載數(shù)據(jù)整合配置數(shù)據(jù)加工數(shù)據(jù)抽取整合數(shù)據(jù)源服務(wù)開通服務(wù)保障施工調(diào)度網(wǎng)絡(luò)運維資源管理測試管理綜合網(wǎng)管自動激活傳輸網(wǎng)管交換網(wǎng)管C網(wǎng)網(wǎng)管數(shù)據(jù)網(wǎng)管信令監(jiān)測服務(wù)質(zhì)量ISMP商務(wù)領(lǐng)航號百平臺ODS-B/BSSODS-M/MSS數(shù)據(jù)整合框架ODS-O整合層數(shù)據(jù)數(shù)據(jù)整合目標(biāo)說明:數(shù)據(jù)整合完成從數(shù)據(jù)源到ODS-O系統(tǒng)數(shù)據(jù)整合層數(shù)據(jù)抽取、清洗、轉(zhuǎn)換、加載等功效。整個數(shù)據(jù)整合包含數(shù)據(jù)整合配置,數(shù)據(jù)整合過程、數(shù)據(jù)整合管控三個部分。數(shù)據(jù)整合過程包含了數(shù)據(jù)抽取和數(shù)據(jù)加工兩大部分,共同完成生產(chǎn)系統(tǒng)數(shù)據(jù)從源系統(tǒng)到數(shù)據(jù)整合層過程,為ODS-O系統(tǒng)提供關(guān)鍵數(shù)據(jù)。……第36頁目錄重點專題OSS數(shù)據(jù)共享管理專題OSS數(shù)據(jù)質(zhì)量管理專題數(shù)據(jù)分類及抽取標(biāo)準(zhǔn)數(shù)據(jù)整合功效設(shè)計數(shù)據(jù)整合概述ODS-O數(shù)據(jù)應(yīng)用專題ODS-O數(shù)據(jù)整合專題第37頁ODS-O數(shù)據(jù)分類元數(shù)據(jù)主數(shù)據(jù)資源主數(shù)據(jù)產(chǎn)品主數(shù)據(jù)客戶主數(shù)據(jù)運行交易數(shù)據(jù)網(wǎng)絡(luò)事件數(shù)據(jù)開通類運行交易數(shù)據(jù)調(diào)度類運行交易數(shù)據(jù)保障類運行交易數(shù)據(jù)告警類網(wǎng)絡(luò)事件數(shù)據(jù)性能類網(wǎng)絡(luò)事件數(shù)據(jù)信令類網(wǎng)絡(luò)事件數(shù)據(jù)測試類網(wǎng)絡(luò)事件數(shù)據(jù)業(yè)務(wù)型元數(shù)據(jù)技術(shù)型元數(shù)據(jù)關(guān)系型元數(shù)據(jù)操作型元數(shù)據(jù)運維類運行交易數(shù)據(jù)其它類主數(shù)據(jù)其它類運行交易數(shù)據(jù)其它類網(wǎng)絡(luò)事件數(shù)據(jù) 元數(shù)據(jù):是關(guān)于數(shù)據(jù)數(shù)據(jù),是對數(shù)據(jù)含義、功效、起源描述,相關(guān)數(shù)據(jù)源定義,目標(biāo)定義,轉(zhuǎn)換規(guī)則,數(shù)據(jù)共享規(guī)則和數(shù)據(jù)質(zhì)量檢驗規(guī)則等相關(guān)數(shù)據(jù)
主數(shù)據(jù):在多個運行系統(tǒng)中被重復(fù)使用,一旦產(chǎn)生,需要經(jīng)常對其進(jìn)行維護(hù),是企業(yè)關(guān)鍵業(yè)務(wù)實體數(shù)據(jù)
運行交易數(shù)據(jù):運行生產(chǎn)過程中在某一個時間點上發(fā)生業(yè)務(wù)事件數(shù)據(jù),相對穩(wěn)定,無需維護(hù)。
網(wǎng)絡(luò)事件數(shù)據(jù):網(wǎng)絡(luò)運行過程中在某一個時間點上發(fā)生網(wǎng)絡(luò)事件數(shù)據(jù),相對穩(wěn)定,無需維護(hù)。第38頁同數(shù)據(jù)源抽取接口要盡可能降低,防止重復(fù)抽取。ODS-O系統(tǒng)已經(jīng)具備系統(tǒng)接口,其它系統(tǒng)應(yīng)該同ODS-O實現(xiàn)接口共享數(shù)據(jù)。一次抽取標(biāo)準(zhǔn)ODS-O數(shù)據(jù)整合-數(shù)據(jù)抽取標(biāo)準(zhǔn)為不影響數(shù)據(jù)源性能,ODS-O系統(tǒng)應(yīng)該優(yōu)先從備機(設(shè)備、系統(tǒng))抽取數(shù)據(jù)。備機抽取標(biāo)準(zhǔn)沒有備機數(shù)據(jù)源,為不影響數(shù)據(jù)源生產(chǎn)運行,ODS-O系統(tǒng)應(yīng)該盡可能在空閑時間抽?。ㄔO(shè)備、系統(tǒng))數(shù)據(jù)。空閑抽取標(biāo)準(zhǔn)增量優(yōu)先標(biāo)準(zhǔn)為到達(dá)ODS-O系統(tǒng)準(zhǔn)實時要求,假如源系統(tǒng)提供實時/準(zhǔn)實時接口,ODS-O系統(tǒng)要實現(xiàn)實時數(shù)據(jù)抽取接口。實時抽取標(biāo)準(zhǔn)源數(shù)據(jù)抽取,應(yīng)遵自頂向下標(biāo)準(zhǔn)。即遵照綜合網(wǎng)管/ODS-B,專業(yè)網(wǎng)管/BSS/MSS,網(wǎng)元/平臺先后次序,上一層采集源無法滿足要求,再考慮下一層采集源。自頂向下標(biāo)準(zhǔn)1.數(shù)據(jù)抽取不影響源系統(tǒng)性能.2.在不影響源系統(tǒng)性能前提下,ODS-O系統(tǒng)抽取數(shù)據(jù)要盡可能實時.3.控制數(shù)據(jù)抽取過程中產(chǎn)生流量不會對源系統(tǒng)和網(wǎng)絡(luò)產(chǎn)生影響.標(biāo)準(zhǔn)設(shè)計目標(biāo)在源系統(tǒng)數(shù)據(jù)有時間戳情況下,應(yīng)優(yōu)先實現(xiàn)增量抽取,并定時進(jìn)行全量同時。第39頁目錄重點專題OSS數(shù)據(jù)共享管理專題OSS數(shù)據(jù)質(zhì)量管理專題數(shù)據(jù)分類及抽取標(biāo)準(zhǔn)數(shù)據(jù)整合功效設(shè)計數(shù)據(jù)整合概述ODS-O數(shù)據(jù)應(yīng)用專題ODS-O數(shù)據(jù)整合專題第40頁ODS-O數(shù)據(jù)整合功效設(shè)計數(shù)據(jù)整合管理數(shù)據(jù)整合過程數(shù)據(jù)整合管控數(shù)據(jù)抽取數(shù)據(jù)清洗數(shù)據(jù)轉(zhuǎn)換整合異常管控整合任務(wù)管理0級功效域1級功效域2級功效域數(shù)據(jù)加載簡述:ODS-O經(jīng)過各種技術(shù)準(zhǔn)實時從源系統(tǒng)中抽取數(shù)據(jù),抽取來數(shù)據(jù)首先抵達(dá)ODS-O接口數(shù)據(jù)層,然后經(jīng)過清洗、轉(zhuǎn)換和加載等工作抵達(dá)整合數(shù)據(jù)層,形成ODS-O關(guān)鍵數(shù)據(jù)。數(shù)據(jù)整合域功效主要包含數(shù)據(jù)整合配置和數(shù)據(jù)整合過程、數(shù)據(jù)整合管控三大部分。數(shù)據(jù)整合配置整合方式配置整合規(guī)則配置整合頻度配置整合查詢統(tǒng)計第41頁ODS-O數(shù)據(jù)整合功效-數(shù)據(jù)整合配置整合規(guī)則配置整合規(guī)則是在數(shù)據(jù)整合過程中,各個階段對數(shù)據(jù)處理約束和要求,對數(shù)據(jù)起源和操作明確需要遵照要求。整合方式配置整合方式是為數(shù)據(jù)整合過程制訂實現(xiàn)路徑,針對不一樣數(shù)據(jù)特征和不一樣整合階段,選擇最優(yōu)實現(xiàn)路徑。整合頻度配置整合頻度是為選擇整合方式確定實現(xiàn)周期,時間點,需要從數(shù)據(jù)源系統(tǒng)生產(chǎn)壓力、系統(tǒng)架構(gòu)等方面來綜合考慮頻度。整合規(guī)則配置功效 -整合規(guī)則配置含有針對性、靈活性、細(xì)粒度特點。
–整合規(guī)則包含數(shù)據(jù)抽取起源配置、數(shù)據(jù)抽取范圍配置、數(shù)據(jù)抽取清洗配置、數(shù)據(jù)抽取轉(zhuǎn)換配置、數(shù)據(jù)抽取加載配置等。整合方式配置功效
–整合方式配置包含數(shù)據(jù)抽取方式配置,如數(shù)據(jù)抽取方式包含全量,增量方式,數(shù)據(jù)加工方式配置,如數(shù)據(jù)加載方式能夠分為直接追加,全部覆蓋。
整合頻度配置功效 –提供不一樣級別數(shù)據(jù)更新頻度,如秒級、分鐘級、小時級、天或更長時間(包含周和月) –提供特殊情況頻度配置功效,如數(shù)據(jù)抽取時間和源系統(tǒng)輸出月報時間重合,則應(yīng)該順延到下一個采集周期,防止對源系統(tǒng)造成過大壓力第42頁ODS-O數(shù)據(jù)整合功效-數(shù)據(jù)整合過程數(shù)據(jù)抽取功效
–具備增量/全量、異步/同時等各種抽取方式。 –具備各種不一樣系統(tǒng)平臺和數(shù)據(jù)類型數(shù)據(jù)抽取。包含各種關(guān)系型數(shù)據(jù)庫系統(tǒng)、各種文件格式源數(shù)據(jù)等。 –具備ETL平臺抽取、應(yīng)用集成平臺、數(shù)據(jù)庫同時等數(shù)據(jù)抽取技術(shù)實現(xiàn)方式;數(shù)據(jù)抽取策略
–源數(shù)據(jù)含有數(shù)據(jù)量大、數(shù)據(jù)分散、業(yè)務(wù)系統(tǒng)工作負(fù)荷重,業(yè)務(wù)系統(tǒng)性能,實時性要求高等特點。在進(jìn)行數(shù)據(jù)抽取時,需要重點考慮數(shù)據(jù)抽取效率,以及對現(xiàn)有業(yè)務(wù)系統(tǒng)性能及安全影響。
–需要從抽取方式、抽取時機、抽取周期綜合考慮制訂抽取策略。 –數(shù)據(jù)抽取接口包含數(shù)據(jù)庫接口和文件接口等形式,對于不一樣數(shù)據(jù)平臺、不一樣源數(shù)據(jù)形式、不一樣性能要求和業(yè)務(wù)量業(yè)務(wù)系統(tǒng)以及不一樣數(shù)據(jù)量源數(shù)據(jù),采取不一樣數(shù)據(jù)抽取接口。數(shù)據(jù)整合過程-數(shù)據(jù)抽取數(shù)據(jù)抽取是指ODS-O從源系統(tǒng)獲取數(shù)據(jù),在實施時需要綜合考慮業(yè)務(wù)需求、抽取效率、源系統(tǒng)代價等原因確定抽取策略,抽取策略包含抽取方式(增量、全量)、抽取時機、抽取周期等.。第43頁ODS-O數(shù)據(jù)整合功效-數(shù)據(jù)整合過程數(shù)據(jù)清洗功效- 經(jīng)典數(shù)據(jù)清洗過程包含以下步驟:元素化、標(biāo)準(zhǔn)化、排錯校驗、去重匹配、錯重消除和歸檔。數(shù)據(jù)清洗策略-不完整數(shù)據(jù):原因是因為一些應(yīng)該有信息缺失,如供給商名稱、分企業(yè)名稱等。要求在要求時間內(nèi)補全。補全后才寫入ODS-O數(shù)據(jù)庫- 錯誤數(shù)據(jù):原因是因為源系統(tǒng)數(shù)據(jù)檢驗不夠健全,在接收輸入后沒有進(jìn)行判斷直接寫入后臺數(shù)據(jù)庫造成。需要在源數(shù)據(jù)中挑選出來,交由業(yè)務(wù)主管部門要求限期修正,修正之后再抽取重復(fù)數(shù)據(jù):原因是因為源系統(tǒng)數(shù)據(jù)模型存在不足,主鍵或者約束存在缺點。要求由源系統(tǒng)進(jìn)行數(shù)據(jù)模型完善,不然由源系統(tǒng)整理數(shù)據(jù)后繼續(xù)抽取數(shù)據(jù)清洗任務(wù)是過濾不符合要求數(shù)據(jù),并將過濾結(jié)果提交數(shù)據(jù)主管系統(tǒng)(部門),確認(rèn)是否由業(yè)務(wù)單位修正之后再進(jìn)行抽取。不符合要求數(shù)據(jù)主要有不完整數(shù)據(jù)、錯誤數(shù)據(jù)和重復(fù)數(shù)據(jù)三大類。數(shù)據(jù)整合過程-數(shù)據(jù)清洗第44頁ODS-O數(shù)據(jù)整合功效-數(shù)據(jù)整合過程數(shù)據(jù)轉(zhuǎn)換功效-數(shù)據(jù)轉(zhuǎn)換功效應(yīng)支持在不一樣源系統(tǒng)之間數(shù)據(jù)轉(zhuǎn)換,支持不一樣數(shù)據(jù)源系統(tǒng)平臺,支持?jǐn)?shù)據(jù)定義、數(shù)據(jù)結(jié)構(gòu)和錯誤數(shù)據(jù)轉(zhuǎn)換處理。數(shù)據(jù)轉(zhuǎn)換策略-格式轉(zhuǎn)換:格式轉(zhuǎn)換包含數(shù)據(jù)類型轉(zhuǎn)換,數(shù)據(jù)精度轉(zhuǎn)換,空值(NULL)判斷處理,字符串處理,日期格式處理,參考轉(zhuǎn)換,數(shù)據(jù)拆分和組合等。-數(shù)據(jù)翻譯:在映射過程中,有些信息是直接能夠從源數(shù)據(jù)得到,如0代表性別女,1代表性別男等。而有些并不能從源數(shù)據(jù)直接得到,需要對源數(shù)據(jù)進(jìn)行一定計算、合并、拆分等翻譯操作,如建立源數(shù)據(jù)表、字段與目標(biāo)數(shù)據(jù)表、字段對應(yīng)關(guān)系等。-數(shù)據(jù)衍生:ODS-O系統(tǒng)中數(shù)據(jù)圍繞企業(yè)生產(chǎn)運行分析應(yīng)用,所以存在大量上下文信息,源系統(tǒng)數(shù)據(jù)需要提煉出來才能為ODS-O系統(tǒng)所使用。數(shù)據(jù)整合過程-數(shù)據(jù)轉(zhuǎn)換數(shù)據(jù)轉(zhuǎn)換包含格式轉(zhuǎn)換、數(shù)據(jù)翻譯、數(shù)據(jù)衍生、簡單數(shù)據(jù)聚合等。多數(shù)情況下,數(shù)據(jù)源到ODS-O之間主要轉(zhuǎn)換是格式轉(zhuǎn)換、數(shù)據(jù)翻譯、數(shù)據(jù)衍生,而復(fù)雜數(shù)據(jù)聚合以及其它復(fù)雜計算主要在數(shù)據(jù)匯總時出現(xiàn)。第45頁ODS-O數(shù)據(jù)整合功效-數(shù)據(jù)整合過程數(shù)據(jù)加載功效
–批量數(shù)據(jù)數(shù)據(jù)庫直接加載,支持多個數(shù)據(jù)庫連接,能夠進(jìn)行大量數(shù)據(jù)并行 加載 –自動與手工預(yù)加載流程。當(dāng)日常數(shù)據(jù)加載犯錯,普通能夠采取人工干預(yù)方式來進(jìn)行 –各種加載數(shù)據(jù)方式,如直接追加、全部覆蓋、更新追加數(shù)據(jù)加載策略 –直接追加:是指每次加載時直接將數(shù)據(jù)追加到目標(biāo)表中。對于事件數(shù)據(jù),普通采取此方法,開通類、調(diào)度類等數(shù)據(jù)能夠采取直接追加方式 –全部覆蓋:對于抽取數(shù)據(jù)本身已包含了數(shù)據(jù)當(dāng)前和全部歷史情況,對目標(biāo)表采取 全部覆蓋方式。如資源服務(wù)規(guī)格、專業(yè)服務(wù)規(guī)格等數(shù)據(jù)能夠全部覆蓋方式; –更新追加:對于需要連續(xù)統(tǒng)計業(yè)務(wù)狀態(tài)改變,用當(dāng)前最新狀態(tài)同歷史狀態(tài)數(shù)據(jù) 進(jìn)行對比情況采取更新追加方式。如客戶、產(chǎn)品、資源數(shù)據(jù)加載數(shù)據(jù)整合過程-數(shù)據(jù)加載數(shù)據(jù)加載是指將抽取、清洗和轉(zhuǎn)換后數(shù)據(jù)加載到ODS-O中,包含數(shù)據(jù)行加載和數(shù)據(jù)塊加載。在綜合考慮效率和業(yè)務(wù)實現(xiàn)等原因基礎(chǔ)上確定數(shù)據(jù)加載周期和數(shù)據(jù)加載策略。第46頁ODS-O數(shù)據(jù)整合功效-數(shù)據(jù)整合管控整合異常管控功效
–校驗點。當(dāng)外部數(shù)據(jù)統(tǒng)計尤其龐大時,假如因為某種原因發(fā)生故障中止后,能夠從最近校驗點開始處恢復(fù)處理。 –外部數(shù)據(jù)統(tǒng)計錯誤限制訂義,同時將發(fā)生錯誤數(shù)據(jù)統(tǒng)計輸出。整合異常管控經(jīng)過總數(shù)據(jù)量和有效數(shù)據(jù)量、拒絕數(shù)據(jù)量等方面評定數(shù)據(jù)整合詳細(xì)運行情況,以發(fā)覺數(shù)據(jù)整合過程中相關(guān)數(shù)據(jù)問題,并進(jìn)行必要處理。整合任務(wù)管理功效
–任務(wù)屬性配置,能夠?qū)Ω黜椚蝿?wù)屬性進(jìn)行配置,確定任務(wù)執(zhí)行應(yīng)用整合方式和整合規(guī)則。 –總?cè)蝿?wù)、分任務(wù)調(diào)度,使其按照設(shè)置條件自動按序執(zhí)行任務(wù),提供任務(wù)監(jiān)控視圖。整合任務(wù)管理任務(wù)管理主要包含初始化任務(wù)、任務(wù)監(jiān)控、任務(wù)異常處理,任務(wù)中止,任務(wù)回退等,同時對并發(fā)任務(wù)、高負(fù)載任務(wù)有良好管理和預(yù)警機制。整合查詢功效
–按照各種條件進(jìn)行組合查詢,能夠查詢各個階段運行結(jié)果。 –詳盡整合過程查詢統(tǒng)計,包含每個過程最終止果和反饋結(jié)果整合查詢統(tǒng)計對整合過程產(chǎn)生各種反饋數(shù)據(jù)、中間數(shù)據(jù)、異常數(shù)據(jù)和任務(wù)執(zhí)行情況等服務(wù)提供查詢、統(tǒng)計和分析功效第47頁目錄重點專題OSS數(shù)據(jù)共享管理專題OSS數(shù)據(jù)質(zhì)量管理專題OSS數(shù)據(jù)共享現(xiàn)實狀況與問題OSS數(shù)據(jù)共享ODS-O支撐共享數(shù)據(jù)識別與編碼要求ODS-O數(shù)據(jù)應(yīng)用專題ODS-O數(shù)據(jù)整合專題第48頁某省調(diào)研實例問題OSS數(shù)據(jù)共享現(xiàn)實狀況與問題系統(tǒng)間兩兩互聯(lián)訪問對方數(shù)據(jù)系統(tǒng)間數(shù)據(jù)依賴成復(fù)雜不規(guī)則網(wǎng)狀結(jié)構(gòu)數(shù)據(jù)通道缺乏統(tǒng)一規(guī)劃部分?jǐn)?shù)據(jù)全部者不清楚接口情況:總共1491個,其中:OSS域內(nèi)系統(tǒng)間:1124個OSS-BSS域系統(tǒng)間:344個OSS-MSS域系統(tǒng)間:17個OSS域省與集團(tuán)間:2個現(xiàn)實狀況數(shù)據(jù)一致性得不到確保邏輯關(guān)系復(fù)雜,牽一發(fā)動全身接口眾多,增加開發(fā)和運維成本供給約定制開發(fā)系統(tǒng)不可替換第49頁目錄重點專題OSS數(shù)據(jù)共享管理專題OSS數(shù)據(jù)質(zhì)量管理專題OSS數(shù)據(jù)共享現(xiàn)實狀況與問題OSS數(shù)據(jù)共享ODS-O支撐共享數(shù)據(jù)識別與編碼要求ODS-O數(shù)據(jù)應(yīng)用專題ODS-O數(shù)據(jù)整合專題第50頁ODS-O數(shù)據(jù)共享總體思緒ODS-O數(shù)據(jù)實時性不能滿足生產(chǎn)系統(tǒng)要求查詢接口和數(shù)據(jù)同時直接由源系統(tǒng)提供EDA域內(nèi)數(shù)據(jù)共享由ODS-O直接開放視圖ODS-O數(shù)據(jù)實時性能夠滿足生產(chǎn)系統(tǒng)要求查詢接口和數(shù)據(jù)同時由ODS-O提供ODS-O負(fù)責(zé)OSS域內(nèi)數(shù)據(jù)共享(同時)配置和管控數(shù)據(jù)共享總體思緒1234改造不規(guī)則網(wǎng)狀數(shù)據(jù)接口為星型接口標(biāo)準(zhǔn)上,系統(tǒng)間需要共享數(shù)據(jù)查詢和批量數(shù)據(jù)同時都需要經(jīng)過ODS-O進(jìn)行清洗、轉(zhuǎn)換、存放和共享公布;因為技術(shù)限制,ODS-O數(shù)據(jù)實時性滿足不了生產(chǎn)系統(tǒng)要求,能夠直接由生產(chǎn)系統(tǒng)進(jìn)行提供,伴隨技術(shù)發(fā)展,ODS-O數(shù)據(jù)實時性能夠滿足要求,則改由ODS-O提供。描述第51頁ODS-O數(shù)據(jù)共享總體思緒流程圖是否重新開始由ODS-O提供數(shù)據(jù)查詢和數(shù)據(jù)同時結(jié)束開始目標(biāo)系統(tǒng)業(yè)務(wù)需要數(shù)據(jù)更新周期>=ODS-O系統(tǒng)數(shù)據(jù)更新周期由源系統(tǒng)提供數(shù)據(jù)查詢和數(shù)據(jù)同時目標(biāo)系統(tǒng)是否是EDA域系統(tǒng)目標(biāo)系統(tǒng)是否是OSS域系統(tǒng)由ODS-O開放數(shù)據(jù)視圖異常處理是否是是否否是第52頁ODS-O數(shù)據(jù)共享方案設(shè)計EDAOSSODS-O數(shù)據(jù)提供視圖服務(wù)調(diào)用數(shù)據(jù)共享管控ODS-BODS-MEDW資源管理服務(wù)開通服務(wù)保障綜合網(wǎng)管專業(yè)網(wǎng)管其它系統(tǒng)數(shù)據(jù)整合數(shù)據(jù)共享數(shù)據(jù)共享①②③描述:跨MBO主數(shù)據(jù)、提供給EDW數(shù)據(jù),直接開放視圖,目標(biāo)系統(tǒng)經(jīng)過ETL抽取場景:ODS-B經(jīng)過ODS-O獲取OSS域地址數(shù)據(jù)數(shù)據(jù)視圖描述:OSS域內(nèi)系統(tǒng)經(jīng)過企業(yè)應(yīng)用集成平臺調(diào)用ODS-O提供準(zhǔn)實時數(shù)據(jù)查詢服務(wù)。場景:服務(wù)保障經(jīng)過ODS-O查詢障礙單關(guān)聯(lián)客戶數(shù)據(jù)。服務(wù)調(diào)用描述:小批量準(zhǔn)實時數(shù)據(jù)同時,直接經(jīng)過集成平臺控制消息和數(shù)據(jù)交互。場景:組織員工數(shù)據(jù)增量更新。小批量數(shù)據(jù)提供企業(yè)應(yīng)用集成平臺描述:大批量準(zhǔn)實時數(shù)據(jù)同時,經(jīng)過集成平臺進(jìn)行控制消息交互,數(shù)據(jù)由接口表/文件進(jìn)行傳遞。場景:產(chǎn)品實例批量數(shù)據(jù)同時。大批量數(shù)據(jù)同時④第53頁ODS-O數(shù)據(jù)共享過程交互數(shù)據(jù)共享過程數(shù)據(jù)視圖共享實時數(shù)據(jù)查詢小批量數(shù)據(jù)同時大批量數(shù)據(jù)同時經(jīng)過開放視圖,目標(biāo)系統(tǒng)經(jīng)過ETL直接抽取第54頁ODS-O數(shù)據(jù)共享過程交互數(shù)據(jù)共享過程數(shù)據(jù)視圖共享實時數(shù)據(jù)查詢小批量數(shù)據(jù)同時大批量數(shù)據(jù)同時經(jīng)過應(yīng)用集成平臺調(diào)用實時數(shù)據(jù)查詢服務(wù)第55頁ODS-O數(shù)據(jù)共享過程交互數(shù)據(jù)共享過程數(shù)據(jù)視圖共享實時數(shù)據(jù)查詢小批量數(shù)據(jù)同時大批量數(shù)據(jù)同時經(jīng)過應(yīng)用集成平臺異步消息實現(xiàn)第56頁ODS-O數(shù)據(jù)共享過程交互數(shù)據(jù)共享過程數(shù)據(jù)視圖共享實時數(shù)據(jù)查詢小批量數(shù)據(jù)同時大批量數(shù)據(jù)同時經(jīng)過應(yīng)用集成平臺異步消息+接口表/文件實現(xiàn)第57頁<?xmlversion="1.0"encoding="GB2312"?><msg> <route> <!--路由信息--> <from>發(fā)送系統(tǒng)</from> <to>接收系統(tǒng)</to> <type>共享數(shù)據(jù)類型</type> <area>區(qū)域標(biāo)識</area> </route> <public> <!--公共信息--> <ds_msg> <time>發(fā)送時間</time> <ds_msg_id>消息ID</ds_msg_id> <ds_msg_desc>消息描述</ds_msg_desc> <ds_msg_temp>使用消息模板</ds_msg_temp> <ds_msg_version>消息模板版本</ds_msg_version> <ds_msg_class>消息類別</ds_msg_class> </ds_msg> <ds_data> <bat_id>批次號</bat_id> <increment>增量/全量</increment> <realtime>實時/非實時</realtime> <synch>同時/異步</synch> <bigbat>大批量/小批量</bigbat> <period>更新周期</period> <tab_rec_ins_num>本批次更新統(tǒng)計數(shù)</tab_rec_ins_num> <carry_type>承載類型(xml/接口表)</carry_type> </ds_data> </public> <private>
<!—私有信息--> </private></msg>ODS-O數(shù)據(jù)共享消息格式1、消息采取XML描述;2、基于分層思想設(shè)計,表達(dá)路由層、公共描述層、私有描述層;3、路由層:決定共享數(shù)據(jù)被哪些目標(biāo)系統(tǒng)使用和在應(yīng)用集成平臺上路由;4、公共描述層:任何數(shù)據(jù)共享必須描述公共信息,如:全量/增量;5、私有描述層:共享詳細(xì)業(yè)務(wù)數(shù)據(jù),及與業(yè)務(wù)相關(guān)私有信息;6、監(jiān)控和統(tǒng)計分析需要關(guān)鍵屬性要表達(dá)出來。總體要求示例第58頁ODS-O數(shù)據(jù)共享全過程數(shù)據(jù)整合元數(shù)據(jù)描述數(shù)據(jù)共享管控分析1234能夠?qū)?shù)據(jù)共享功效域中使用到元數(shù)據(jù)進(jìn)行配置,包含使用共享數(shù)據(jù)系統(tǒng)配置、共享數(shù)據(jù)實體數(shù)據(jù)結(jié)構(gòu)和語義描述、共享方式等。關(guān)聯(lián)絡(luò)統(tǒng)描述:管理共享數(shù)據(jù)關(guān)聯(lián)到系統(tǒng),并對系統(tǒng)進(jìn)行相關(guān)描述共享實體描述:共享數(shù)據(jù)實體進(jìn)行標(biāo)識、名稱、起源系統(tǒng)、字段描述等共享方式描述:承載方式、增/全量等以提升數(shù)據(jù)質(zhì)量和數(shù)據(jù)標(biāo)準(zhǔn)化為目標(biāo),包含:數(shù)據(jù)抽?。簭臄?shù)據(jù)源系統(tǒng)獲取數(shù)據(jù),需要考慮抽取策略包含增量/全量、抽取時機、抽取周期等。數(shù)據(jù)清洗:主要是指去除對系統(tǒng)無用或者不符合數(shù)據(jù)格式規(guī)范“臟數(shù)據(jù)”,如:數(shù)據(jù)完整性及一致性檢驗,噪聲數(shù)據(jù)處理,缺失數(shù)據(jù)填充,重復(fù)統(tǒng)計消除。數(shù)據(jù)轉(zhuǎn)換:主要是將源系統(tǒng)數(shù)據(jù)按照企業(yè)數(shù)據(jù)模型進(jìn)行轉(zhuǎn)換,如數(shù)據(jù)格式和數(shù)據(jù)類型轉(zhuǎn)換、數(shù)據(jù)翻譯、數(shù)據(jù)匹配、數(shù)據(jù)聚合以及其它復(fù)雜計算等。數(shù)據(jù)加載:指將抽取轉(zhuǎn)換后數(shù)據(jù)加載到ODS中,包含數(shù)據(jù)行加載和數(shù)據(jù)塊加載?;谡虾髽?biāo)準(zhǔn)數(shù)據(jù),共享給外部系統(tǒng),包含:共享配置:數(shù)據(jù)服務(wù)定義、數(shù)據(jù)服務(wù)目錄、數(shù)據(jù)服務(wù)參數(shù)配置(如:目標(biāo)系統(tǒng)、共享方式、數(shù)據(jù)承載方式、訪問頻率、訪問允許時段)等。數(shù)據(jù)視圖:目標(biāo)系統(tǒng)是EDA域內(nèi)系統(tǒng),直接開放視圖訪問權(quán)限,由目標(biāo)系統(tǒng)經(jīng)過ETL進(jìn)行數(shù)據(jù)抽取。服務(wù)提供:目標(biāo)系統(tǒng)是OSS內(nèi)部系統(tǒng),由目標(biāo)系統(tǒng)直接經(jīng)過應(yīng)用集成平臺調(diào)用ODS-O提供數(shù)據(jù)查詢服務(wù),完成數(shù)據(jù)查詢。數(shù)據(jù)同時:目標(biāo)系統(tǒng)是OSS內(nèi)部系統(tǒng),批量數(shù)據(jù)經(jīng)過消息/消息+接口表/文件同時給目標(biāo)系統(tǒng)。各數(shù)據(jù)共享過程進(jìn)行監(jiān)控、異常處理、日志管理,并對數(shù)據(jù)共享相關(guān)數(shù)據(jù)提供查詢統(tǒng)計和分析功效。共享過程監(jiān)控:對共享過程提供監(jiān)控伎倆,發(fā)覺異常能夠?qū)崟r告警,同時監(jiān)控各系統(tǒng)是否正常按照配置規(guī)則進(jìn)行數(shù)據(jù)共享。過程異常處理:對共享過程中產(chǎn)生異常,提供處理伎倆,或者提供接口派單至保障系統(tǒng)進(jìn)行處理。共享日志管理:對共享過程中產(chǎn)生各種日志能夠進(jìn)行查詢和清理,包含配置日志、共享日志、異常日志等。查詢統(tǒng)計分析:對共享過程產(chǎn)生控制消息、共享數(shù)據(jù)、共享數(shù)據(jù)服務(wù)提供查詢、統(tǒng)計和分析功效。第59頁ODS-O數(shù)據(jù)共享功效設(shè)計數(shù)據(jù)共享共享配置管理數(shù)據(jù)共享過程數(shù)據(jù)共享管控基礎(chǔ)數(shù)據(jù)配置共享服務(wù)配置共享權(quán)限配置共享配置下發(fā)數(shù)據(jù)視圖共享實時數(shù)據(jù)查詢小批量數(shù)據(jù)同時大批量數(shù)據(jù)同時共享過程監(jiān)控過程異常處理共享日志管理查詢統(tǒng)計分析0級功效域1級功效域2級功效域簡述:共享配置管理對共享數(shù)據(jù)內(nèi)容和共享規(guī)則進(jìn)行配置數(shù)據(jù)共享過程經(jīng)過各種方式實現(xiàn)不一樣數(shù)據(jù)共享數(shù)據(jù)共享管控對數(shù)據(jù)共享過程進(jìn)行監(jiān)控、異常處理、日志管理,并提供查詢統(tǒng)計和分析功效。第60頁目錄重點專題OSS數(shù)據(jù)共享管理專題OSS數(shù)據(jù)質(zhì)量管理專題OSS數(shù)據(jù)共享現(xiàn)實狀況與問題OSS數(shù)據(jù)共享ODS-O支撐共享數(shù)據(jù)識別與編碼要求ODS-O數(shù)據(jù)應(yīng)用專題ODS-O數(shù)據(jù)整合專題第61頁服務(wù)開通共享數(shù)據(jù)分布東部省OSS共享數(shù)據(jù)實體中部省OSS共享數(shù)據(jù)實體資源管理共享數(shù)據(jù)分布……西部省OSS共享數(shù)據(jù)實體ODS-O共享數(shù)據(jù)識別ODS-O
共享數(shù)據(jù)識別東部省OSS共享數(shù)據(jù)識別問卷中部省OSS共享數(shù)據(jù)識別問卷西部省OSS共享數(shù)據(jù)識別問卷CTG-MBOSSOSS服務(wù)開通系統(tǒng)規(guī)范V2.5_集成接口分冊CTG-MBOSSOSS資源管理系統(tǒng)規(guī)范V2.5_集成接口分冊……ODS-O共享數(shù)據(jù)集合1、不一樣OSS系統(tǒng)內(nèi)存在相對靜態(tài)數(shù)據(jù)副本,副本數(shù)據(jù)應(yīng)該經(jīng)過ODS-O共享,如客戶資料;2、同一對象、關(guān)系在不一樣OSS系統(tǒng)內(nèi)進(jìn)行管理,描述不完整,如客戶-產(chǎn)品-資源;3、同一數(shù)據(jù)多個OSS系統(tǒng)使用,分擔(dān)源系統(tǒng)壓力,-如:地址、客戶。識別標(biāo)準(zhǔn)第62頁ODS-O共享數(shù)據(jù)集合主題域?qū)嶓w名稱BSSOSSMSSCRM運行管理及生產(chǎn)指揮服務(wù)開通施工調(diào)度服務(wù)保障資源管理激活服務(wù)質(zhì)量管理綜合告警無線網(wǎng)優(yōu)專業(yè)網(wǎng)管GIS平臺固定資產(chǎn)物資管理人力工程參加人主題域客戶CRUDRRRRRRRRR員工RRRRRRRRRRRRRRCRUD合作搭檔(施工人員)CRUDRR產(chǎn)品主題域產(chǎn)品規(guī)格CRUDRRRRRRRR產(chǎn)品實例CRUDRRRRRRRR事件主題域服務(wù)定單CRUDRR申告障礙單CRUDRR開通工單CRUDRRRR保障工單CRUDR激活子工單CRUDR施工任務(wù)單CRUDR服務(wù)開通SLA指標(biāo)CRUDRRRR異常原因CRUDRRR服務(wù)主題域資源服務(wù)規(guī)格RRRCRUDRR資源服務(wù)實例RRRCRUDRR施工調(diào)度專業(yè)服務(wù)規(guī)格RCRUDR施工調(diào)度專業(yè)服務(wù)實例RCRUDR激活專業(yè)服務(wù)規(guī)格RCRUDR激活專業(yè)服務(wù)實例RCRUDR保障專業(yè)服務(wù)規(guī)格CRUDR保障專業(yè)服務(wù)實例CRUDR地域主題域行政區(qū)域RCRUD電信管理區(qū)域RRRRRCRUDRRRRRRR標(biāo)準(zhǔn)地址RRRRCRUD資源主題域資源規(guī)格RRRRCRUDRRRRRRR資源實例RRRRCRUDRRRRRRR第63頁ODS-O共享數(shù)據(jù)模型事件服務(wù)綜合告警業(yè)務(wù)激活資源管理生產(chǎn)指揮。。。。服務(wù)開通服務(wù)保障網(wǎng)絡(luò)資源其它市場計劃營銷活動銷售活動市場營銷產(chǎn)品規(guī)格產(chǎn)品實例產(chǎn)品賬戶支付定價計劃帳務(wù)財務(wù)行政區(qū)域電信管理區(qū)域地域資源服務(wù)專業(yè)服務(wù)服務(wù)復(fù)合資源物理資源邏輯資源資源參加人創(chuàng)建、管理、購置產(chǎn)品參加人客戶員工合作搭檔參加人發(fā)起/接收市場營銷營銷針對產(chǎn)品參加人指定帳務(wù)關(guān)系,為產(chǎn)品使用付費參加人觸發(fā)/經(jīng)歷事件參加人所屬地域事件內(nèi)部工作事件客戶交互事件事件銷售類事件事件發(fā)生地域計費事件指定產(chǎn)品支付關(guān)系/計算產(chǎn)品發(fā)生費用計費地域以及賬單投送地址事件關(guān)聯(lián)服務(wù)產(chǎn)品關(guān)聯(lián)服務(wù)服務(wù)關(guān)聯(lián)資源營銷、銷售地域資源覆蓋地域參考EDM3.0參加人主題域中客戶、員工、合作搭檔數(shù)據(jù)模型。參考EDM3.0產(chǎn)品主題域中產(chǎn)品規(guī)格、產(chǎn)品實例數(shù)據(jù)模型。參考OSS2.5規(guī)范服務(wù)開通、施工調(diào)度、激活、服務(wù)保障數(shù)據(jù)模型中事件主題域數(shù)據(jù)模型。參考OSS2.5規(guī)范網(wǎng)絡(luò)資源管理系統(tǒng)數(shù)據(jù)模型中地域主題域數(shù)據(jù)模型。參考OSS2.5規(guī)范網(wǎng)絡(luò)資源、施工調(diào)度、激活、服務(wù)保障數(shù)據(jù)模型中服務(wù)主題域數(shù)據(jù)模型。參考OSS2.5規(guī)范網(wǎng)路資源數(shù)據(jù)模型中資源主題域數(shù)據(jù)模型。第64頁數(shù)據(jù)編碼相關(guān)規(guī)范要求數(shù)據(jù)架構(gòu)和數(shù)據(jù)管控:企業(yè)數(shù)據(jù)模型定義業(yè)務(wù)實體標(biāo)識編碼規(guī)范,如客戶采取16位純數(shù)字編碼,由客戶關(guān)鍵標(biāo)識碼(12位)和客戶擴展碼(4位)兩部分組成。ITSP2.0數(shù)據(jù)編碼:目標(biāo)是對企業(yè)業(yè)務(wù)流程標(biāo)準(zhǔn)化,數(shù)據(jù)編碼表達(dá)在企業(yè)業(yè)務(wù)流程各個步驟。比如,統(tǒng)一產(chǎn)品編碼為企業(yè)各業(yè)務(wù)部門提供了一套統(tǒng)一產(chǎn)品銷售和經(jīng)營標(biāo)準(zhǔn)。EDA1.0數(shù)據(jù)模型概念:描述數(shù)據(jù)、數(shù)據(jù)之間關(guān)系圖形化視圖,詳細(xì)指用實體、屬性及其關(guān)系對企業(yè)運行和管理過程中包括全部業(yè)務(wù)概念和業(yè)務(wù)規(guī)則,同時規(guī)范化對應(yīng)定義、命名和編碼。另外,在附件一主數(shù)據(jù)中給出了對應(yīng)編碼。EDM3.0統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn):ODS中建立標(biāo)準(zhǔn)數(shù)據(jù)編碼目錄,源系統(tǒng)數(shù)據(jù)依據(jù)標(biāo)準(zhǔn)數(shù)據(jù)編碼目錄,經(jīng)過整合后進(jìn)入ODS中存放,實現(xiàn)企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)化與統(tǒng)一存放。整合數(shù)據(jù)層:整合數(shù)據(jù)層中數(shù)據(jù)標(biāo)準(zhǔn)上是統(tǒng)一編碼格式數(shù)據(jù),可作為企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)指導(dǎo)外圍系統(tǒng)逐步統(tǒng)一數(shù)據(jù)格式。ODS1.0第65頁ODS-O共享數(shù)據(jù)編碼要求1234其它要求共享數(shù)據(jù)編碼表達(dá)以下三類編碼:實體編碼、上級編碼、內(nèi)部編碼共享數(shù)據(jù)編碼實現(xiàn)需要管理和各IT系統(tǒng)強制落地,編碼制訂需要在實施難度和實施成本上進(jìn)行權(quán)衡和綜合考慮唯一性源系統(tǒng)負(fù)責(zé)生成和維護(hù)共享數(shù)據(jù)實體內(nèi)部數(shù)據(jù)編碼,確保其生成數(shù)據(jù)內(nèi)部編碼在系統(tǒng)間唯一性O(shè)DS-O在數(shù)據(jù)整合過程中,會負(fù)責(zé)檢驗源系統(tǒng)數(shù)據(jù)編碼規(guī)范性和唯一性。繼承性對集團(tuán)下發(fā)各類共享數(shù)據(jù)編碼規(guī)范要有繼承性:如客戶編碼規(guī)范、產(chǎn)品編碼規(guī)范、資源編碼規(guī)范、主數(shù)據(jù)編碼規(guī)范對集團(tuán)未規(guī)范共享數(shù)據(jù)實體,由省企業(yè)參考集團(tuán)下發(fā)編碼規(guī)范進(jìn)行制訂,如產(chǎn)品實例編碼可讀性統(tǒng)一編碼含有可讀性,不使用數(shù)據(jù)庫序列號直接生成,需要進(jìn)行加工和含義描述統(tǒng)一編碼中遵照對應(yīng)規(guī)則約束,具相關(guān)鍵屬性標(biāo)識OSS共享數(shù)據(jù)編碼統(tǒng)一共享數(shù)據(jù)實體標(biāo)準(zhǔn)編碼是系統(tǒng)之間共享數(shù)據(jù)交互基礎(chǔ)。各系統(tǒng)均應(yīng)以公布標(biāo)準(zhǔn)編碼在系統(tǒng)間進(jìn)行共享數(shù)據(jù)相關(guān)信息查詢、關(guān)聯(lián)和同時,以實現(xiàn)系統(tǒng)間數(shù)據(jù)信息一致性。第66頁目錄重點專題OSS數(shù)據(jù)共享管理專題OSS數(shù)據(jù)質(zhì)量管理專題ODS-O數(shù)據(jù)應(yīng)用專題數(shù)據(jù)質(zhì)量管理范圍數(shù)據(jù)質(zhì)量管理支撐ODS-O數(shù)據(jù)整合專題第67頁產(chǎn)生數(shù)據(jù)質(zhì)量問題原因支撐企業(yè)運行數(shù)據(jù)分散存放在多個系統(tǒng)或網(wǎng)元之中,造成數(shù)據(jù)分散;缺乏貫通,而系統(tǒng)或網(wǎng)元數(shù)據(jù)模型又存在著差異,之間又缺乏統(tǒng)一和有效數(shù)據(jù)交互接口和協(xié)議,而業(yè)務(wù)復(fù)雜性又會使流程跨多個系統(tǒng)或網(wǎng)元,各系統(tǒng)或網(wǎng)元間交換數(shù)據(jù)過程中輕易犯錯;系統(tǒng)分散、平臺復(fù)雜沒有統(tǒng)一部門協(xié)調(diào)數(shù)據(jù)質(zhì)量管理工作,包含對各系統(tǒng)基礎(chǔ)數(shù)據(jù)未進(jìn)行統(tǒng)一管控和公布,如存在未經(jīng)授權(quán)任意設(shè)計和添加系統(tǒng)基礎(chǔ)數(shù)據(jù)模版,存在未授權(quán)未審批數(shù)據(jù)操作,沒有嚴(yán)格指令測試和驗證流程,沒有建立完善事后稽核機制。數(shù)據(jù)管控體系不健全指令操作失誤或指令版本錯誤,指令配置錯誤或指令粒度不夠細(xì)造成數(shù)據(jù)犯錯,人為原因干擾多,流程不規(guī)范造成數(shù)據(jù)不一致。人為在數(shù)據(jù)錄入或操作上引發(fā)數(shù)據(jù)質(zhì)量問題,如未嚴(yán)格參考企業(yè)數(shù)據(jù)規(guī)范來進(jìn)行錄入或操作,如:命名規(guī)范,模版設(shè)計。數(shù)據(jù)操作人工步驟多生產(chǎn)運行流程不合理業(yè)務(wù)推廣期規(guī)劃和BSS要求不相符。如用戶套餐、產(chǎn)品遷移方案時考慮不周,或?qū)嵤┻w移方案出現(xiàn)紕漏。系統(tǒng)在進(jìn)行規(guī)劃建設(shè)時沒有充分考慮數(shù)據(jù)質(zhì)量問題,包含怎樣和在網(wǎng)數(shù)據(jù)以及跨系統(tǒng)間數(shù)據(jù)保持一致。割接前后端銜接欠缺規(guī)劃對數(shù)據(jù)考慮不足缺乏統(tǒng)一和完整數(shù)據(jù)平臺來支撐全局和跨域、跨系統(tǒng)數(shù)據(jù)比對以及數(shù)據(jù)稽核。整個OSS域缺乏一個長久和連續(xù)數(shù)據(jù)稽核機制。缺乏有效IT伎倆(平臺)支撐第68頁數(shù)據(jù)質(zhì)量范圍和目標(biāo)OSSBSS網(wǎng)元/平臺MSS234156⑤OSS內(nèi)部數(shù)據(jù)質(zhì)量問題④MSS/OSS之間數(shù)據(jù)質(zhì)量問題③BSS/OSS之間數(shù)據(jù)質(zhì)量問題②OSS/網(wǎng)元及業(yè)務(wù)平臺之間數(shù)據(jù)質(zhì)量問題①BSS/網(wǎng)元及業(yè)務(wù)平臺之間數(shù)據(jù)質(zhì)量問題⑥網(wǎng)元及業(yè)務(wù)平臺內(nèi)部數(shù)據(jù)質(zhì)量問題數(shù)據(jù)一致性數(shù)據(jù)完整性數(shù)據(jù)正確性源系統(tǒng)彼此間信息存在沖突和差異,或者同一源系統(tǒng)內(nèi)部冗余信息之間存在沖突。
一些信息缺失或未填充,或跨域、跨系統(tǒng)數(shù)據(jù)間無法完整耦合,造成數(shù)據(jù)不完整,從而形成不了企業(yè)統(tǒng)一運行視圖,雖不影響源系統(tǒng)正常運轉(zhuǎn),但這些信息缺失會影響ODS-O數(shù)據(jù)整合;數(shù)據(jù)無效或錯誤,違反數(shù)據(jù)約束規(guī)則、業(yè)務(wù)規(guī)則等。數(shù)據(jù)唯一性對數(shù)據(jù)唯一性約束進(jìn)行檢驗,清理出源系統(tǒng)中存在垃圾數(shù)據(jù)等。數(shù)據(jù)連續(xù)性對有連續(xù)性特征數(shù)據(jù)進(jìn)行檢驗,發(fā)覺數(shù)據(jù)不連續(xù)現(xiàn)象等。數(shù)據(jù)時效性對有時效特征數(shù)據(jù)進(jìn)行檢驗,發(fā)覺數(shù)據(jù)不及時和數(shù)據(jù)延時現(xiàn)象等?;颂幚砜缬?、跨平臺和O域內(nèi)系統(tǒng)數(shù)據(jù)質(zhì)量第69頁數(shù)據(jù)質(zhì)量稽核示例一級目錄二級目錄三級目錄四級目錄BSS/網(wǎng)元平臺數(shù)據(jù)一致性
CRM與移動網(wǎng)元數(shù)據(jù)一致性
CRM與HLR數(shù)據(jù)一致性
CRM與HLR用戶數(shù)據(jù)一致性
CRM與HLR用戶屬性數(shù)據(jù)一致性
CRM與HLR、IVPN數(shù)據(jù)一致性
CRM與HLR、PPC數(shù)據(jù)一致性
CRM與HLR、AAA數(shù)據(jù)一致性
CRM與HLR、彩鈴數(shù)據(jù)一致性
CRM與HLR/PPC/彩鈴/短信平臺數(shù)據(jù)一致性
CRM與數(shù)據(jù)網(wǎng)元數(shù)據(jù)一致性
CRM與AAA數(shù)據(jù)一致性
CRM與固網(wǎng)網(wǎng)元數(shù)據(jù)一致性
CRM與SHLR數(shù)據(jù)一致性
CRM與交換機數(shù)據(jù)一致性
CRM與業(yè)務(wù)網(wǎng)元數(shù)據(jù)一致性
CRM與彩鈴平臺數(shù)據(jù)一致性
CRM與短信平臺數(shù)據(jù)一致性
示例示例第70頁數(shù)據(jù)質(zhì)量范圍說明BSS/網(wǎng)元及業(yè)務(wù)平臺之間產(chǎn)品信息和業(yè)務(wù)狀態(tài)等數(shù)據(jù)一致性和正確性。OSS/網(wǎng)元及業(yè)務(wù)平臺之間端口(狀態(tài))、電路資料等數(shù)據(jù)一致性和正確性。BSS/OSS之間產(chǎn)品、客戶、地址、碼號及業(yè)務(wù)狀態(tài)等等數(shù)據(jù)一致性和正確性,以及從客戶到產(chǎn)品再到資源等跨域、跨系統(tǒng)數(shù)據(jù)完整性。MSS/OSS之間組織、員工、工程項目等數(shù)據(jù)一致性和正確性。OSS內(nèi)部地域、空間資源、配置和資源之間數(shù)據(jù)一致性、完整性,以及資源和網(wǎng)管或網(wǎng)元之間數(shù)據(jù)一致性和正確性。網(wǎng)元及業(yè)務(wù)平臺內(nèi)部用戶屬性狀態(tài)等,如HLR和彩鈴平臺狀態(tài)等數(shù)據(jù)一致性和正確性。第71頁目錄重點專題OSS數(shù)據(jù)共享管理專題OSS數(shù)據(jù)質(zhì)量管理專題ODS-O數(shù)據(jù)應(yīng)用專題數(shù)據(jù)質(zhì)量管理范圍數(shù)據(jù)質(zhì)量管理支撐ODS-O數(shù)據(jù)整合專題第72頁ODS-O質(zhì)量檢驗計劃任務(wù)網(wǎng)絡(luò)運維管理數(shù)據(jù)質(zhì)量管理綜述—數(shù)據(jù)質(zhì)量管控流程計劃完成情況評定質(zhì)量檢驗計劃任務(wù)數(shù)據(jù)稽核及處理數(shù)據(jù)質(zhì)量匯報輸出2.對數(shù)據(jù)質(zhì)量檢驗任務(wù)進(jìn)行審核1.ODS-O依據(jù)本身數(shù)據(jù)質(zhì)量檢驗規(guī)則發(fā)起連續(xù)、長期有效數(shù)據(jù)質(zhì)量檢驗任務(wù)3.任務(wù)審核經(jīng)過后ODS-O進(jìn)行數(shù)據(jù)質(zhì)量稽核和處理73計劃審核1.相關(guān)部門、人員、系統(tǒng)等路徑獲取計劃任務(wù)4.ODS-O輸出數(shù)據(jù)質(zhì)量匯報5.對數(shù)據(jù)質(zhì)量匯報進(jìn)行評定開始結(jié)束數(shù)據(jù)質(zhì)量管理組織明確數(shù)據(jù)質(zhì)量管理責(zé)任單位。如客戶和產(chǎn)品數(shù)據(jù)由前端市場部門負(fù)責(zé),后端以前端數(shù)據(jù)為準(zhǔn)。數(shù)據(jù)質(zhì)量管理規(guī)范明確和制訂數(shù)據(jù)質(zhì)量管理規(guī)范;制訂對應(yīng)數(shù)據(jù)質(zhì)量管控流程集成應(yīng)用平臺連續(xù)和長期有效數(shù)據(jù)質(zhì)量管理和確保機制第73頁數(shù)據(jù)質(zhì)量管理綜述—數(shù)據(jù)質(zhì)量管控閉環(huán)過程發(fā)覺問題分析問題規(guī)則完善質(zhì)量檢驗數(shù)據(jù)修正工作考評數(shù)據(jù)工位數(shù)據(jù)工位業(yè)務(wù)人員數(shù)據(jù)管理組數(shù)據(jù)決議組經(jīng)驗積累規(guī)則積累異常數(shù)據(jù)歸屬源系統(tǒng)質(zhì)量目標(biāo)1、明確數(shù)據(jù)質(zhì)量管理組織機構(gòu),經(jīng)過在設(shè)置明確數(shù)據(jù)質(zhì)量職責(zé)來改進(jìn)數(shù)據(jù)質(zhì)量。2、經(jīng)過明確數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)及指導(dǎo)標(biāo)準(zhǔn)來推進(jìn)數(shù)據(jù)質(zhì)量意識。3、制訂數(shù)據(jù)質(zhì)量管控流程以及數(shù)據(jù)考評標(biāo)準(zhǔn)來連續(xù)推進(jìn)數(shù)據(jù)質(zhì)量管理工作。4、數(shù)據(jù)質(zhì)量管控需要從管理和技術(shù)、系統(tǒng)上進(jìn)行結(jié)合,很多步驟需要人為介入。5、數(shù)據(jù)質(zhì)量管控流程需要閉環(huán),ODS-O作為數(shù)據(jù)質(zhì)量管控中主要步驟提供技術(shù)和數(shù)據(jù)平臺支撐。
數(shù)據(jù)質(zhì)量決議小組其人員由主管業(yè)務(wù)領(lǐng)導(dǎo)牽頭,組成跨部門數(shù)據(jù)質(zhì)量決議團(tuán)體,負(fù)責(zé)制訂數(shù)據(jù)質(zhì)量目標(biāo),考評目標(biāo)以及明確詳細(xì)管控流程。
數(shù)據(jù)質(zhì)量管理小組其人員能夠由與數(shù)據(jù)打交道關(guān)鍵業(yè)務(wù)人員,熟悉支撐系統(tǒng)關(guān)鍵技術(shù)人員等跨部門人員組成,負(fù)責(zé)提出詳細(xì)數(shù)據(jù)質(zhì)量管理要求,確定數(shù)據(jù)檢驗規(guī)則和邏輯以及決定數(shù)據(jù)沖突時處理方案。數(shù)據(jù)質(zhì)量執(zhí)行小組需設(shè)置詳細(xì)數(shù)據(jù)工位,負(fù)責(zé)日常數(shù)據(jù)質(zhì)量執(zhí)行工作,包含依據(jù)ODS-O系統(tǒng)提供功效生成數(shù)據(jù)質(zhì)量匯報,組織、監(jiān)督和推進(jìn)數(shù)據(jù)修正工作,以及對數(shù)據(jù)修正指標(biāo)進(jìn)行考評等。描述數(shù)據(jù)質(zhì)量管理團(tuán)體第74頁數(shù)據(jù)質(zhì)量管理總體思緒和標(biāo)準(zhǔn)
數(shù)據(jù)質(zhì)量管理是一個循序漸進(jìn),往復(fù)循環(huán)過程,ODS-O作為數(shù)據(jù)質(zhì)量管控體系下一個主要步驟提供必要技術(shù)支撐數(shù)據(jù)與管控分離,控流程應(yīng)該閉環(huán)ODS-O不負(fù)責(zé)修正和變更源系統(tǒng)數(shù)據(jù),源系統(tǒng)數(shù)據(jù)變更標(biāo)準(zhǔn)上仍由源系統(tǒng)負(fù)責(zé)ODS-O負(fù)責(zé)跨域以及OSS域內(nèi)跨系統(tǒng)數(shù)據(jù)質(zhì)量稽核和管理數(shù)據(jù)質(zhì)量管理總體思緒1234連續(xù)和長期有效數(shù)據(jù)質(zhì)量管理和保障機制描述對跨域以及OSS域內(nèi)企業(yè)數(shù)據(jù)進(jìn)行數(shù)據(jù)質(zhì)量稽核和管理,總體上包含數(shù)據(jù)一致性、完整性和正確性稽核;數(shù)據(jù)質(zhì)量管控由生產(chǎn)指揮負(fù)責(zé),并經(jīng)過生產(chǎn)指揮進(jìn)行計劃和任務(wù)評定與審核,ODS-O只負(fù)責(zé)數(shù)據(jù)抽取、整合和稽核,并生成數(shù)據(jù)質(zhì)量匯報,整個管控流程形成閉環(huán);ODS-O標(biāo)準(zhǔn)上不負(fù)責(zé)修正和變更源系統(tǒng)數(shù)據(jù),源系統(tǒng)數(shù)據(jù)變更標(biāo)準(zhǔn)上仍由源系統(tǒng)負(fù)責(zé);數(shù)據(jù)質(zhì)量管理是一個循序漸進(jìn),往復(fù)循環(huán)過程,ODS-O作為數(shù)據(jù)質(zhì)量管控體系下一個主要步驟提供必要技術(shù)支撐,ODS-O負(fù)責(zé)提供數(shù)據(jù)質(zhì)量匯報和質(zhì)量管控指標(biāo)來指導(dǎo)管控活動或評定管控結(jié)果。。需要形成連續(xù)和長期有效數(shù)據(jù)質(zhì)量管理和確保機制,ODS-O為形成這種機制提供數(shù)據(jù)支撐。第75頁OSS數(shù)據(jù)質(zhì)量稽核功效分布說明:1)MSS和BSS域內(nèi)數(shù)據(jù)質(zhì)量問題,ODS-O不負(fù)責(zé)進(jìn)行數(shù)據(jù)稽核。2)ODS-O負(fù)責(zé)稽核OSS域內(nèi)與ODS-O應(yīng)用相關(guān)數(shù)據(jù)質(zhì)量問題,即ODS-O只負(fù)責(zé)對抽取到ODS-O這部分?jǐn)?shù)據(jù)質(zhì)量檢驗工作。3)ODS-O數(shù)據(jù)稽核流程管控由網(wǎng)絡(luò)運維管理系統(tǒng)負(fù)責(zé),ODS-O本身也可制訂數(shù)據(jù)稽核任務(wù)進(jìn)行周期性數(shù)據(jù)稽核,ODS-O負(fù)責(zé)進(jìn)行數(shù)據(jù)稽核和比對,并負(fù)責(zé)出具數(shù)據(jù)質(zhì)量評定匯報。4)異常數(shù)據(jù)修正工作標(biāo)準(zhǔn)上由源系統(tǒng)負(fù)責(zé)進(jìn)行修正,ODS-O經(jīng)過往復(fù)循環(huán)閉環(huán)過程對數(shù)據(jù)修正效果進(jìn)行評定。ODS-O應(yīng)用集成平臺企業(yè)GIS平臺公共平臺OSS系統(tǒng)專業(yè)網(wǎng)絡(luò)管理和適配傳輸綜合網(wǎng)管交換專業(yè)網(wǎng)管數(shù)據(jù)專業(yè)網(wǎng)管業(yè)務(wù)平臺網(wǎng)管C網(wǎng)專業(yè)網(wǎng)管IT網(wǎng)管動環(huán)監(jiān)控網(wǎng)絡(luò)適配無線網(wǎng)優(yōu)資源管理服務(wù)及網(wǎng)絡(luò)管理自動激活測試管理綜合網(wǎng)管服務(wù)質(zhì)量管理開通網(wǎng)絡(luò)資源管理保障服務(wù)開通服務(wù)保障施工調(diào)度網(wǎng)絡(luò)運維管理數(shù)據(jù)質(zhì)量稽核數(shù)據(jù)抽取數(shù)據(jù)轉(zhuǎn)換稽核任務(wù)管理數(shù)據(jù)稽核評定審核管理數(shù)據(jù)整合規(guī)則策略管理統(tǒng)計報表/匯報1286574312345678MBOSSBSS系統(tǒng)CRMMSS系統(tǒng)人力資源管理工程項目管理固定資產(chǎn)管理語音門戶互聯(lián)網(wǎng)門戶9999999稽核源數(shù)據(jù)分布9異常數(shù)據(jù)修正000000001第76頁ODS-O中數(shù)據(jù)質(zhì)量稽核全過程元數(shù)據(jù)描述數(shù)據(jù)稽核及處理輸出數(shù)據(jù)質(zhì)量匯報14元數(shù)據(jù)描述是后續(xù)數(shù)據(jù)源稽核規(guī)則基準(zhǔn)。數(shù)據(jù)稽核規(guī)則包含:數(shù)據(jù)稽核一致性、完整性、正確性、唯一性、連續(xù)性、時效性規(guī)則描述;數(shù)據(jù)稽核范圍規(guī)則描述,包含全量、增量等;數(shù)據(jù)稽核頻度規(guī)則描述,如:定義按月、周、天、小時等時段進(jìn)行稽核操作。事件觸發(fā)規(guī)則描述,控制次序策略描述,數(shù)據(jù)稽核門限、預(yù)警規(guī)則描述,如:對數(shù)據(jù)稽核差錯率、數(shù)據(jù)量級等門限或預(yù)警規(guī)則進(jìn)行描述。
數(shù)據(jù)稽核和處理是對數(shù)據(jù)本身執(zhí)行正當(dāng)性等方面檢驗過程,主要經(jīng)過設(shè)置業(yè)務(wù)邏輯規(guī)則來實現(xiàn)對數(shù)據(jù)屬性、數(shù)據(jù)屬性關(guān)系、數(shù)據(jù)承載關(guān)系以及數(shù)據(jù)匯總業(yè)務(wù)規(guī)則和和算法邏輯檢驗:以整合后標(biāo)準(zhǔn)格式數(shù)據(jù)為依據(jù),依據(jù)稽核規(guī)則、稽核范圍、稽核頻度對跨系統(tǒng)異構(gòu)數(shù)據(jù)源間數(shù)據(jù)、單系統(tǒng)中數(shù)據(jù)以及匯總指標(biāo)等數(shù)據(jù)進(jìn)行數(shù)據(jù)質(zhì)量檢驗;數(shù)據(jù)稽核過程是可監(jiān)視;數(shù)據(jù)稽核結(jié)果在ODS-O中形成數(shù)據(jù)同時、數(shù)據(jù)差異列表,并保留結(jié)果。稽核質(zhì)量匯報是數(shù)據(jù)質(zhì)量檢驗最終輸出,匯報統(tǒng)計了數(shù)據(jù)采集情況(范圍、數(shù)量)、數(shù)據(jù)稽核、比對情況以及數(shù)據(jù)同時情況等執(zhí)行信息。匯報主要包含兩部分內(nèi)容,數(shù)據(jù)質(zhì)量匯報和數(shù)據(jù)異常匯報。對于執(zhí)行過程中所產(chǎn)生中止、暫停,對比匯報中要詳細(xì)統(tǒng)計操作時間,操作結(jié)果等。3數(shù)據(jù)整合是進(jìn)行數(shù)據(jù)一致性、完整性、正確性、唯一性、連續(xù)性和時效性稽核數(shù)據(jù)源宿主和基礎(chǔ)。詳細(xì)包含:數(shù)據(jù)抽?。簭臄?shù)據(jù)源系統(tǒng)獲取數(shù)據(jù),需要考慮抽取策略包含增量/全量、抽取時機、抽取周期等。數(shù)據(jù)清洗:主要是指去除對系統(tǒng)無用或者不符合數(shù)據(jù)格式規(guī)范“臟數(shù)據(jù)”,如:數(shù)據(jù)完整性及一致性檢驗,噪聲數(shù)據(jù)處理,缺失數(shù)據(jù)填充,重復(fù)統(tǒng)計消除。數(shù)據(jù)轉(zhuǎn)換:主要是將源系統(tǒng)數(shù)據(jù)按照企業(yè)數(shù)據(jù)模型進(jìn)行轉(zhuǎn)換。數(shù)據(jù)加載:指將抽取轉(zhuǎn)換后數(shù)據(jù)加載到ODS中。數(shù)據(jù)整合2第77頁數(shù)據(jù)質(zhì)量管理功效設(shè)計數(shù)據(jù)質(zhì)量管理任務(wù)定義配置質(zhì)量分析與評定稽核任務(wù)定義檢驗策略配置預(yù)警策略配置策略調(diào)度數(shù)據(jù)質(zhì)量匯報異常數(shù)據(jù)匯報查詢統(tǒng)計分析0級功效域1級功效域2級功效域簡述:任務(wù)定義配置
對數(shù)據(jù)質(zhì)量檢驗任務(wù)進(jìn)行管理,包含任務(wù)規(guī)則定義和規(guī)則策略調(diào)度,如:檢驗范圍內(nèi)容、檢驗方式、檢驗頻度、檢驗規(guī)則等。任務(wù)能夠起源于網(wǎng)絡(luò)運維管理系統(tǒng)和ODS-O本身?;诉^程管控對數(shù)據(jù)抽取、整合、加載、匯總以及稽核等各個步驟過程進(jìn)行監(jiān)控和處理。質(zhì)量分析與評定
對數(shù)據(jù)質(zhì)量問題以及處理情況進(jìn)行分析,能以直觀(報表查詢界面)方式了解經(jīng)過ODS–O發(fā)覺數(shù)據(jù)質(zhì)量問題數(shù)據(jù)修正考評稽核過程管控檢驗過程監(jiān)控過程異常處理質(zhì)量檢驗日志質(zhì)量預(yù)警告警數(shù)據(jù)閥值監(jiān)控查詢統(tǒng)計分析異常通知第78頁ODS-O數(shù)據(jù)質(zhì)量管理流程過程交互經(jīng)過應(yīng)用集成平臺流程交互實現(xiàn)示例方式1:生產(chǎn)系統(tǒng)發(fā)起質(zhì)量管理流程方式2:ODS-O發(fā)起質(zhì)量管理流程任務(wù)定義配置稽核任務(wù)定義檢驗策略配置預(yù)警策略配置調(diào)度策略配置第79頁目錄重點專題OSS數(shù)據(jù)共享管理專題ODS-O數(shù)據(jù)應(yīng)用專題OSS數(shù)據(jù)質(zhì)量管理專題數(shù)據(jù)應(yīng)用功效設(shè)計數(shù)據(jù)應(yīng)用概述ODS-O數(shù)據(jù)整合專題第80頁ODS-O數(shù)據(jù)應(yīng)用特點對企業(yè)運行過程中準(zhǔn)實時、操作性O(shè)SS域數(shù)據(jù)進(jìn)行少維度分析應(yīng)用ODS-O整合、承載企業(yè)中跨域、跨系統(tǒng)、跨平臺細(xì)粒度網(wǎng)絡(luò)運行數(shù)據(jù),形成企業(yè)統(tǒng)一網(wǎng)絡(luò)運行視圖基于生產(chǎn)與分析相分離標(biāo)準(zhǔn),生產(chǎn)系統(tǒng)中無法實現(xiàn)或者實現(xiàn)比較困難,數(shù)據(jù)量較大統(tǒng)計分析,批量計算等功效,能夠交由ODS-O實現(xiàn)。ODS-O準(zhǔn)實時從源系統(tǒng)進(jìn)行抽取數(shù)據(jù),準(zhǔn)實時程度取決于源系統(tǒng)提供數(shù)據(jù)及時性,基于此種準(zhǔn)實時數(shù)據(jù)能夠?qū)崿F(xiàn)企業(yè)運行數(shù)據(jù)統(tǒng)計、監(jiān)控及計算等應(yīng)用。跨系統(tǒng)大數(shù)據(jù)量準(zhǔn)實時與EDW面向決議不一樣,ODS-O分析應(yīng)用主要是面向生產(chǎn),對統(tǒng)計結(jié)果進(jìn)行準(zhǔn)實時監(jiān)控,發(fā)覺運行生產(chǎn)問題,并支持問題定位、處理和驗證等。面向生產(chǎn)分析應(yīng)用第81頁ODS-O數(shù)據(jù)應(yīng)用與生產(chǎn)系統(tǒng)應(yīng)用關(guān)系網(wǎng)絡(luò)能力分析服務(wù)質(zhì)量分析網(wǎng)絡(luò)運行分析數(shù)據(jù)質(zhì)量分析ODS-O數(shù)據(jù)應(yīng)用能力指標(biāo)分析七大應(yīng)用功效資源系統(tǒng)說明1、ODS-O數(shù)據(jù)應(yīng)用是面向生產(chǎn)分析,所以數(shù)據(jù)來自多個專業(yè)網(wǎng)管或生產(chǎn)系統(tǒng),而生產(chǎn)系統(tǒng)應(yīng)用以當(dāng)前生產(chǎn)系統(tǒng)內(nèi)數(shù)據(jù)為主;2、ODS-O數(shù)據(jù)分析結(jié)果是在一定時間內(nèi)(3-6月)連續(xù),是分析型;而生產(chǎn)系統(tǒng)應(yīng)用是基于某一時間點數(shù)據(jù)狀態(tài),相對靜態(tài),是統(tǒng)計型;3、ODS-O經(jīng)過應(yīng)用來比對生產(chǎn)系統(tǒng)間及與網(wǎng)管系統(tǒng)內(nèi)數(shù)據(jù)一致性,不停提升OSS域面向應(yīng)用數(shù)據(jù)質(zhì)量;4、生產(chǎn)系統(tǒng)內(nèi)統(tǒng)計結(jié)果會依據(jù)需要流向ODS-O參加分析,同時ODS-O統(tǒng)計分析結(jié)果也會反饋給生產(chǎn)系統(tǒng),指導(dǎo)實際生產(chǎn)運行;開通保障系統(tǒng)原始數(shù)據(jù)共享數(shù)據(jù)原始數(shù)據(jù)共享數(shù)據(jù)網(wǎng)管系統(tǒng)原始數(shù)據(jù)共享數(shù)據(jù)網(wǎng)優(yōu)信令網(wǎng)管C網(wǎng)網(wǎng)管其它網(wǎng)管第82頁ODS-O數(shù)據(jù)應(yīng)用與生產(chǎn)系統(tǒng)應(yīng)用關(guān)系-舉例中繼實際能力分析:ODS-O需要從資源系統(tǒng)中找出有哪些中繼,中繼類型,最大支持速率是多少,有多少個用戶使用了該條中繼,然后從專業(yè)網(wǎng)管中計算出該條中平均流量,峰值流量,最終才能算出中繼實際使用能力。ODS-O數(shù)據(jù)應(yīng)用網(wǎng)絡(luò)能力分析網(wǎng)絡(luò)運行分析服務(wù)質(zhì)量分析數(shù)據(jù)質(zhì)量分析專題等其它分析與資源應(yīng)用關(guān)系舉例ADSL開通時限質(zhì)量原因分析:ODS-O從服務(wù)開通系統(tǒng)中拿到ADSL開通單,統(tǒng)計出某區(qū)域、某時間段內(nèi)符合全業(yè)務(wù)服務(wù)質(zhì)量標(biāo)準(zhǔn)開通時間百分比,再計算出一次ADSL資源配置成功率,分析不符合全業(yè)務(wù)服務(wù)標(biāo)準(zhǔn)百分比與一次資源配置成功率關(guān)系。與服務(wù)質(zhì)量應(yīng)用關(guān)系舉例 全網(wǎng)話務(wù)量分析:全網(wǎng)話務(wù)量分析需
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 河南省駐馬店市汝南縣雙語學(xué)校、清華園學(xué)校2025-2026 學(xué)年九年級上學(xué)期1月期末考試道德與法治試卷(含答案)
- 甘肅省酒泉市2025-2026學(xué)年高二(上)期末物理試卷(含答案)
- 湖北省恩施市2025-2026學(xué)年七年級上學(xué)期歷史期末考試題卷(含答案)
- 文秘考試試題及答案
- 數(shù)控專業(yè)實操考試題及答案
- 生理藥理學(xué)試題及答案
- 《GAT 1031-2012泄漏電纜入侵探測裝置通 用技術(shù)要求》專題研究報告
- 2026 年初中英語《語態(tài)辨析》專題練習(xí)與答案 (100 題)
- 2026年深圳中考語文真題變式訓(xùn)練試卷(附答案可下載)
- 2026年深圳中考英語素養(yǎng)培優(yōu)強化試卷(附答案可下載)
- 2026湖北隨州農(nóng)商銀行科技研發(fā)中心第二批人員招聘9人筆試模擬試題及答案解析
- 2025年-輔導(dǎo)員素質(zhì)能力大賽筆試題庫及答案
- 2026屆湖北省宜昌市部分示范高中教學(xué)協(xié)作體數(shù)學(xué)高一上期末教學(xué)質(zhì)量檢測試題含解析
- 2025年風(fēng)電運維成本降低路徑報告
- 2025年老年娛樂行業(yè)藝術(shù)教育普及報告
- 2025年抗菌藥物合理應(yīng)用培訓(xùn)考核試題附答案
- 2025年度臨床醫(yī)生個人述職報告
- 2026年煙花爆竹安全生產(chǎn)法律法規(guī)知識試題含答案
- 2026年《必背60題》 計算機科學(xué)與技術(shù)26屆考研復(fù)試高頻面試題包含詳細(xì)解答
- 2026年無錫商業(yè)職業(yè)技術(shù)學(xué)院單招職業(yè)技能筆試備考試題帶答案解析
- 2026年初二物理寒假作業(yè)(1.31-3.1)
評論
0/150
提交評論