方案聯(lián)盟www.fangan.vip行業(yè)大數(shù)據(jù)治理平臺(tái)數(shù)據(jù)應(yīng)用產(chǎn)品部方案聯(lián)盟www.fangan.vip一、建設(shè)背景二、行業(yè)大數(shù)據(jù)治理平臺(tái)方案三、核心功能介紹四、平臺(tái)案例目錄CONTENTS2發(fā)現(xiàn)規(guī)律：通過(guò)多源多維海量數(shù)據(jù)發(fā)現(xiàn)規(guī)律現(xiàn)狀研判：通過(guò)數(shù)據(jù)統(tǒng)計(jì)和比對(duì)對(duì)現(xiàn)狀進(jìn)行描述科學(xué)預(yù)測(cè)：基于規(guī)律和現(xiàn)狀，預(yù)測(cè)預(yù)警發(fā)展趨勢(shì)綜合服務(wù)：為社會(huì)各個(gè)方面提供知識(shí)成果與服務(wù)“資源是資產(chǎn)”

“數(shù)據(jù)是資產(chǎn)”?

資產(chǎn)由企業(yè)及組織擁有和控制，能夠提供增值服務(wù)、帶來(lái)

經(jīng)濟(jì)利益的重要資源。資產(chǎn)不但需要管理，

更需要運(yùn)營(yíng)。?

邏輯形式存在?間接或直接產(chǎn)生經(jīng)濟(jì)效益?

不斷增值、再利用?

物理形式存在?

直接產(chǎn)生經(jīng)濟(jì)效益?

會(huì)折舊、會(huì)退網(wǎng)物理資產(chǎn)

數(shù)據(jù)資產(chǎn)3數(shù)據(jù)是資產(chǎn)非結(jié)構(gòu)化數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)駕駛員基礎(chǔ)數(shù)據(jù)視頻監(jiān)控?cái)?shù)據(jù)物流狀態(tài)數(shù)據(jù)城市管理數(shù)據(jù)個(gè)人出行數(shù)據(jù)基礎(chǔ)設(shè)施數(shù)據(jù)交通應(yīng)急數(shù)據(jù)交通路況數(shù)據(jù)車(chē)輛基礎(chǔ)數(shù)據(jù)GIS地圖數(shù)據(jù)……數(shù)據(jù)方案聯(lián)盟www.fangan.vip大數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)4信息系統(tǒng)建設(shè)方案的演變應(yīng)用系統(tǒng)

應(yīng)用系統(tǒng)

應(yīng)用系統(tǒng)

應(yīng)用+平臺(tái)應(yīng)用系統(tǒng)方案聯(lián)盟www.fangan.vip分散當(dāng)前數(shù)據(jù)管理的問(wèn)題?傳統(tǒng)的煙囪式建設(shè)模式，造成系統(tǒng)林立，

數(shù)據(jù)分散并且封閉集中

共享數(shù)據(jù)開(kāi)放共享的價(jià)值?數(shù)據(jù)開(kāi)放共享，打破廠商壟斷數(shù)據(jù)的局面，

形成開(kāi)放的生態(tài)格局重復(fù)?為了支撐應(yīng)用，相同的數(shù)據(jù)在不同系統(tǒng)之間

重復(fù)存放，造成資源的浪費(fèi)據(jù)開(kāi)放一數(shù)

一源?避免數(shù)據(jù)的重復(fù)存放，減少資源浪費(fèi)統(tǒng)一接口復(fù)雜?數(shù)據(jù)共享困難，系統(tǒng)間接口繁多，實(shí)現(xiàn)復(fù)雜

度高，且可靠性難以保證共享平規(guī)范

服務(wù)?形成應(yīng)用和數(shù)據(jù)分離的體系架構(gòu)，底層共享的數(shù)據(jù)統(tǒng)一支撐上層各種應(yīng)用質(zhì)量較差?數(shù)據(jù)整體質(zhì)量不高，監(jiān)管機(jī)制不健全。缺乏面向數(shù)據(jù)質(zhì)量的評(píng)估機(jī)制和數(shù)據(jù)質(zhì)量的服務(wù)體系臺(tái)統(tǒng)一

治理?

建立統(tǒng)一完善的數(shù)據(jù)質(zhì)量體系，從數(shù)據(jù)質(zhì)

量管理系統(tǒng)和數(shù)據(jù)服務(wù)體系兩方面保障數(shù)

據(jù)的全程質(zhì)量5數(shù)據(jù)資產(chǎn)運(yùn)營(yíng)中的問(wèn)題方案聯(lián)盟www.fangan.vip數(shù)?

數(shù)據(jù)標(biāo)準(zhǔn)化?

資源建模?

數(shù)據(jù)架構(gòu)?

場(chǎng)景定義?

指標(biāo)數(shù)據(jù)管理?

……??????指揮調(diào)度

統(tǒng)計(jì)分析

實(shí)時(shí)監(jiān)測(cè)

流量預(yù)測(cè)

數(shù)據(jù)服務(wù)……??????數(shù)據(jù)抽取數(shù)據(jù)轉(zhuǎn)換數(shù)據(jù)校驗(yàn)數(shù)據(jù)關(guān)聯(lián)數(shù)據(jù)脫敏……?數(shù)據(jù)交換?數(shù)據(jù)共享?數(shù)據(jù)庫(kù)模式?API接口模式?發(fā)布訂閱模式?

數(shù)據(jù)資產(chǎn)管理與企業(yè)IT信息化過(guò)程緊密相連，但對(duì)數(shù)據(jù)資產(chǎn)管理不僅僅是建設(shè)一

套IT系統(tǒng)，更需要相應(yīng)管理手段的跟進(jìn)。

對(duì)數(shù)據(jù)資產(chǎn)的管理需涵蓋規(guī)范、采集、加工、使用、優(yōu)化、服務(wù)等數(shù)據(jù)資產(chǎn)的全生命周期，這樣管理的數(shù)據(jù)資產(chǎn)才能夠好用、實(shí)用，真正體現(xiàn)數(shù)據(jù)作為資產(chǎn)的價(jià)值。清洗加工數(shù)據(jù)質(zhì)量管理數(shù)據(jù)采集數(shù)據(jù)

資產(chǎn)

運(yùn)營(yíng)標(biāo)準(zhǔn)規(guī)范應(yīng)用6數(shù)據(jù)資產(chǎn)全生命周期管理數(shù)據(jù)質(zhì)量

管理?數(shù)據(jù)采集?數(shù)據(jù)錄入?數(shù)據(jù)解析?數(shù)據(jù)匯總?數(shù)據(jù)存儲(chǔ)?

準(zhǔn)確性

?

完整性

?

及時(shí)性

?

安全性

?

……開(kāi)放共享清洗加工標(biāo)準(zhǔn)規(guī)范數(shù)據(jù)采集創(chuàng)新應(yīng)用開(kāi)放

共享方案聯(lián)盟www.fangan.vip創(chuàng)新?

…………方案聯(lián)盟www.fangan.vip一、建設(shè)背景二、行業(yè)大數(shù)據(jù)治理平臺(tái)方案三、核心功能介紹四、平臺(tái)案例目錄CONTENTS7大數(shù)據(jù)治理平臺(tái)數(shù)據(jù)資產(chǎn)管理數(shù)據(jù)質(zhì)量管理

數(shù)據(jù)湖

內(nèi)部數(shù)據(jù)外部數(shù)據(jù)

媒體數(shù)據(jù)物聯(lián)網(wǎng)/IOT數(shù)據(jù)▉

通過(guò)平臺(tái)+服務(wù)的方式，支撐ICT、能源、特種等行業(yè)用戶(hù)建立全面高效的數(shù)據(jù)資產(chǎn)管控環(huán)境，實(shí)現(xiàn)多源異構(gòu)數(shù)據(jù)的集中、統(tǒng)一和共享交換。統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)、進(jìn)行數(shù)據(jù)整合與治理，

保障數(shù)據(jù)安全，實(shí)現(xiàn)跨系統(tǒng)、跨部門(mén)、跨層級(jí)、跨地區(qū)的數(shù)據(jù)共享行業(yè)大數(shù)據(jù)治理平臺(tái)數(shù)據(jù)開(kāi)發(fā)挖掘分析應(yīng)用開(kāi)發(fā)決策支撐數(shù)據(jù)治理業(yè)務(wù)應(yīng)用數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)安全管理交換共享服務(wù)元數(shù)據(jù)管理開(kāi)放門(mén)戶(hù)和開(kāi)放。方案聯(lián)盟www.fangan.vip8當(dāng)前數(shù)據(jù)管理的問(wèn)題行集中

共享行業(yè)大數(shù)據(jù)治理平臺(tái)的價(jià)值?數(shù)據(jù)開(kāi)放共享，打破廠商壟斷數(shù)據(jù)的

局面，形成開(kāi)放的生態(tài)格局分散封閉?傳統(tǒng)的煙囪式建設(shè)模式，造成系統(tǒng)林

立，數(shù)據(jù)分散并且封閉多樣混亂?缺乏統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，無(wú)法有效避免數(shù)據(jù)混亂沖突，一數(shù)多源、多樣多類(lèi)等問(wèn)

題業(yè)大

數(shù)統(tǒng)一

標(biāo)準(zhǔn)?建立統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，實(shí)現(xiàn)主數(shù)據(jù)統(tǒng)一

治理分發(fā)，保障一數(shù)一源，解決數(shù)據(jù)的關(guān)

聯(lián)能力，保障信息交互、數(shù)據(jù)流通質(zhì)量較差?數(shù)據(jù)整體質(zhì)量不高，監(jiān)管機(jī)制不健全

。缺乏面向數(shù)據(jù)質(zhì)量的評(píng)估機(jī)制和數(shù)據(jù)

質(zhì)量的服務(wù)體系據(jù)治理綜合

治理?建立完善的數(shù)據(jù)質(zhì)量保障體系，從數(shù)據(jù)

質(zhì)量管理系統(tǒng)和數(shù)據(jù)服務(wù)體系兩方面保

障數(shù)據(jù)的全程質(zhì)量安全難控?缺乏有效的數(shù)據(jù)安全管理機(jī)制，對(duì)敏感信息隱私信息、保密信息的訪(fǎng)問(wèn)缺乏有效控制平臺(tái)安全

管控?建立安全管控體系，對(duì)數(shù)據(jù)的分級(jí)分

類(lèi)、使用狀況梳理、訪(fǎng)問(wèn)控制、脫敏加

密以及定期的稽核保障數(shù)據(jù)的使用安全▉

行業(yè)大數(shù)據(jù)治理平臺(tái)負(fù)責(zé)資源整合公開(kāi)、協(xié)調(diào)、調(diào)度、管理與監(jiān)控，憑借高效可靠的數(shù)據(jù)傳輸，以高安全、高可靠、高穩(wěn)定的數(shù)據(jù)統(tǒng)一管理、共享交換能力，為各行各業(yè)的發(fā)展提供有力的支撐。產(chǎn)品價(jià)值方案聯(lián)盟www.fangan.vip9核心功能方案聯(lián)盟www.fangan.vip10模板服務(wù)、快速配置數(shù)據(jù)來(lái)源廣數(shù)據(jù)種類(lèi)多文件

消息數(shù)據(jù)

互聯(lián)網(wǎng)

業(yè)務(wù)填報(bào)數(shù)據(jù)庫(kù)離線(xiàn)導(dǎo)入服務(wù)互聯(lián)網(wǎng)適配數(shù)據(jù)格式處理數(shù)據(jù)清洗轉(zhuǎn)換數(shù)據(jù)預(yù)處理數(shù)據(jù)質(zhì)量核檢數(shù)據(jù)消息路由數(shù)據(jù)庫(kù)適配接口服務(wù)適配文件適配非結(jié)構(gòu)化適配消息數(shù)據(jù)適配數(shù)據(jù)來(lái)源

匯聚總線(xiàn)擴(kuò)展接口

擴(kuò)展接口

靈活適配、安全可靠整體業(yè)務(wù)過(guò)程安全可靠傳輸部門(mén)內(nèi)企業(yè)互聯(lián)網(wǎng)部門(mén)間資源池匯聚總線(xiàn)數(shù)據(jù)源存儲(chǔ)架構(gòu)Hbase加速器HDFS加速器MPP加速器Hive加速器大數(shù)據(jù)資源匯聚總線(xiàn)OSGI微內(nèi)核

SCA

SOA集群管控

匯聚編排

匯聚監(jiān)控

安全管控?cái)?shù)據(jù)匯

聚過(guò)程數(shù)據(jù)加密數(shù)據(jù)標(biāo)準(zhǔn)化數(shù)據(jù)加工數(shù)據(jù)脫敏

安全可靠傳輸

數(shù)據(jù)匯聚方案聯(lián)盟www.fangan.vip11方案聯(lián)盟www.fangan.vip一、行業(yè)大數(shù)據(jù)治理平臺(tái)方案二、核心功能介紹1、數(shù)據(jù)共享交換平臺(tái)2、主數(shù)據(jù)管理3、數(shù)據(jù)質(zhì)量管理4、數(shù)據(jù)安全管控

三、平臺(tái)案例目錄CONTENTS12要實(shí)施國(guó)家大數(shù)據(jù)戰(zhàn)略，推動(dòng)數(shù)據(jù)資源整合和開(kāi)放共享：1.要推動(dòng)大數(shù)據(jù)技術(shù)產(chǎn)業(yè)創(chuàng)新發(fā)展，堅(jiān)持?jǐn)?shù)據(jù)開(kāi)放、市場(chǎng)主導(dǎo)2.構(gòu)建以數(shù)據(jù)為關(guān)鍵要素的數(shù)字經(jīng)濟(jì)，深入發(fā)展工業(yè)互聯(lián)網(wǎng)戰(zhàn)略3.要運(yùn)用大數(shù)據(jù)提升國(guó)家治理現(xiàn)代化水平4.運(yùn)用大數(shù)據(jù)促進(jìn)保障和改善民生5.切實(shí)保障數(shù)據(jù)安全，制定數(shù)據(jù)資源確權(quán)、開(kāi)放、流通和交易相關(guān)制度，完善數(shù)據(jù)產(chǎn)權(quán)保護(hù)制度2017年12月9日習(xí)近平總書(shū)記主持中共中央政治局第二次集體學(xué)習(xí)建設(shè)背景-國(guó)家大數(shù)據(jù)戰(zhàn)略方案聯(lián)盟www.fangan.vip13〔2015〕

5號(hào)文《關(guān)于促進(jìn)云計(jì)算創(chuàng)新發(fā)展培育信息產(chǎn)業(yè)新業(yè)態(tài)的意見(jiàn)》14建設(shè)背景-國(guó)家政策性文件〔2016〕23號(hào)文《推進(jìn)“互聯(lián)網(wǎng)+政務(wù)服務(wù)”開(kāi)

展信息惠民試點(diǎn)實(shí)施方案》〔2015〕

50號(hào)

文《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要

》政務(wù)信息整合系列文件：〔2016〕48號(hào)文《政府購(gòu)買(mǎi)服務(wù)改革工

作領(lǐng)導(dǎo)小組》〔2017〕

39號(hào)

文《政務(wù)信息系統(tǒng)整合共享

實(shí)施方案》方案聯(lián)盟www.fangan.vip1、浪潮制定《政府?dāng)?shù)據(jù)標(biāo)準(zhǔn)規(guī)范》和《數(shù)據(jù)管理平臺(tái)保障制度》兩大類(lèi)17項(xiàng)國(guó)家標(biāo)準(zhǔn)2、浪潮負(fù)責(zé)建設(shè)國(guó)家數(shù)據(jù)共享平臺(tái)和開(kāi)放平臺(tái)n

國(guó)家級(jí)平臺(tái)的政務(wù)外網(wǎng)門(mén)戶(hù)及各子系統(tǒng)均已上線(xiàn)n

與山東、

四川、福建、貴州、北京江蘇、浙江、廣

東、

河南9個(gè)省份和工信部、

文化部、

國(guó)家旅游局

、

工程院、

中央編辦5個(gè)部委完成了目錄系統(tǒng)的對(duì)

接3、幫助全國(guó)40余個(gè)省市政府進(jìn)行數(shù)據(jù)共享開(kāi)放工作

，山東省政府建設(shè)的省級(jí)政務(wù)信息資源共享交換平臺(tái)

已梳理了1.1億條數(shù)據(jù)

，省級(jí)排名全國(guó)第一15建設(shè)背景-助力國(guó)家政府?dāng)?shù)據(jù)共享開(kāi)放平臺(tái)國(guó)家政府?dāng)?shù)據(jù)共享平臺(tái)

部委平臺(tái)

部委平臺(tái)

廳局平臺(tái)

地市平臺(tái)

···縣區(qū)平臺(tái)委辦局平臺(tái)

省級(jí)平臺(tái)

方案聯(lián)盟www.fangan.vip···數(shù)據(jù)共享數(shù)據(jù)共享管理數(shù)據(jù)共享門(mén)戶(hù)

共享工作臺(tái)

內(nèi)外數(shù)據(jù)互通數(shù)據(jù)資源目錄數(shù)據(jù)治理元數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)審計(jì)管理數(shù)據(jù)前置交換子系統(tǒng) 前置配置

交換承接數(shù)據(jù)處理配置信息解析數(shù)據(jù)采集加工數(shù)據(jù)清洗數(shù)據(jù)裝載圖形化配置

數(shù)據(jù)交換管理系統(tǒng)

交換任務(wù)調(diào)度交換任務(wù)監(jiān)控

數(shù)據(jù)交換傳輸系統(tǒng)

數(shù)據(jù)傳輸數(shù)據(jù)壓縮集群功能16

數(shù)據(jù)共享交換平臺(tái)-功能框架目錄體系管理目錄注冊(cè)目錄發(fā)布目錄維護(hù)目錄查詢(xún)目錄資源申請(qǐng)其它外部系統(tǒng)接入各部門(mén)信息系統(tǒng)接入國(guó)家共享交換平臺(tái)接入國(guó)家共享交換

平臺(tái)數(shù)據(jù)共享外部系統(tǒng)數(shù)據(jù)

共享數(shù)據(jù)安全

管理數(shù)據(jù)開(kāi)放展示策略數(shù)據(jù)駕駛艙應(yīng)用導(dǎo)航交換觸發(fā)服務(wù)管理服務(wù)地圖配置管理訂閱管理數(shù)據(jù)交換交換任務(wù)設(shè)置審計(jì)日志管理數(shù)據(jù)集成數(shù)據(jù)加密數(shù)據(jù)抽取數(shù)據(jù)轉(zhuǎn)換交換路由發(fā)布訂閱流量控制斷點(diǎn)續(xù)傳日志管理方案聯(lián)盟www.fangan.vip拿數(shù)據(jù)標(biāo)準(zhǔn)范疇數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)數(shù)據(jù)加工STGODM

DWADS標(biāo)簽標(biāo)準(zhǔn)數(shù)據(jù)存儲(chǔ)標(biāo)準(zhǔn)數(shù)據(jù)接口標(biāo)準(zhǔn)數(shù)據(jù)建模標(biāo)準(zhǔn)指標(biāo)標(biāo)準(zhǔn)數(shù)據(jù)開(kāi)發(fā)標(biāo)準(zhǔn)▉

數(shù)據(jù)標(biāo)準(zhǔn)：建設(shè)數(shù)據(jù)標(biāo)準(zhǔn)管理及維護(hù)、標(biāo)準(zhǔn)映射、標(biāo)準(zhǔn)審批及發(fā)布流程、標(biāo)準(zhǔn)使用分析等功能，

構(gòu)建統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)體系，支撐數(shù)據(jù)采集、處理、質(zhì)量評(píng)估等各個(gè)過(guò)程的標(biāo)準(zhǔn)化及稽核服務(wù)數(shù)據(jù)標(biāo)準(zhǔn)

數(shù)據(jù)標(biāo)準(zhǔn)化-數(shù)據(jù)標(biāo)準(zhǔn)管理17標(biāo)準(zhǔn)推薦標(biāo)準(zhǔn)變更流程標(biāo)準(zhǔn)映射引用數(shù)據(jù)標(biāo)準(zhǔn)增刪改標(biāo)準(zhǔn)遺漏分析標(biāo)準(zhǔn)發(fā)布流程數(shù)據(jù)標(biāo)準(zhǔn)分類(lèi)標(biāo)準(zhǔn)映射配置數(shù)據(jù)服務(wù)數(shù)據(jù)

采集數(shù)據(jù)傳遞過(guò)程數(shù)據(jù)標(biāo)準(zhǔn)分析數(shù)據(jù)標(biāo)準(zhǔn)審批數(shù)據(jù)標(biāo)準(zhǔn)維護(hù)數(shù)據(jù)標(biāo)準(zhǔn)映射數(shù)據(jù)建模數(shù)據(jù)質(zhì)量方案聯(lián)盟www.fangan.vip數(shù)據(jù)標(biāo)準(zhǔn)化-數(shù)據(jù)標(biāo)準(zhǔn)管理▉

提供數(shù)據(jù)字典、數(shù)據(jù)標(biāo)準(zhǔn)管理功能，保障企業(yè)數(shù)據(jù)的一致性。數(shù)據(jù)字典管理數(shù)據(jù)標(biāo)準(zhǔn)管理方案聯(lián)盟www.fangan.vip18設(shè)計(jì)根據(jù)業(yè)務(wù)需求進(jìn)行模型的設(shè)計(jì)，包含模型

的基本信息、分類(lèi)、

字段等。驗(yàn)證實(shí)現(xiàn)模型校驗(yàn)，校驗(yàn)

通過(guò)后自動(dòng)寫(xiě)入元數(shù)據(jù)庫(kù)。校驗(yàn)方式：一、設(shè)計(jì)庫(kù)與實(shí)際數(shù)據(jù)

庫(kù)進(jìn)行比對(duì)，二、通過(guò)業(yè)務(wù)應(yīng)用進(jìn)行驗(yàn)證。模型設(shè)計(jì)元數(shù)據(jù)模型驗(yàn)證審核對(duì)設(shè)計(jì)的模型由數(shù)

據(jù)專(zhuān)家、模型專(zhuān)家進(jìn)行審核，對(duì)于審核通過(guò)的模型方可實(shí)際建立。實(shí)施對(duì)于審核通過(guò)的模

型，根據(jù)設(shè)計(jì)在數(shù)據(jù)庫(kù)中建立模型。

數(shù)據(jù)標(biāo)準(zhǔn)化-基于元數(shù)據(jù)的數(shù)據(jù)建模工具▉

支撐多種數(shù)據(jù)存儲(chǔ)格式（

Hadoop、

MPP、

RDB）的數(shù)據(jù)模型生命周期管控及模型呈現(xiàn)19模型審核模型管理模型實(shí)施方案聯(lián)盟www.fangan.vip?支持在線(xiàn)建立模型、模型變更、下線(xiàn)等操作，支持批量模型導(dǎo)入（Excel

、PDM）?

支持Hadoop（hive、spark、

Impala

)、MPP（

vertica、gp、gbase、

IQ）、RDB（Oracle、MySQL）等

數(shù)據(jù)標(biāo)準(zhǔn)化-元數(shù)據(jù)建模20?

支持物理庫(kù)與元數(shù)據(jù)庫(kù)信息的一致

性盤(pán)點(diǎn)核查?

可從差異直接確認(rèn)同步到元數(shù)據(jù)庫(kù)▉

建模工具：基于元數(shù)據(jù)的建模工具、模型盤(pán)點(diǎn)、模型管控?模型設(shè)計(jì)審核流程、模型實(shí)施審核流程?

審核后直接寫(xiě)入元數(shù)據(jù)系統(tǒng)可視化在線(xiàn)建模模型審核模型盤(pán)點(diǎn)方案聯(lián)盟www.fangan.vip

數(shù)據(jù)標(biāo)準(zhǔn)化-元數(shù)據(jù)管理I

提供元數(shù)據(jù)采集、維護(hù)、檢索、分析等管理功能。21元數(shù)據(jù)分析元數(shù)據(jù)維護(hù)元數(shù)據(jù)檢索元數(shù)據(jù)采集方案聯(lián)盟www.fangan.vip接口離線(xiàn)采集接口、實(shí)時(shí)采集接口、互聯(lián)網(wǎng)爬取接口

…模型緩存層模型、基礎(chǔ)層模型、匯總層模型、應(yīng)用層模型..任務(wù)采集任務(wù)、數(shù)據(jù)匯總?cè)蝿?wù)、數(shù)據(jù)挖掘任務(wù)、數(shù)據(jù)清理任務(wù)

…服務(wù)數(shù)據(jù)API服務(wù)、數(shù)據(jù)交換服務(wù)、數(shù)據(jù)報(bào)告服務(wù)、數(shù)據(jù)應(yīng)用服務(wù)指標(biāo)PI、

KPI、

KQI、QoE

…▉

提供對(duì)數(shù)據(jù)共享平臺(tái)內(nèi)數(shù)據(jù)資產(chǎn)的統(tǒng)一注冊(cè)管理及發(fā)布呈現(xiàn)，包括采集接口、數(shù)據(jù)模型、處理任務(wù)、指標(biāo)、共享服務(wù)等。全生命周期的

數(shù)據(jù)統(tǒng)一管理數(shù)據(jù)資產(chǎn)管理方案聯(lián)盟www.fangan.vip22更新目錄清理目錄目錄1目錄1目錄1更新數(shù)據(jù)開(kāi)

放目錄發(fā)現(xiàn)新目錄共享數(shù)據(jù)集目錄開(kāi)放數(shù)據(jù)集目錄政

府

數(shù)

據(jù)

資

源全集建立數(shù)據(jù)開(kāi)

放目錄政府業(yè)務(wù)模型數(shù)據(jù)采集、加工數(shù)據(jù)標(biāo)簽、脫敏業(yè)務(wù)梳理數(shù)據(jù)資產(chǎn)管理-資源目錄梳理業(yè)務(wù)系統(tǒng)共享平臺(tái)業(yè)務(wù)需求確定初步共享開(kāi)放目錄依據(jù)現(xiàn)狀完整的數(shù)據(jù)資源目錄相關(guān)單位確認(rèn)形成共享開(kāi)放目錄完整性確認(rèn)標(biāo)簽數(shù)據(jù)分類(lèi)部門(mén)分類(lèi)數(shù)據(jù)項(xiàng)數(shù)據(jù)項(xiàng)部門(mén)分類(lèi)數(shù)據(jù)分類(lèi)標(biāo)簽標(biāo)簽部門(mén)分類(lèi)數(shù)據(jù)分類(lèi)數(shù)據(jù)項(xiàng)方案聯(lián)盟www.fangan.vip23權(quán)責(zé)

清單辦事

服務(wù)

事項(xiàng)提取相關(guān)主題建庫(kù)標(biāo)準(zhǔn)化數(shù)據(jù)目錄元數(shù)據(jù)

標(biāo)準(zhǔn)政府業(yè)務(wù)梳理模型部門(mén)職責(zé)管理對(duì)象管理維度管理手段生命周期總結(jié)常見(jiàn)數(shù)據(jù)問(wèn)題與解決方法促進(jìn)業(yè)

務(wù)協(xié)同數(shù)據(jù)共享清單數(shù)據(jù)開(kāi)放清單梳理事項(xiàng)關(guān)聯(lián)關(guān)系數(shù)據(jù)

數(shù)據(jù)抽取

處理電子證照庫(kù)質(zhì)量

更新檢測(cè)機(jī)制數(shù)據(jù)資產(chǎn)管理-資源目錄梳理自然人、法人庫(kù)優(yōu)化服

務(wù)流程重復(fù)提交材料X多次跑腿X等待時(shí)間長(zhǎng)X政策法規(guī)、標(biāo)準(zhǔn)體系各部門(mén)業(yè)務(wù)庫(kù)各部門(mén)業(yè)務(wù)庫(kù)不會(huì)提供數(shù)據(jù)X不知共享需求X建立數(shù)據(jù)治理體系數(shù)據(jù)

處理更新

機(jī)制方案聯(lián)盟www.fangan.vip數(shù)據(jù)

抽取質(zhì)量

檢測(cè)24方案聯(lián)盟www.fangan.vip標(biāo)準(zhǔn)規(guī)范25數(shù)據(jù)資產(chǎn)管理-形成行業(yè)資源目錄▉

支持按照“類(lèi)”、“項(xiàng)”、“目”、“細(xì)目”對(duì)資源目錄體系進(jìn)行維護(hù)。支持資源目錄的新增、刪除、導(dǎo)入、發(fā)布等編目管理操作。數(shù)據(jù)資產(chǎn)管理-資源目錄管理資源目錄管理目錄體系編目目錄發(fā)布管理方案聯(lián)盟www.fangan.vip26I

以數(shù)據(jù)為核心，實(shí)現(xiàn)數(shù)據(jù)匯集、融合、治理、資產(chǎn)化、共享全景呈現(xiàn)。。數(shù)據(jù)資產(chǎn)管理-資產(chǎn)可視化數(shù)據(jù)資產(chǎn)全景數(shù)據(jù)共享全景數(shù)據(jù)全景數(shù)據(jù)匯集全景數(shù)據(jù)融合全景數(shù)據(jù)治理全景方案聯(lián)盟www.fangan.vip27數(shù)據(jù)交換-交換管理交換任務(wù)配置交換作業(yè)配置前置機(jī)配置數(shù)據(jù)源配置方案聯(lián)盟www.fangan.vip28方案聯(lián)盟www.fangan.vip29數(shù)據(jù)交換-交換管理交換任務(wù)處理過(guò)程配置交換過(guò)程監(jiān)控統(tǒng)計(jì)30

數(shù)據(jù)交換-交換處理任務(wù)概覽任務(wù)監(jiān)控任務(wù)編排▉

可視化的任務(wù)編排與監(jiān)控。方案聯(lián)盟www.fangan.vip高實(shí)時(shí)性要求小數(shù)據(jù)量

在線(xiàn)交互交換數(shù)據(jù)量較大、低實(shí)時(shí)性要求定期或一次性大批量數(shù)據(jù)要求SOAP/HTTPFTPODBC/JD

BC配置管理

審批管理生產(chǎn)者管理消費(fèi)者管理第三方平臺(tái)第三方系統(tǒng)服務(wù)數(shù)據(jù)共享服務(wù)總線(xiàn)數(shù)據(jù)共享平臺(tái)數(shù)據(jù)實(shí)時(shí)查詢(xún)服務(wù)

數(shù)據(jù)文件生成服務(wù)FTP服務(wù)服務(wù)模式服務(wù)目錄管理安全及自身管理服務(wù)策略管理數(shù)據(jù)開(kāi)放共享-共享手段I

以數(shù)據(jù)服務(wù)的形式封裝數(shù)據(jù)，提供統(tǒng)一的數(shù)據(jù)開(kāi)放共享。消

費(fèi)

者數(shù)

據(jù)

共

享

生產(chǎn)

者***系統(tǒng)***系統(tǒng)***平臺(tái)***應(yīng)用服務(wù)地圖安全管理服務(wù)管理訂閱管理數(shù)據(jù)庫(kù)模式日志管理發(fā)布訂閱模式認(rèn)證鑒權(quán)API接口模式訪(fǎng)問(wèn)會(huì)話(huà)管控訪(fǎng)問(wèn)隊(duì)列管控訪(fǎng)問(wèn)緩存管控方案聯(lián)盟www.fangan.vip31n

審批流程：1.

服務(wù)注冊(cè)審批2.

服務(wù)變更審批3.

服務(wù)注銷(xiāo)審批4.

服務(wù)訂閱審批數(shù)據(jù)共享服務(wù)訂閱審核數(shù)據(jù)共享服務(wù)注冊(cè)數(shù)據(jù)生成數(shù)據(jù)共享服務(wù)訂閱數(shù)據(jù)獲取數(shù)據(jù)共享服務(wù)注冊(cè)審核數(shù)據(jù)訂閱需求提出數(shù)據(jù)訂閱需求審核數(shù)據(jù)開(kāi)放共享-共享管控▉

審批流程+策略控制相結(jié)合的數(shù)據(jù)共享管控手段。1.

訪(fǎng)問(wèn)會(huì)話(huà)控制2.

訪(fǎng)問(wèn)隊(duì)列控制3.

數(shù)據(jù)緩存控制消費(fèi)者生產(chǎn)者運(yùn)營(yíng)者服務(wù)策略：方案聯(lián)盟www.fangan.vip通過(guò)通過(guò)32n數(shù)據(jù)分級(jí)涉及內(nèi)部隱私涉及國(guó)家安全數(shù)據(jù)分層社會(huì)完全開(kāi)放件開(kāi)放社會(huì)條部門(mén)間完全共享部門(mén)間條管理件共享內(nèi)部數(shù)據(jù)開(kāi)放共享-共享安全涉及單位隱私涉及個(gè)人隱私涉及知識(shí)產(chǎn)權(quán)涉及法規(guī)禁止涉及其它禁止其它數(shù)據(jù)▉

對(duì)數(shù)據(jù)進(jìn)行分級(jí)管控--●-------●●●--●●●●●--------●●-●----●●●---●●----機(jī)密方案聯(lián)盟www.fangan.vip33I

數(shù)據(jù)開(kāi)放共享工具支撐：提供一鍵式的數(shù)據(jù)開(kāi)放與共享發(fā)布及數(shù)據(jù)API、數(shù)據(jù)集、數(shù)據(jù)報(bào)告、數(shù)據(jù)應(yīng)用的多種交付模式。數(shù)據(jù)開(kāi)放共享-共享方式數(shù)據(jù)API、數(shù)據(jù)集、數(shù)據(jù)報(bào)告、數(shù)據(jù)應(yīng)用一鍵式數(shù)據(jù)資源對(duì)外發(fā)布為服務(wù)開(kāi)放共享服務(wù)發(fā)布開(kāi)放共享交付模式方案聯(lián)盟www.fangan.vip34數(shù)據(jù)開(kāi)放共享-共享服務(wù)▉

以數(shù)據(jù)服務(wù)的形式封裝數(shù)據(jù)，提供統(tǒng)一的數(shù)據(jù)開(kāi)放共享。服務(wù)地圖服務(wù)/訂閱管理服務(wù)發(fā)布訂閱審核方案聯(lián)盟www.fangan.vip35▉

提供數(shù)據(jù)資源可視化運(yùn)營(yíng)監(jiān)控，實(shí)時(shí)掌控?cái)?shù)據(jù)交換平臺(tái)數(shù)據(jù)資源交換次數(shù)、共享數(shù)據(jù)量，

TOPN信息系統(tǒng)等數(shù)據(jù)服務(wù)運(yùn)營(yíng)情況。36

數(shù)據(jù)交換共享門(mén)戶(hù)方案聯(lián)盟www.fangan.vip方案聯(lián)盟www.fangan.vip一、建設(shè)背景二、行業(yè)大數(shù)據(jù)治理平臺(tái)方案三、核心功能介紹1、數(shù)據(jù)共享交換平臺(tái)2、主數(shù)據(jù)管理3、數(shù)據(jù)質(zhì)量管理4、數(shù)據(jù)安全管控

四、平臺(tái)案例目錄CONTENTS37方案聯(lián)盟www.fangan.vip?主數(shù)據(jù)是那些描述你的客戶(hù)、物料、供應(yīng)商等的基

礎(chǔ)數(shù)據(jù)；?主數(shù)據(jù)存儲(chǔ)在多個(gè)相互不連接的系統(tǒng)/數(shù)據(jù)庫(kù)中?主數(shù)據(jù)信息在多個(gè)不同的應(yīng)用系統(tǒng)中被維護(hù)?集團(tuán)總部沒(méi)有對(duì)全局主數(shù)據(jù)信息及時(shí)、一致、真實(shí)、

可靠的視圖每個(gè)部門(mén)、分公司、業(yè)務(wù)系統(tǒng)擁有不同的信息企業(yè)日常業(yè)務(wù)場(chǎng)景38

主數(shù)據(jù)定義?

具有高業(yè)務(wù)價(jià)值?

跨業(yè)務(wù)重復(fù)使用?

核心業(yè)務(wù)實(shí)體

主數(shù)據(jù)特征?

變化相對(duì)緩慢?

存在多系統(tǒng)中?

需要交互共享?

業(yè)務(wù)源頭主體人員招聘規(guī)劃設(shè)計(jì)工程管理物業(yè)管理…土地拓展物資采購(gòu)

樓盤(pán)銷(xiāo)售

商業(yè)租賃成本系統(tǒng)投發(fā)系統(tǒng)供應(yīng)商什么是主數(shù)據(jù)？銷(xiāo)售系統(tǒng)物業(yè)系統(tǒng)招采系統(tǒng)工程系統(tǒng)HR系統(tǒng)財(cái)務(wù)系統(tǒng)招采

工程

銷(xiāo)售物業(yè)

商業(yè)人資

投發(fā)業(yè)務(wù)

系

統(tǒng)業(yè)務(wù)

行

為業(yè)務(wù)

部

門(mén)業(yè)務(wù)

實(shí)

體項(xiàng)目商業(yè)系統(tǒng)方案聯(lián)盟www.fangan.vip組織員工分期39……目前面臨的問(wèn)題1、數(shù)據(jù)標(biāo)準(zhǔn)、流程、責(zé)任分工不明確。如數(shù)據(jù)維護(hù)分散等。2、數(shù)據(jù)清洗工作不到位，如客戶(hù)、供應(yīng)商。3、系統(tǒng)功能不完善，缺少各戶(hù)定制化內(nèi)容，如數(shù)據(jù)級(jí)聯(lián)關(guān)系管理、維護(hù)流程定制、接口監(jiān)控等。企業(yè)中多部門(mén)、多系統(tǒng)的分散管理主數(shù)據(jù)直接導(dǎo)致數(shù)據(jù)質(zhì)量差，增加企業(yè)信息化成本，

降低

企業(yè)決策效率。數(shù)據(jù)共享不及時(shí)數(shù)據(jù)定義不明確責(zé)任部門(mén)不清晰維護(hù)流程不統(tǒng)一數(shù)據(jù)狀態(tài)不可控企業(yè)主數(shù)據(jù)管理遇到的挑戰(zhàn)方案聯(lián)盟www.fangan.vip40由于各個(gè)系統(tǒng)需求的不同，

一個(gè)相同的服務(wù)器在各個(gè)系統(tǒng)中均有自己的編號(hào)和其他屬性編號(hào)：

87254型號(hào)：

2CPU16GERP編號(hào)：I0954型號(hào)：

2C16G地點(diǎn)：總部機(jī)房GIS編號(hào)：

01254型號(hào)：

2C16G項(xiàng)目管理編號(hào)：

A0154型號(hào)：

2C*

16G尺寸：

0.5*0.8XX系統(tǒng)浪潮服務(wù)器，

NF5270M4，

2CPU16G，主數(shù)據(jù)問(wèn)題示例0.5*0.8M方案聯(lián)盟www.fangan.vip41方案聯(lián)盟www.fangan.vip主數(shù)據(jù)管理思路▉實(shí)現(xiàn)企業(yè)的主數(shù)據(jù)管理，以主數(shù)據(jù)入手即可完善數(shù)據(jù)管控的手段，以基礎(chǔ)數(shù)據(jù)為主，步步為營(yíng)自上而下實(shí)現(xiàn)企業(yè)數(shù)據(jù)管理環(huán)境構(gòu)建。部門(mén)主管業(yè)務(wù)專(zhuān)責(zé)構(gòu)建完整的數(shù)據(jù)管理環(huán)境建立企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)建立規(guī)范化管理流程建立數(shù)據(jù)使用習(xí)慣企業(yè)領(lǐng)導(dǎo)42數(shù)據(jù)標(biāo)準(zhǔn)服務(wù)標(biāo)準(zhǔn)管理標(biāo)準(zhǔn)方案聯(lián)盟www.fangan.vip43解決方案▉應(yīng)用完善的數(shù)據(jù)管理產(chǎn)品能力結(jié)合企業(yè)管理能力的數(shù)據(jù)管理制度。數(shù)據(jù)治理產(chǎn)品能力包含主數(shù)據(jù)全方位的管理能力，如統(tǒng)一編碼、數(shù)據(jù)清洗、質(zhì)量管理等。管理能力體現(xiàn)在企業(yè)主數(shù)據(jù)標(biāo)準(zhǔn)的貫徹和落實(shí)。流程管理資源目錄元數(shù)據(jù)管理主數(shù)據(jù)管理質(zhì)量管理統(tǒng)一編碼技術(shù)手段數(shù)據(jù)分發(fā)數(shù)據(jù)清洗管理能力主數(shù)據(jù)管理平臺(tái)數(shù)據(jù)建模?

數(shù)據(jù)字典?

編碼規(guī)則?

實(shí)體建模?

存儲(chǔ)模型數(shù)據(jù)服務(wù)?

申報(bào)服務(wù)?

修改服務(wù)?

查詢(xún)服務(wù)?

訂閱發(fā)布提升數(shù)據(jù)質(zhì)量提升數(shù)據(jù)整合能力提升領(lǐng)導(dǎo)決策能力數(shù)據(jù)整合?

數(shù)據(jù)匯集?

數(shù)據(jù)合并?

整合監(jiān)管

企業(yè)服務(wù)總線(xiàn)（

ESB

）

主數(shù)據(jù)管理標(biāo)準(zhǔn)主數(shù)據(jù)管理流程數(shù)據(jù)維護(hù)?

數(shù)據(jù)管理?

數(shù)據(jù)去重?去重規(guī)則合同系統(tǒng)財(cái)務(wù)系統(tǒng)人力系統(tǒng)客流系統(tǒng)資產(chǎn)系統(tǒng)票務(wù)系統(tǒng)其他總體架構(gòu)編碼規(guī)范組織管理訪(fǎng)問(wèn)服務(wù)高速緩存編碼庫(kù)編碼審批編碼歷史訪(fǎng)問(wèn)權(quán)限方案聯(lián)盟www.fangan.vip44方案聯(lián)盟www.fangan.vip主數(shù)據(jù)模型定義、已建信息系統(tǒng)的信息資源，

細(xì)化完善目錄規(guī)劃組織準(zhǔn)備構(gòu)建主數(shù)據(jù)管理平臺(tái)，支撐主數(shù)據(jù)管理工作開(kāi)展制定數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范，數(shù)據(jù)資源維護(hù)規(guī)范，數(shù)據(jù)交換共享規(guī)范等相關(guān)標(biāo)準(zhǔn)及管理制度明確編制領(lǐng)導(dǎo)機(jī)構(gòu)工作機(jī)制

，負(fù)責(zé)組織規(guī)劃、編目審查、目錄報(bào)送等工作主數(shù)據(jù)管理咨詢(xún)步驟資源調(diào)查組織開(kāi)展資源調(diào)查工作，梳理企業(yè)各部門(mén)、各業(yè)務(wù)環(huán)節(jié)按照元數(shù)據(jù)要求，編制生成主數(shù)據(jù)資源模型定義及編碼按照主數(shù)據(jù)定義，確定本期項(xiàng)目主數(shù)據(jù)管理范圍主數(shù)據(jù)范圍確定數(shù)據(jù)標(biāo)準(zhǔn)與規(guī)范規(guī)則45信息資源名稱(chēng)（必填

項(xiàng)）信息資

源代碼

（信息

中心填

寫(xiě)）信息資源

提供方資源提供方代碼（信息

中心填

寫(xiě)）信息資源

摘要（必填項(xiàng)）信息資源格式信息資源大普查信息項(xiàng)信息共享屬性共享方式開(kāi)放屬性更新

周期

（必

填項(xiàng)）發(fā)布

日期

（必

填項(xiàng)）關(guān)聯(lián)

及類(lèi)

目名

稱(chēng)

（選

填項(xiàng)）信息資源提供方（必

填項(xiàng)）提供方內(nèi)部部門(mén)（選

填項(xiàng)）信息

資源

格式

分類(lèi)

（必

填項(xiàng)）信息

資源

格式

類(lèi)型

（必

填項(xiàng)）其他

類(lèi)型

資源

格式

描述

（選

填項(xiàng)）數(shù)據(jù)

存儲(chǔ)

總量

（G）

（必

填項(xiàng)）結(jié)構(gòu)

化信

息記

錄總

數(shù)

（萬(wàn)）

（必

填項(xiàng)）已共

享的

數(shù)據(jù)

存儲(chǔ)

量（G）

（必

填項(xiàng)）已共

享結(jié)

構(gòu)化

記錄

數(shù)

（萬(wàn)）

（必

填項(xiàng)）已開(kāi)

放的

數(shù)據(jù)

存儲(chǔ)

量（G）

（必

填項(xiàng)）已開(kāi)

放結(jié)

構(gòu)化

記錄

數(shù)

（萬(wàn)）

（必

填項(xiàng)）信息

項(xiàng)名

稱(chēng)

（必

填項(xiàng)）數(shù)據(jù)

類(lèi)型

（必

填項(xiàng)）數(shù)據(jù)

長(zhǎng)度

（必

填項(xiàng)）共享

類(lèi)型

（必

填項(xiàng)）共享

條件

（必

填項(xiàng)）共享

方式

分類(lèi)

（必

填項(xiàng)）共享

方式

類(lèi)型

（必

填項(xiàng)）是否

向社

會(huì)開(kāi)

放

（必

填項(xiàng)）開(kāi)放

條件

（選

填項(xiàng)）部門(mén)全稱(chēng)信息系統(tǒng)

名稱(chēng)主要功能系統(tǒng)狀態(tài)

（建設(shè)中

,

運(yùn)行中、停止使用、

其他）系統(tǒng)開(kāi)始

使用日期系統(tǒng)開(kāi)發(fā)

單位名稱(chēng)系統(tǒng)運(yùn)行維護(hù)單位名稱(chēng)數(shù)據(jù)來(lái)源數(shù)據(jù)產(chǎn)生

方式（人

工錄入,

自

動(dòng)生成,省

市縣逐級(jí)

報(bào)送,各企業(yè)報(bào)送,其

他）數(shù)據(jù)更新

頻率（實(shí)

時(shí)、按天、

按月、按

季、每半年、每年、

其他）數(shù)據(jù)存儲(chǔ)

量大?。℅B）數(shù)據(jù)庫(kù)名

稱(chēng)及版本系統(tǒng)使用頻率（2016年

度累計(jì)用

戶(hù)訪(fǎng)問(wèn)/登

錄次數(shù)）信息系統(tǒng)

安全等級(jí)

定級(jí)情況

（一級(jí)、

二級(jí)、三

級(jí)、四級(jí)、五級(jí)、未

定級(jí)）信息系統(tǒng)

分級(jí)保護(hù)

定級(jí)情況

（秘密、

機(jī)密、絕密、未定

密）備注序號(hào)信息資源分類(lèi)信息資源名稱(chēng)（必填項(xiàng)）信息系統(tǒng)類(lèi)分類(lèi)

（必填項(xiàng)）項(xiàng)分類(lèi)

（必填項(xiàng)）目分類(lèi)

（必填項(xiàng)）細(xì)目分類(lèi)

（選填項(xiàng)）分類(lèi)五級(jí)（選填

項(xiàng)）分類(lèi)六級(jí)（選填

項(xiàng)）調(diào)研企業(yè)主數(shù)據(jù)現(xiàn)狀1、信息系統(tǒng)基本情況調(diào)研2、資源目錄調(diào)研3、資源模型調(diào)研方案聯(lián)盟www.fangan.vip46序號(hào)主數(shù)據(jù)來(lái)源系統(tǒng)相關(guān)系統(tǒng)建議主管部門(mén)1供應(yīng)商主數(shù)據(jù)物資管理系統(tǒng)合同管理系統(tǒng)、財(cái)務(wù)管理系統(tǒng)、實(shí)物資產(chǎn)轉(zhuǎn)資管理系統(tǒng)運(yùn)營(yíng)公司2客戶(hù)主數(shù)據(jù)資源開(kāi)發(fā)管理系統(tǒng)物資管理系統(tǒng)、財(cái)務(wù)管理系統(tǒng)、電子商務(wù)財(cái)務(wù)部3會(huì)計(jì)科目主數(shù)據(jù)財(cái)務(wù)管理系統(tǒng)合同管理系統(tǒng)、物資管理系統(tǒng)財(cái)務(wù)部4固定資產(chǎn)主數(shù)據(jù)財(cái)務(wù)管理系統(tǒng)合同管理系統(tǒng)、物資管理系統(tǒng)、實(shí)物資產(chǎn)轉(zhuǎn)資管理系統(tǒng)財(cái)務(wù)部5設(shè)備主數(shù)據(jù)實(shí)物資產(chǎn)轉(zhuǎn)資管理系統(tǒng)合同管理系統(tǒng)、物資管理系統(tǒng)、財(cái)務(wù)管理系統(tǒng)運(yùn)營(yíng)公司6物資主數(shù)據(jù)物資管理系統(tǒng)合同管理系統(tǒng)、財(cái)務(wù)管理系統(tǒng)運(yùn)營(yíng)公司7組織機(jī)構(gòu)主數(shù)據(jù)人力資源管理系統(tǒng)通過(guò)統(tǒng)一用戶(hù)管理提供給所有系統(tǒng)人力資源部8員工主數(shù)據(jù)人力資源管理系統(tǒng)通過(guò)統(tǒng)一用戶(hù)管理提供給所有系統(tǒng)人力資源部47

明確主數(shù)據(jù)管理范圍▉通過(guò)業(yè)務(wù)分析確定主數(shù)據(jù)初步管理范圍及數(shù)據(jù)來(lái)源，明確管理職責(zé)，進(jìn)行企業(yè)數(shù)據(jù)管理。▉主數(shù)據(jù)具有以下特點(diǎn)：1、偏對(duì)象型的共享數(shù)據(jù)。2、在企業(yè)內(nèi)跨越多個(gè)業(yè)務(wù)部門(mén)被重復(fù)使用的高價(jià)值數(shù)據(jù)。3、是企業(yè)核心數(shù)據(jù)實(shí)體。方案聯(lián)盟www.fangan.vip數(shù)據(jù)

標(biāo)準(zhǔn)?

定來(lái)源--規(guī)定數(shù)據(jù)的唯一出處?

定結(jié)構(gòu)--規(guī)定主數(shù)據(jù)的屬性，編碼構(gòu)成?

定規(guī)則--約定數(shù)據(jù)之間的關(guān)聯(lián)關(guān)系服務(wù)

標(biāo)準(zhǔn)?

定接口規(guī)范--約定接口生產(chǎn)者、消費(fèi)者、接口名稱(chēng)、參數(shù)?

定數(shù)據(jù)格式--規(guī)定數(shù)據(jù)標(biāo)準(zhǔn)格式管理

標(biāo)準(zhǔn)?

定流程--規(guī)范主數(shù)據(jù)的申請(qǐng)、變更、修改流程?

定職責(zé)--定義流程活動(dòng)參與者的職責(zé)主數(shù)據(jù)管理平臺(tái)規(guī)范指導(dǎo)建設(shè)48制定主數(shù)據(jù)管理標(biāo)準(zhǔn)方案聯(lián)盟www.fangan.vip數(shù)據(jù)整合整合監(jiān)管數(shù)據(jù)維護(hù)數(shù)據(jù)管理查重規(guī)則數(shù)據(jù)建模數(shù)據(jù)服務(wù)49主數(shù)據(jù)管理-主要功能權(quán)限控制實(shí)體建模數(shù)據(jù)字典存儲(chǔ)模型主數(shù)據(jù)編碼數(shù)據(jù)推送系統(tǒng)接入資源分類(lèi)發(fā)布訂閱數(shù)據(jù)合并數(shù)據(jù)去重?cái)?shù)據(jù)匯集方案聯(lián)盟www.fangan.vip生產(chǎn)調(diào)度經(jīng)營(yíng)計(jì)劃質(zhì)量檢驗(yàn)-生產(chǎn)車(chē)間XX班組主數(shù)據(jù)資源目錄人員組織機(jī)構(gòu)客戶(hù)物料方案聯(lián)盟www.fangan.vip50數(shù)據(jù)建模-資源分類(lèi)▉構(gòu)造企業(yè)主資源目錄，提供快速查詢(xún)和使用數(shù)據(jù)的能力。資源目錄可以對(duì)此類(lèi)數(shù)據(jù)進(jìn)行層級(jí)劃分，實(shí)現(xiàn)查詢(xún)、數(shù)據(jù)建模、質(zhì)量管理、數(shù)據(jù)集成等數(shù)據(jù)管理應(yīng)用能力。以層次化結(jié)構(gòu)協(xié)助企業(yè)領(lǐng)導(dǎo)、業(yè)務(wù)專(zhuān)責(zé)、或第三方廠商工藝部XX分公司XX分公司XX分公司快速定位數(shù)據(jù)，實(shí)現(xiàn)數(shù)據(jù)應(yīng)用的目標(biāo)。組織機(jī)構(gòu)質(zhì)量管理數(shù)據(jù)集成數(shù)據(jù)查詢(xún)查詢(xún)服務(wù)數(shù)據(jù)管理分類(lèi)數(shù)據(jù)管理物料分類(lèi)設(shè)計(jì)部機(jī)械能源物資管理-

XX班組總部▉

提供可視化界面進(jìn)行主數(shù)據(jù)類(lèi)型定義及主數(shù)據(jù)資源目錄瀏覽。數(shù)據(jù)建模-資源分類(lèi)分類(lèi)定義分類(lèi)目錄瀏覽方案聯(lián)盟www.fangan.vip511020304050001一級(jí)

分類(lèi)

碼（類(lèi)）二級(jí)分類(lèi)碼（項(xiàng)）三級(jí)分類(lèi)碼（目）四級(jí)分類(lèi)碼（細(xì)目1）五級(jí)分類(lèi)碼（細(xì)目2）四位流水號(hào)（流水號(hào)）對(duì)內(nèi)管理1、建立編碼庫(kù)2、編碼自動(dòng)校驗(yàn)3、編碼流程管理4、實(shí)現(xiàn)一物一碼對(duì)外服務(wù)1、編碼查詢(xún)服務(wù)2、統(tǒng)一編碼服務(wù)3、外部編碼流程4、編碼映射服務(wù)▉

一物一碼是主數(shù)據(jù)的核心內(nèi)容，

主數(shù)據(jù)管理平臺(tái)將數(shù)據(jù)編碼進(jìn)行劃分和規(guī)范，通過(guò)編碼引擎實(shí)現(xiàn)數(shù)據(jù)系統(tǒng)內(nèi)部統(tǒng)一數(shù)據(jù)編碼。

數(shù)據(jù)建模-主數(shù)據(jù)編碼52結(jié)構(gòu)拆分編碼查詢(xún)碼值編碼組合編碼匹配數(shù)據(jù)賦碼編碼組合編碼字典編碼引擎方案聯(lián)盟www.fangan.vip53數(shù)據(jù)建模-主數(shù)據(jù)編碼▉

通過(guò)將主數(shù)據(jù)編碼規(guī)則設(shè)置到平臺(tái)中，確保系統(tǒng)中的數(shù)據(jù)按照編碼規(guī)則要求生成。自定義規(guī)則編碼規(guī)則管理方案聯(lián)盟www.fangan.vip資源

模型1資源

模型2資源

模型3基本屬性設(shè)計(jì)屬性

工藝屬性

生產(chǎn)屬性

財(cái)務(wù)屬性▉

建立企業(yè)主數(shù)據(jù)模型標(biāo)準(zhǔn)的制定。從PDM、

ERP等多種業(yè)務(wù)系統(tǒng)中，進(jìn)行數(shù)據(jù)模型的梳理匯編，

并進(jìn)行數(shù)據(jù)模型的標(biāo)準(zhǔn)化，解決一數(shù)多源，多種定義等問(wèn)題。數(shù)據(jù)資源集目錄數(shù)

據(jù)

資

源全集數(shù)據(jù)模型匯編數(shù)據(jù)模型去重?cái)?shù)據(jù)模型編目數(shù)據(jù)模型歸一化

數(shù)據(jù)建模-實(shí)體建模54業(yè)務(wù)資料業(yè)務(wù)需求業(yè)務(wù)分析業(yè)務(wù)系統(tǒng)資源分類(lèi)信息項(xiàng)名稱(chēng)資源分類(lèi)資源格式資源編碼信息項(xiàng)類(lèi)型關(guān)聯(lián)資源資源格式信息項(xiàng)名稱(chēng)信息項(xiàng)名稱(chēng)資源分類(lèi)關(guān)聯(lián)資源資源編碼信息項(xiàng)類(lèi)型關(guān)聯(lián)資源資源格式資源編碼信息項(xiàng)類(lèi)型共享類(lèi)型資源名稱(chēng)共享類(lèi)型資源名稱(chēng)共享類(lèi)型資源名稱(chēng)方案聯(lián)盟www.fangan.vip主數(shù)據(jù)資源-基本信息主數(shù)據(jù)資源-關(guān)聯(lián)元數(shù)據(jù)元數(shù)據(jù)基本信息元數(shù)據(jù)字段信息I

通過(guò)提供可視化建模工具，進(jìn)行主數(shù)據(jù)資源模型建立。并提供資源模型注冊(cè)、審核、發(fā)布、盤(pán)點(diǎn)等管理功能55數(shù)據(jù)建模-實(shí)體建模方案聯(lián)盟www.fangan.vip數(shù)據(jù)庫(kù)表管理

數(shù)據(jù)建模-存儲(chǔ)模型管理▉

對(duì)物理存儲(chǔ)模型進(jìn)行管理。56存儲(chǔ)模型管理方案聯(lián)盟www.fangan.vip

數(shù)據(jù)建模-數(shù)據(jù)字典管理57I

提供可視化界面進(jìn)行數(shù)據(jù)字典管理。方案聯(lián)盟www.fangan.vip▉

提供數(shù)據(jù)采集與清洗能力，通過(guò)ETL、

SQL、

EXCEL等多種不同的工具，實(shí)現(xiàn)自動(dòng)或手動(dòng)或混合的數(shù)據(jù)采集與清洗能力。結(jié)合數(shù)據(jù)質(zhì)量檢核，為客戶(hù)提供多重?cái)?shù)據(jù)質(zhì)量保證。數(shù)據(jù)的唯一性數(shù)據(jù)的權(quán)威性分布式ETL工具文件導(dǎo)入工具流處理工具數(shù)據(jù)整合-數(shù)據(jù)匯集合并

解決

問(wèn)題數(shù)據(jù)處理手動(dòng)

清洗混合

清洗自動(dòng)

清洗手動(dòng)采集自動(dòng)采集數(shù)據(jù)源質(zhì)量校核數(shù)據(jù)入庫(kù)數(shù)據(jù)的一致性數(shù)據(jù)的合法性數(shù)據(jù)的完整性方案聯(lián)盟www.fangan.vip58數(shù)據(jù)整合-數(shù)據(jù)匯集合并任務(wù)運(yùn)行狀態(tài)任務(wù)概覽▉

可視化的任務(wù)編排與管理。方案聯(lián)盟www.fangan.vip59任務(wù)監(jiān)控詳情

數(shù)據(jù)整合-任務(wù)監(jiān)控▉

可視化的任務(wù)運(yùn)行監(jiān)控。60任務(wù)監(jiān)控概覽方案聯(lián)盟www.fangan.vipI

提供對(duì)主數(shù)據(jù)的新增、修改、

刪除、審核、發(fā)布等主數(shù)據(jù)生命周期過(guò)程行管理。數(shù)據(jù)維護(hù)方案聯(lián)盟www.fangan.vip61去重規(guī)則管理▉

提供對(duì)主數(shù)據(jù)的去重規(guī)則設(shè)置管理，

對(duì)有多個(gè)來(lái)源的主數(shù)據(jù)進(jìn)行去重。數(shù)據(jù)維護(hù)-數(shù)據(jù)去重主數(shù)據(jù)去重方案聯(lián)盟www.fangan.vip62▉

針對(duì)注冊(cè)的主數(shù)據(jù)可進(jìn)行發(fā)布操作，通過(guò)主數(shù)據(jù)分類(lèi)進(jìn)行發(fā)布。數(shù)據(jù)服務(wù)-服務(wù)發(fā)布發(fā)布參數(shù)修改主數(shù)據(jù)發(fā)布方案聯(lián)盟www.fangan.vip63▉

可針對(duì)發(fā)布的元數(shù)據(jù)進(jìn)行數(shù)據(jù)權(quán)限管理，設(shè)定數(shù)據(jù)權(quán)限類(lèi)型及具體屬性權(quán)限信息。數(shù)據(jù)服務(wù)-數(shù)據(jù)權(quán)限數(shù)據(jù)權(quán)限管理權(quán)限詳情設(shè)定方案聯(lián)盟www.fangan.vip64

數(shù)據(jù)服務(wù)-查詢(xún)服務(wù)▉

可以對(duì)主數(shù)據(jù)信息進(jìn)行查詢(xún)，同時(shí)對(duì)查詢(xún)到的主數(shù)據(jù)支持發(fā)起訂閱審批流程65主數(shù)據(jù)查詢(xún)發(fā)起訂閱審批方案聯(lián)盟www.fangan.vip▉

可通過(guò)推送任務(wù)定制的方式，實(shí)現(xiàn)主數(shù)據(jù)推送。數(shù)據(jù)服務(wù)-分發(fā)服務(wù)任務(wù)詳細(xì)設(shè)置推送任務(wù)定制方案聯(lián)盟www.fangan.vip66方案聯(lián)盟www.fangan.vip一、建設(shè)背景二、行業(yè)大數(shù)據(jù)治理平臺(tái)方案三、核心功能介紹1、數(shù)據(jù)共享交換平臺(tái)2、主數(shù)據(jù)管理3、數(shù)據(jù)質(zhì)量管理4、數(shù)據(jù)安全管控四、平臺(tái)案例目錄CONTENTS67影響數(shù)據(jù)質(zhì)量的關(guān)鍵隱患問(wèn)題總結(jié)信令大數(shù)據(jù)的規(guī)模占比超過(guò)95%

，

是性能管理現(xiàn)階段數(shù)據(jù)質(zhì)量主要矛盾。在日常運(yùn)營(yíng)過(guò)程中總結(jié)發(fā)現(xiàn)，影響信令數(shù)據(jù)質(zhì)量的問(wèn)題遍及數(shù)據(jù)源、數(shù)據(jù)平臺(tái)、上層應(yīng)用三層。n某些大網(wǎng)調(diào)整工作與DPI割接不同步，導(dǎo)致數(shù)據(jù)漏接：

網(wǎng)元擴(kuò)容、網(wǎng)元割接、地址變更n某些時(shí)刻業(yè)務(wù)量突增，

DPI帶寬/性能不足，導(dǎo)致數(shù)據(jù)溢出：黃金周、春節(jié)返鄉(xiāng)、重大活動(dòng)n某些原始XDR字段統(tǒng)計(jì)錯(cuò)誤，導(dǎo)致KQI計(jì)算不準(zhǔn)：錯(cuò)誤碼、呼叫類(lèi)型n某些原始XDR關(guān)鍵信息回填失敗，導(dǎo)致KQI計(jì)算不準(zhǔn)：

IMSI、

MSIDN、

IMEI、TAC、CELLIDnDPI特征庫(kù)更新不及時(shí)，導(dǎo)致業(yè)務(wù)識(shí)別異常：識(shí)別不出、識(shí)別錯(cuò)誤nSDTP接口鏈路異常，導(dǎo)致數(shù)據(jù)丟失n平臺(tái)持續(xù)高負(fù)荷，導(dǎo)致任務(wù)積壓、數(shù)據(jù)缺失：集群規(guī)劃不合理、參數(shù)設(shè)置異常、程序未調(diào)優(yōu)n設(shè)備與網(wǎng)絡(luò)故障，影響全量數(shù)據(jù)運(yùn)算：數(shù)據(jù)庫(kù)宕機(jī)、采集清洗機(jī)故障n指標(biāo)算法統(tǒng)計(jì)錯(cuò)誤，導(dǎo)致KQI計(jì)算不準(zhǔn)：用戶(hù)數(shù)、流量、成功率n某些基礎(chǔ)數(shù)據(jù)異常，影響業(yè)務(wù)運(yùn)算準(zhǔn)確性：家客資源、小區(qū)資源、核心網(wǎng)資源n共享接口鏈路故障/接口文件延時(shí)，導(dǎo)致應(yīng)用匯總異常n某些設(shè)備故障，影響全量數(shù)據(jù)運(yùn)算：數(shù)據(jù)庫(kù)宕機(jī)、采集清洗機(jī)故障數(shù)據(jù)源數(shù)據(jù)平臺(tái)上層應(yīng)用68▉

▉方案聯(lián)盟www.fangan.vip69

數(shù)據(jù)質(zhì)量保障體系▉

數(shù)據(jù)質(zhì)量保障體系建設(shè)思路：建立標(biāo)準(zhǔn)+組織+工具+運(yùn)維的綜合保障體系?

構(gòu)建多方專(zhuān)人的保障組：局方

、數(shù)據(jù)源廠家、數(shù)據(jù)共享平臺(tái)

廠家、數(shù)據(jù)應(yīng)用廠家?

制定管控制度：

質(zhì)量例會(huì)3、處理流程?

明確數(shù)據(jù)處理問(wèn)題閉環(huán)處

理流程5、運(yùn)維保障?

定制日常質(zhì)量巡檢作業(yè)?

定期開(kāi)展運(yùn)維分析報(bào)告?

數(shù)據(jù)質(zhì)量信息核查組件/探針?

配置化數(shù)據(jù)質(zhì)量核查功能?

短信+告警結(jié)合的預(yù)警手段1、標(biāo)準(zhǔn)規(guī)范?

制定數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范?

制定數(shù)據(jù)核查標(biāo)準(zhǔn)數(shù)據(jù)質(zhì)量保障體系4、質(zhì)量核查工具2、組織與制度方案聯(lián)盟www.fangan.vip接口類(lèi)型規(guī)則類(lèi)型檢查內(nèi)容4G實(shí)時(shí)數(shù)據(jù)

模型及時(shí)性文件生成時(shí)延>30分鐘完整性有無(wú)標(biāo)題行、文件數(shù)、記錄數(shù)、列數(shù)準(zhǔn)確性1、

http訪(fǎng)問(wèn)成功率<90%2、

http平均響應(yīng)時(shí)延>3000ms3、

http平均下載速率<10kbps4、

http平均下載速率(包>500KB）

<1000kbps5、ATTACH成功率<90%6、ATTACH平均時(shí)延>3000ms7、承載建立成功率<90%8、承載建立平均時(shí)延>3000ms9、TCP建立成功率<90%10、TCP建立平均時(shí)延>3000ms字段中文名字段英文名字段類(lèi)型字段規(guī)范城市區(qū)號(hào)cityvarchar(5)1、類(lèi)型：數(shù)字接口類(lèi)型interfaceBIGINT1、類(lèi)型：數(shù)字2、范圍：

[1-24]RATratBIGINT1、類(lèi)型：數(shù)字2、范圍：

[1-6]IMSIimsivarchar(20)1、非空2、類(lèi)型：數(shù)字3、長(zhǎng)度：

15手機(jī)號(hào)msisdnvarchar(20)1、非空2、類(lèi)型：數(shù)字3、長(zhǎng)度：

11或1370

數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)規(guī)范▉

梳理并制定各類(lèi)數(shù)據(jù)的標(biāo)準(zhǔn)規(guī)范及核查標(biāo)準(zhǔn)數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范數(shù)據(jù)核查規(guī)范方案聯(lián)盟www.fangan.vip?閉環(huán)管理：專(zhuān)人每日巡檢、每日匯報(bào)?定期總結(jié)：每周召開(kāi)數(shù)據(jù)質(zhì)量分析會(huì)、每月召

開(kāi)故障分析會(huì)、投訴及故障處理經(jīng)驗(yàn)歸檔管理磐石行動(dòng)、部省接口等專(zhuān)項(xiàng)行動(dòng)?

局方專(zhuān)人管理?各廠家項(xiàng)目經(jīng)理掛帥?各層廠家設(shè)置量問(wèn)題專(zhuān)員、重點(diǎn)專(zhuān)題專(zhuān)人保障▉

針對(duì)重點(diǎn)業(yè)務(wù)質(zhì)量保障制定了“專(zhuān)項(xiàng)小組，

定期例會(huì)，專(zhuān)項(xiàng)匯報(bào)”機(jī)制，保障平臺(tái)內(nèi)部落實(shí)各項(xiàng)保障規(guī)范和相關(guān)措施?形成項(xiàng)目例會(huì)，每?jī)芍茚槍?duì)近兩周數(shù)據(jù)質(zhì)量問(wèn)題進(jìn)行總

結(jié)，要求各廠家分析數(shù)據(jù)質(zhì)量原因、找出隱患和根源總結(jié)經(jīng)驗(yàn)、

IT固化規(guī)則，

提升自動(dòng)化運(yùn)維水平?確定每月/每季度專(zhuān)項(xiàng)重點(diǎn)保障范圍?明確專(zhuān)項(xiàng)核查重點(diǎn)KPI及保障標(biāo)準(zhǔn)組織與制度專(zhuān)人負(fù)責(zé)

組織定期

例會(huì)分析質(zhì)量保障專(zhuān)項(xiàng)團(tuán)隊(duì)專(zhuān)項(xiàng)

匯報(bào)定期

例會(huì)專(zhuān)項(xiàng)

小組方案聯(lián)盟www.fangan.vip71知識(shí)庫(kù)數(shù)據(jù)源ETL過(guò)程日志采集數(shù)據(jù)對(duì)象質(zhì)量信息采集運(yùn)行環(huán)境日志采集統(tǒng)一規(guī)則管理數(shù)據(jù)質(zhì)量后知識(shí)維護(hù)質(zhì)量問(wèn)題

處理問(wèn)題派單數(shù)據(jù)填補(bǔ)問(wèn)題歸檔質(zhì)量評(píng)估質(zhì)量評(píng)估報(bào)表質(zhì)量評(píng)估報(bào)告知識(shí)檢索知識(shí)庫(kù)數(shù)據(jù)質(zhì)量

監(jiān)控預(yù)警服務(wù)查詢(xún)服務(wù)報(bào)表服務(wù)預(yù)警規(guī)則配置數(shù)據(jù)質(zhì)量問(wèn)題庫(kù)規(guī)則庫(kù)ODM基礎(chǔ)設(shè)施▉

數(shù)據(jù)質(zhì)量：

是一個(gè)問(wèn)題管理中心，遵循問(wèn)題發(fā)現(xiàn)、分析、解決和評(píng)估的閉環(huán)管理方式，從完整性、及時(shí)性、有效性、

一致性、準(zhǔn)確性五個(gè)方面，對(duì)數(shù)據(jù)的運(yùn)行環(huán)境、采集、處理、消費(fèi)進(jìn)行全程的監(jiān)控評(píng)估數(shù)據(jù)質(zhì)量信息存儲(chǔ)數(shù)據(jù)質(zhì)量稽核信息采集質(zhì)量概覽數(shù)據(jù)質(zhì)量分析數(shù)據(jù)質(zhì)量管控任務(wù)調(diào)度EOMS元數(shù)據(jù)采集規(guī)則配

置運(yùn)行環(huán)境監(jiān)控處理過(guò)程監(jiān)控?cái)?shù)據(jù)源監(jiān)控?cái)?shù)據(jù)對(duì)象監(jiān)控影響性分析血緣分析知識(shí)庫(kù)分析數(shù)據(jù)質(zhì)量信息庫(kù)方案聯(lián)盟www.fangan.vip臺(tái)服務(wù)72STGDWDMn

專(zhuān)業(yè)室與網(wǎng)管提前共享割接計(jì)劃n

具體工程割接實(shí)時(shí)時(shí)，專(zhuān)業(yè)室提前向網(wǎng)管告

知割接實(shí)施方案，

DPI廠家制定升級(jí)方案n

工程割接完畢，DPI升級(jí)同步開(kāi)展可視化監(jiān)測(cè)預(yù)警

原始XDR監(jiān)測(cè)共享數(shù)據(jù)監(jiān)測(cè)n

監(jiān)測(cè)內(nèi)容：

數(shù)據(jù)完整性、及時(shí)性、

準(zhǔn)確性n

監(jiān)測(cè)周期：5分鐘、

15分鐘n

預(yù)警手段：

PC端、短信、郵件基礎(chǔ)信息例行更新根據(jù)集團(tuán)數(shù)據(jù)運(yùn)營(yíng)要求，定期進(jìn)行規(guī)則庫(kù)、

基礎(chǔ)數(shù)據(jù)庫(kù)、關(guān)聯(lián)算法的更新升版。數(shù)據(jù)模型與算法例行更新

輕度匯總規(guī)范

應(yīng)用指標(biāo)規(guī)范

根據(jù)集團(tuán)集團(tuán)下發(fā)的XDR數(shù)據(jù)孤帆定期進(jìn)

行模型、算法、合理性規(guī)則的自檢更新。DPI升級(jí)場(chǎng)景工程割接場(chǎng)景多手段問(wèn)題定位通過(guò)調(diào)用元數(shù)據(jù)血統(tǒng)分析、

ETL/設(shè)備日志關(guān)

聯(lián)、經(jīng)驗(yàn)檢索協(xié)助問(wèn)題定位。問(wèn)題督辦與閉環(huán)摘掛牌督辦處理過(guò)程進(jìn)行跟蹤；頻發(fā)、長(zhǎng)期未解決問(wèn)題

納入摘掛牌管理，

定期通報(bào)、

評(píng)價(jià)與考核。▉

通過(guò)一體化數(shù)據(jù)質(zhì)量保障手段、數(shù)據(jù)模型與算法例行更新、工程割接與DPI升級(jí)協(xié)同，形成常態(tài)化數(shù)據(jù)治理與運(yùn)營(yíng)機(jī)制。DPI識(shí)別規(guī)則庫(kù)規(guī)范終端等配置表規(guī)范關(guān)聯(lián)合成規(guī)范數(shù)據(jù)質(zhì)量處理流程地址變更設(shè)備擴(kuò)容網(wǎng)元擴(kuò)容探針擴(kuò)容網(wǎng)元割接分光器割接經(jīng)驗(yàn)庫(kù)檢索數(shù)據(jù)模型與算法例行更新LOG日志關(guān)聯(lián)一體化數(shù)據(jù)質(zhì)量保障手段工程割接與DPI升級(jí)協(xié)同元數(shù)據(jù)分析

KQI指標(biāo)規(guī)范方案聯(lián)盟www.fangan.vipXDR規(guī)范問(wèn)題閉環(huán)73▉

從網(wǎng)管數(shù)據(jù)的生產(chǎn)環(huán)境、采集、處理、消費(fèi)全過(guò)程進(jìn)行質(zhì)量監(jiān)控與保障。統(tǒng)一的數(shù)據(jù)質(zhì)量監(jiān)控74數(shù)據(jù)質(zhì)量管控工具多方式質(zhì)量問(wèn)題分析靈活規(guī)則設(shè)置血統(tǒng)/影響分析幫助問(wèn)題定位質(zhì)量規(guī)則的統(tǒng)一管理知識(shí)庫(kù)管理與查詢(xún)靈活的規(guī)則設(shè)置質(zhì)量告警監(jiān)控質(zhì)量問(wèn)題呈現(xiàn)方案聯(lián)盟www.fangan.vip經(jīng)驗(yàn)庫(kù)數(shù)據(jù)質(zhì)量日志采集經(jīng)驗(yàn)庫(kù)查詢(xún)經(jīng)驗(yàn)庫(kù)維護(hù)數(shù)據(jù)質(zhì)量信息存儲(chǔ)③根據(jù)檢測(cè)規(guī)則生成質(zhì)量問(wèn)題數(shù)據(jù)質(zhì)量信息庫(kù)⑧質(zhì)量評(píng)估考核▉

該平臺(tái)定位于數(shù)據(jù)問(wèn)題管理中心，遵循問(wèn)題發(fā)現(xiàn)、分析、解決、評(píng)估的閉環(huán)管理模式，對(duì)數(shù)據(jù)的運(yùn)行環(huán)境、采集、處理、消費(fèi)進(jìn)行全程的監(jiān)控評(píng)估。數(shù)據(jù)質(zhì)量統(tǒng)一門(mén)戶(hù)規(guī)則配置問(wèn)題閉環(huán)督辦質(zhì)量評(píng)估問(wèn)題分析血緣分析經(jīng)驗(yàn)庫(kù)查詢(xún)質(zhì)量監(jiān)控⑥問(wèn)題派單督辦⑦質(zhì)量問(wèn)題處

理經(jīng)驗(yàn)總結(jié)主動(dòng)核查質(zhì)量日志采集數(shù)據(jù)加工過(guò)程日志采集平臺(tái)運(yùn)行日志采集數(shù)據(jù)質(zhì)量核查手段⑤問(wèn)題分

析定位④讀取質(zhì)量問(wèn)題磐石行動(dòng)專(zhuān)項(xiàng)LTE

xDR質(zhì)量稽核

家寬xDR質(zhì)量稽核部省接口上報(bào)4G實(shí)時(shí)數(shù)據(jù)上報(bào)

熱門(mén)業(yè)務(wù)統(tǒng)計(jì)上報(bào)性能管理專(zhuān)題視頻端到端家寬端到端質(zhì)量告警質(zhì)量概覽_______問(wèn)題轉(zhuǎn)派閉環(huán)問(wèn)題摘掛牌督辦應(yīng)用日志采集第三方ETL日志采集檢查規(guī)則配置采集規(guī)則配置Inspur

ETL日志采集設(shè)備日志采集評(píng)估規(guī)則配置評(píng)估報(bào)告報(bào)告任務(wù)調(diào)度元數(shù)據(jù)

管理工單表核查日

志采集字段核查

日志采集文件核查

日志采集數(shù)據(jù)質(zhì)量分析專(zhuān)題②獲取質(zhì)量信息日志數(shù)據(jù)質(zhì)量規(guī)則庫(kù)數(shù)據(jù)質(zhì)量問(wèn)題庫(kù)問(wèn)題處理經(jīng)驗(yàn)庫(kù)方案聯(lián)盟www.fangan.vip報(bào)表

報(bào)告①讀取規(guī)則75核查內(nèi)容核查規(guī)則及時(shí)性文件生成時(shí)延完整性文件數(shù)文件大小記錄數(shù)列數(shù)是否有標(biāo)題行準(zhǔn)確性成功率類(lèi)指標(biāo)時(shí)延類(lèi)指標(biāo)速率類(lèi)指標(biāo)流量類(lèi)指標(biāo)（地市/?。┕蚕斫y(tǒng)計(jì)數(shù)據(jù)質(zhì)量稽核▉

對(duì)共享文件、上報(bào)文件的數(shù)據(jù)合規(guī)性、文件一致性進(jìn)行實(shí)時(shí)稽核預(yù)警，

及時(shí)發(fā)現(xiàn)數(shù)據(jù)問(wèn)題，降低應(yīng)用端影響。共享文件一

致性檢查數(shù)據(jù)質(zhì)量數(shù)據(jù)質(zhì)量稽核數(shù)據(jù)共享平臺(tái)一

數(shù)據(jù)共享上報(bào)文件

數(shù)據(jù)上報(bào)4G非實(shí)時(shí)、重要網(wǎng)元、終端、視頻）核查內(nèi)容核查規(guī)則及時(shí)性文件共享報(bào)時(shí)延一致性文件數(shù)文件大小總部性能管理專(zhuān)題應(yīng)用數(shù)據(jù)質(zhì)量實(shí)時(shí)預(yù)警分析共享文件上報(bào)文件共享文件共享文件一致性檢查規(guī)則數(shù)據(jù)合規(guī)性核查規(guī)則數(shù)據(jù)文件共享/上報(bào)數(shù)據(jù)合規(guī)

性稽核方案聯(lián)盟www.fangan.vip（4G實(shí)時(shí)、76共享統(tǒng)計(jì)數(shù)據(jù)質(zhì)量稽核I

以集團(tuán)上報(bào)類(lèi)匯總統(tǒng)計(jì)數(shù)據(jù)為例，數(shù)據(jù)合規(guī)性稽核實(shí)際效果如下：方案聯(lián)盟www.fangan.vip7778

共享統(tǒng)計(jì)數(shù)據(jù)質(zhì)量稽核I

以集團(tuán)上報(bào)類(lèi)匯總統(tǒng)計(jì)數(shù)據(jù)為例，數(shù)據(jù)文件一致性檢查實(shí)際效果如下：方案聯(lián)盟www.fangan.vip79

接口數(shù)據(jù)保障I

接口數(shù)據(jù)補(bǔ)報(bào)處理機(jī)制：方案聯(lián)盟www.fangan.vip類(lèi)型內(nèi)容舉例資源數(shù)據(jù)

合理性關(guān)鍵維度字段是否為空、重復(fù)賬號(hào)數(shù)量占比、

bandwidth為空占比、用戶(hù)數(shù)、數(shù)據(jù)記錄數(shù)、

ONU總數(shù)、

OLT總數(shù)、

BRAS總

數(shù)、BRAS下行端口總數(shù)、XDR數(shù)據(jù)

合理性關(guān)鍵字段為空XDR占比、業(yè)務(wù)大類(lèi)填充為空或0占比、業(yè)務(wù)大類(lèi)

編號(hào)大于18占比、業(yè)務(wù)小類(lèi)為空或0占比、業(yè)務(wù)小類(lèi)匹配占比、業(yè)務(wù)完成標(biāo)識(shí)填充率、上行流量填充率、下行流量填充率、HTTP/WAP事務(wù)狀態(tài)填充率、業(yè)務(wù)完成標(biāo)識(shí)填充率、業(yè)務(wù)完成

標(biāo)識(shí)與事務(wù)狀態(tài)不一致的占比、第一個(gè)HTTP響應(yīng)包時(shí)延填充率、

最后一個(gè)HTTP內(nèi)容包時(shí)延填充率、最后一個(gè)ACK確認(rèn)包時(shí)延填充率性能指標(biāo)

合理性O(shè)NU發(fā)光功率異常占比、

ONU收光功率異常占比、ONU數(shù)量占比、

OLT異常數(shù)據(jù)占比、

OLT數(shù)量占比、OLT

PON口數(shù)據(jù)異常占比、

OLT

PON口數(shù)量占比、

BRAS異常數(shù)據(jù)占比、

BRAS數(shù)量占比、

BRAS下聯(lián)口數(shù)據(jù)異常占比、BRAS下聯(lián)口數(shù)量占比▉

制定定期數(shù)據(jù)質(zhì)量巡檢任務(wù)+每周/每月數(shù)據(jù)質(zhì)量專(zhuān)題報(bào)告相結(jié)合的運(yùn)維保障機(jī)制。數(shù)據(jù)質(zhì)量運(yùn)維保障方案聯(lián)盟www.fangan.vip80方案聯(lián)盟www.fangan.vip一、建設(shè)背景二、行業(yè)大數(shù)據(jù)治理平臺(tái)方案三、核心功能介紹1、數(shù)據(jù)共享交換平臺(tái)2、主數(shù)據(jù)管理3、數(shù)據(jù)質(zhì)量管理4、數(shù)據(jù)安全管控四、平臺(tái)案例目錄CONTENTS81▉信息技術(shù)的快速發(fā)展和各種IT技術(shù)的廣泛應(yīng)用，數(shù)據(jù)資產(chǎn)已經(jīng)成為企業(yè)核心資產(chǎn)的組成部分，也是組織的核心競(jìng)爭(zhēng)力的體現(xiàn)。逐步走向數(shù)據(jù)共享為基礎(chǔ)，激活生產(chǎn)力為目的的大數(shù)據(jù)時(shí)代。共享

BIG

DATA量變引發(fā)形態(tài)變化，大數(shù)據(jù)，數(shù)

據(jù)的共享成為社會(huì)化協(xié)同的基礎(chǔ)，

數(shù)據(jù)智能回歸線(xiàn)上，成為業(yè)務(wù)流

的核心，數(shù)據(jù)成為獨(dú)立的生產(chǎn)要

素與經(jīng)濟(jì)資源.分散

DB（MIS）信息電子化，數(shù)據(jù)

被各種系統(tǒng)記錄，

數(shù)據(jù)的流動(dòng)和應(yīng)用

從集中走向分散流動(dòng)

BI/DW信息膨脹，數(shù)據(jù)爆

炸，信息流動(dòng)突破

了系統(tǒng)、組織和地

域邊界，從數(shù)據(jù)中

尋找決策依據(jù).集中

No

DB企業(yè)內(nèi)部信息高度

集中。文檔、管理者頭腦中.82

大數(shù)據(jù)時(shí)代C方案聯(lián)盟www.fangan.vip?數(shù)據(jù)在哪里產(chǎn)生？-

IOTto

IOE?數(shù)據(jù)在哪里存儲(chǔ)？-

無(wú)所不在的端

&云?數(shù)據(jù)在哪里使用？-

每一個(gè)生產(chǎn)環(huán)節(jié)-

DT的價(jià)值發(fā)揮?

數(shù)據(jù)在哪里“丟失”的？-每一個(gè)生產(chǎn)環(huán)節(jié)的每一個(gè)組成要素-交換、共享、披露等外部環(huán)節(jié)大數(shù)據(jù)環(huán)境下，數(shù)據(jù)與數(shù)據(jù)風(fēng)險(xiǎn)無(wú)處不在方案聯(lián)盟www.fangan.vip83▉數(shù)據(jù)在收集、存儲(chǔ)、傳輸和共享流通的過(guò)程中，缺乏必要的技術(shù)保障手段，使得大量敏感信息的安全性無(wú)法得到有效的保障。集中的高價(jià)值數(shù)據(jù)，就也面臨越來(lái)越多的安全風(fēng)險(xiǎn)，一旦出現(xiàn)數(shù)據(jù)泄露，會(huì)給企業(yè)帶數(shù)據(jù)已成為追逐目標(biāo)！數(shù)據(jù)安全問(wèn)題愈發(fā)頻發(fā)，影響愈發(fā)嚴(yán)重84

數(shù)據(jù)安全問(wèn)題愈演愈烈來(lái)不給估量的損失和影響。方案聯(lián)盟www.fangan.vip-

在網(wǎng)絡(luò)安全法中，有大量篇幅的內(nèi)容是與數(shù)據(jù)安全相關(guān)的，涉及到技術(shù)和管理兩個(gè)方面的內(nèi)容。概括起來(lái)說(shuō)，網(wǎng)絡(luò)安全法

中有關(guān)網(wǎng)絡(luò)數(shù)據(jù)安全的技術(shù)性要求有如下幾點(diǎn)：l

對(duì)數(shù)據(jù)訪(fǎng)問(wèn)日志進(jìn)行審計(jì)，且日志留存時(shí)間不低于6個(gè)月（第21條）；l

對(duì)數(shù)據(jù)進(jìn)行分類(lèi)，將敏感數(shù)據(jù)與普通數(shù)據(jù)區(qū)別化處理（第21條）

；l

對(duì)重要數(shù)據(jù)進(jìn)行備份，容災(zāi)（第21、

34條）

；l

對(duì)重要數(shù)據(jù)進(jìn)行加密（第21、

31條）

；l

對(duì)個(gè)人信息進(jìn)行脫敏（第42條）。-

網(wǎng)絡(luò)安全法中涉及到的數(shù)據(jù)包括一般網(wǎng)絡(luò)數(shù)據(jù)（第21條）

，并且單獨(dú)對(duì)基礎(chǔ)信息基礎(chǔ)設(shè)施數(shù)據(jù)（第34條）

、

用戶(hù)信息和個(gè)人信息

（第42條），進(jìn)行重點(diǎn)保護(hù)。▉十三屆全國(guó)人大二次會(huì)議3月4日上午在人民大會(huì)堂新聞發(fā)布廳舉行新聞發(fā)布會(huì)，2019年將制定數(shù)據(jù)安全法。▉全國(guó)人民代表大會(huì)常務(wù)委員會(huì)于2016年11月7日發(fā)布，自2017年6月1日起施行《網(wǎng)絡(luò)安全法》國(guó)家對(duì)數(shù)據(jù)安全提出明確要求方案聯(lián)盟www.fangan.vip85網(wǎng)絡(luò)安全設(shè)備安全應(yīng)用安全數(shù)據(jù)安全

平臺(tái)安全終端安全信息安全體系

關(guān)注重點(diǎn)方案聯(lián)盟www.fangan.vip86數(shù)據(jù)采集需要采集接收的數(shù)據(jù)

多源異構(gòu)，數(shù)據(jù)接入

方式多種多樣，造成

數(shù)據(jù)采集源頭存在安

全隱患，數(shù)據(jù)溯源難數(shù)據(jù)流通數(shù)據(jù)使用明文數(shù)據(jù)收集之后進(jìn)行整

合處理落地到數(shù)據(jù)庫(kù)以及

加工使用，應(yīng)用展現(xiàn)，

數(shù)據(jù)都是以明文的形式呈現(xiàn)

給業(yè)務(wù)、運(yùn)維及管理等內(nèi)

部人員。權(quán)限濫用，誤操

作，缺乏審計(jì)等原因很容

易竊取或非法修改數(shù)據(jù)交換共享促進(jìn)了數(shù)據(jù)的流通，數(shù)據(jù)不再局限于部

門(mén)內(nèi)、企業(yè)內(nèi)使用，數(shù)據(jù)流通環(huán)節(jié)增大了數(shù)據(jù)泄露等安全隱患，需要對(duì)數(shù)據(jù)的去向進(jìn)行跟蹤。87數(shù)據(jù)時(shí)代的數(shù)據(jù)安全威脅數(shù)據(jù)分類(lèi)分級(jí)數(shù)據(jù)來(lái)源和流向溯源數(shù)據(jù)駐留和資產(chǎn)地圖元數(shù)據(jù)的管理數(shù)據(jù)中間沉淀權(quán)限漏洞非法爬蟲(chóng)數(shù)據(jù)濫用信息泄露回溯研發(fā)后門(mén)&模型和BI外包云環(huán)境可信性大數(shù)據(jù)綜合風(fēng)險(xiǎn)方案聯(lián)盟www.fangan.vipu

缺乏數(shù)據(jù)保護(hù)評(píng)價(jià)指標(biāo)、方法和數(shù)據(jù)u

數(shù)據(jù)保護(hù)管控措施的有效性無(wú)法客觀評(píng)價(jià)和感知u

缺乏評(píng)價(jià)導(dǎo)致無(wú)法有效改進(jìn)，難以保證事件再次發(fā)生u數(shù)量多、形式多，數(shù)據(jù)關(guān)系復(fù)雜，難以進(jìn)行梳理u對(duì)于內(nèi)容是否敏感由人主觀意愿判定，缺乏標(biāo)準(zhǔn)性-缺乏自動(dòng)化的數(shù)據(jù)內(nèi)容分類(lèi)和標(biāo)記技術(shù)手段u

缺乏數(shù)據(jù)分類(lèi)保護(hù)規(guī)范和分類(lèi)分級(jí)安全策略-缺乏對(duì)不同數(shù)據(jù)在不同位置的風(fēng)險(xiǎn)評(píng)估視圖，保護(hù)難以下手u

覆蓋不同位置的存儲(chǔ)、傳輸、使用全過(guò)程的保護(hù)成

本高無(wú)法明確某類(lèi)敏感數(shù)據(jù)在組織的整體分布情況-數(shù)據(jù)類(lèi)型多、形態(tài)多、數(shù)量多，增加內(nèi)容識(shí)別的難度-缺乏處理漏報(bào)和誤報(bào)的技術(shù)手段-需要覆蓋終端、網(wǎng)絡(luò)、系統(tǒng)、數(shù)據(jù)庫(kù)、存儲(chǔ)等所有位置數(shù)據(jù)時(shí)代的安全管理難點(diǎn)u方案聯(lián)盟www.fangan.vipCAD88Bu安全策略分類(lèi)分級(jí)010602050304數(shù)據(jù)梳理對(duì)

于

數(shù)

據(jù)

資

產(chǎn)

進(jìn)行

梳理

，

評(píng)估

所有者

、

用

途

、

存

儲(chǔ)、分發(fā)

、

價(jià)值

等屬性，進(jìn)

行

數(shù)

據(jù)

分類(lèi)

分級(jí)

管

控。制定防控方法在

分

類(lèi)

分

級(jí)

的

基礎(chǔ)

上，分

別制定安全防護(hù)

策

略和

管控

流

程，實(shí)

現(xiàn)

數(shù)

據(jù)

的

分

級(jí)安

全管

控

。89

數(shù)據(jù)安全治理-總體思路管理機(jī)制風(fēng)險(xiǎn)評(píng)估監(jiān)

控

敏

感

數(shù)

據(jù)

異常

訪(fǎng)問(wèn)

行

為，進(jìn)

行

風(fēng)

險(xiǎn)

評(píng)

估

，

形

成安

全

態(tài)勢(shì)感知技術(shù)防護(hù)全過(guò)程防控面

向

數(shù)

據(jù)

采

集

、數(shù)

據(jù)加

工

處理

、數(shù)

據(jù)使

用及

數(shù)據(jù)流通的全

過(guò)程

，

采取加密、訪(fǎng)問(wèn)控制、脫

敏、水印、監(jiān)視等技術(shù)手段進(jìn)行

全方位技術(shù)防

護(hù)。持續(xù)優(yōu)化態(tài)勢(shì)感知改進(jìn)措施持

續(xù)

修

正

優(yōu)

化

分類(lèi)

分級(jí)

及

相應(yīng)

的

管

控

策

略

及

管理

制度

，

持續(xù)

有效的保障

數(shù)

據(jù)安

全。組織保障建

立

安

全

保

障

組織

，

構(gòu)

建

構(gòu)建

安全

管理

機(jī)制

，

共

同負(fù)責(zé)

數(shù)據(jù)

安全

。方案聯(lián)盟www.fangan.vip數(shù)據(jù)安全治理-業(yè)務(wù)邏輯方案聯(lián)盟www.fangan.vip90結(jié)構(gòu)化數(shù)據(jù)

|非結(jié)構(gòu)數(shù)據(jù)業(yè)務(wù)系統(tǒng)

管理系統(tǒng)

運(yùn)維系統(tǒng)第三方系統(tǒng)……數(shù)據(jù)加密數(shù)據(jù)脫敏數(shù)據(jù)審計(jì)

數(shù)字水印權(quán)限控制風(fēng)險(xiǎn)規(guī)則管理風(fēng)險(xiǎn)行為監(jiān)控風(fēng)險(xiǎn)行為分析風(fēng)險(xiǎn)行為預(yù)警安全態(tài)勢(shì)評(píng)估安全策略配置加密密鑰管理脫敏算法管理水印參數(shù)設(shè)置用戶(hù)權(quán)限配置

分類(lèi)信息管理分級(jí)信息管理分類(lèi)規(guī)則管理數(shù)據(jù)修正敏感數(shù)據(jù)地圖

數(shù)據(jù)安全治理-功能架構(gòu)91數(shù)據(jù)安全治理分類(lèi)分級(jí)管理安全態(tài)勢(shì)感知安全策略管理方案聯(lián)盟www.fangan.vip數(shù)據(jù)安全小組部門(mén)

數(shù)據(jù)安全經(jīng)理

管理團(tuán)隊(duì)數(shù)據(jù)數(shù)據(jù)資源

控制點(diǎn)生成方owner

owner員工▉數(shù)據(jù)安全，三分管，七分治。組織構(gòu)架安全管理組織，制定安全管理機(jī)制，保障安全管理工作順利執(zhí)行。審計(jì)數(shù)據(jù)安全治理-管理機(jī)制集團(tuán)統(tǒng)一集團(tuán)統(tǒng)一，BU可選方案聯(lián)盟www.fangan.vip控制層執(zhí)行層策略層管理層CRO92結(jié)構(gòu)化數(shù)據(jù)非結(jié)構(gòu)化數(shù)據(jù)▉支持關(guān)鍵字、正則表達(dá)式、以及人工智能等多種數(shù)據(jù)識(shí)別技術(shù)，適應(yīng)多種分類(lèi)分級(jí)規(guī)則制定。內(nèi)置規(guī)則內(nèi)置豐富的敏感數(shù)據(jù)識(shí)別規(guī)則，包括個(gè)人信息、銀行及卡號(hào)、車(chē)等信息等關(guān)鍵字、正則表達(dá)式規(guī)則自定義通配符、簡(jiǎn)單邏輯描述、簡(jiǎn)

單關(guān)聯(lián)、序列等自然語(yǔ)言處理、先進(jìn)數(shù)據(jù)挖掘（聚

類(lèi)、分類(lèi)等）、機(jī)器學(xué)習(xí)

（無(wú)監(jiān)督、

有監(jiān)督）數(shù)據(jù)安全治理-分類(lèi)分級(jí)支持對(duì)數(shù)據(jù)內(nèi)容進(jìn)

行分類(lèi)分級(jí)支持對(duì)元數(shù)據(jù)模型

進(jìn)行分類(lèi)分級(jí)數(shù)據(jù)內(nèi)容數(shù)據(jù)模型AI分類(lèi)分級(jí)方案聯(lián)盟www.fangan.vip93數(shù)據(jù)安全治理-分類(lèi)分級(jí)分類(lèi)分