數(shù)據(jù)體系概述2017-9-11決策者對(duì)數(shù)據(jù)的困惑數(shù)據(jù)之間有什么關(guān)系？誰能理解我們企業(yè)的數(shù)據(jù)？數(shù)據(jù)里面的同一個(gè)術(shù)語怎么有不同的解釋？我的企業(yè)里有什么數(shù)據(jù)？數(shù)據(jù)是如何在企業(yè)內(nèi)的各系統(tǒng)間傳遞的？數(shù)據(jù)是從哪里來的？我能相信我看到的數(shù)據(jù)嗎？展示類系統(tǒng)分析類系統(tǒng)存儲(chǔ)類系統(tǒng)采集類系統(tǒng)管理類系統(tǒng)數(shù)據(jù)領(lǐng)域總體框架圖規(guī)劃規(guī)范定義創(chuàng)建&獲取維護(hù)&使用存檔&檢索清除&銷毀生命周期管理角度系統(tǒng)角度模型角度概念模型邏輯模型物理模型標(biāo)準(zhǔn)模型數(shù)據(jù)管控平臺(tái)數(shù)據(jù)標(biāo)準(zhǔn)管理系統(tǒng)元數(shù)據(jù)管理系統(tǒng)企業(yè)架構(gòu)系統(tǒng)數(shù)據(jù)標(biāo)準(zhǔn)管理元數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)安全管理主數(shù)據(jù)管理數(shù)據(jù)架構(gòu)管理概念邏輯物理主數(shù)據(jù)管理系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)數(shù)據(jù)服務(wù)平臺(tái)主題主題間關(guān)系主題中的重要實(shí)體實(shí)體間的相互關(guān)系實(shí)體關(guān)系屬性數(shù)據(jù)庫表和字段索引應(yīng)用數(shù)據(jù)模型滿足最終用戶對(duì)數(shù)據(jù)的訪問滿足應(yīng)用系統(tǒng)對(duì)數(shù)據(jù)的存取數(shù)據(jù)分類標(biāo)準(zhǔn)數(shù)據(jù)編碼規(guī)則數(shù)據(jù)分級(jí)標(biāo)準(zhǔn)數(shù)據(jù)共享目錄數(shù)據(jù)管理政策、組織、流程企業(yè)主數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)集成交換標(biāo)準(zhǔn)數(shù)據(jù)庫ETL數(shù)據(jù)倉庫決策分析數(shù)據(jù)采集器、攝像頭、掃描儀網(wǎng)絡(luò)爬蟲文件系統(tǒng)統(tǒng)計(jì)報(bào)表系統(tǒng)商業(yè)智能BI大屏展示系統(tǒng)實(shí)時(shí)監(jiān)控系統(tǒng)大數(shù)據(jù)平臺(tái)系統(tǒng)數(shù)據(jù)領(lǐng)域各模塊關(guān)系圖大數(shù)據(jù)平臺(tái)數(shù)據(jù)源采集層數(shù)據(jù)層能力層應(yīng)用層爬蟲數(shù)據(jù)流處理ETL主數(shù)據(jù)庫分布式數(shù)據(jù)庫文件系統(tǒng)基礎(chǔ)分析能力多維分析能力數(shù)據(jù)挖掘能力實(shí)時(shí)分析能力數(shù)據(jù)共享能力自助分析能力指標(biāo)應(yīng)用報(bào)表應(yīng)用主題分析專題分析標(biāo)準(zhǔn)概念模型邏輯模型主題主題間關(guān)系主題中的重要實(shí)體實(shí)體間的相互關(guān)系實(shí)體關(guān)系屬性數(shù)據(jù)分類標(biāo)準(zhǔn)數(shù)據(jù)編碼規(guī)則數(shù)據(jù)分級(jí)標(biāo)準(zhǔn)數(shù)據(jù)共享目錄數(shù)據(jù)集成交換標(biāo)準(zhǔn)給平臺(tái)提供模型、標(biāo)準(zhǔn)存儲(chǔ)的是經(jīng)過標(biāo)準(zhǔn)化的業(yè)務(wù)數(shù)據(jù)詳細(xì)、具體的標(biāo)準(zhǔn)、模型，沒有業(yè)務(wù)數(shù)據(jù)管理類系統(tǒng)數(shù)據(jù)管控平臺(tái)數(shù)據(jù)標(biāo)準(zhǔn)管理系統(tǒng)元數(shù)據(jù)管理系統(tǒng)企業(yè)架構(gòu)系統(tǒng)主數(shù)據(jù)管理系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)數(shù)據(jù)服務(wù)平臺(tái)通過系統(tǒng)將模型、標(biāo)準(zhǔn)管理起來存儲(chǔ)具體的標(biāo)準(zhǔn)、模型，以及對(duì)模型、標(biāo)準(zhǔn)的管理與平臺(tái)進(jìn)行集成，提供相應(yīng)的服務(wù)。數(shù)據(jù)管控?cái)?shù)據(jù)標(biāo)準(zhǔn)管理元數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)安全管理主數(shù)據(jù)管理數(shù)據(jù)架構(gòu)管理明確數(shù)據(jù)管控的組織、職責(zé)，規(guī)范數(shù)據(jù)管控的制度、流程及系統(tǒng)工具支撐數(shù)據(jù)領(lǐng)域各要素關(guān)系圖之一數(shù)據(jù)庫對(duì)象集合數(shù)據(jù)集市數(shù)據(jù)流數(shù)據(jù)平臺(tái)系統(tǒng)管理平臺(tái)元數(shù)據(jù)，進(jìn)行數(shù)據(jù)影響、血緣分析管理平臺(tái)數(shù)據(jù)質(zhì)量提供平臺(tái)溝通渠道智能調(diào)度系統(tǒng)票務(wù)系統(tǒng)資產(chǎn)管理系統(tǒng)車輛安全元數(shù)據(jù)管理系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)數(shù)據(jù)服務(wù)平臺(tái)分析、展示類應(yīng)用系統(tǒng)數(shù)據(jù)抽取開發(fā)者業(yè)務(wù)部門管理員數(shù)據(jù)提供數(shù)據(jù)存儲(chǔ)管理公司內(nèi)的數(shù)據(jù)標(biāo)準(zhǔn)人力資源管理系統(tǒng)數(shù)據(jù)標(biāo)準(zhǔn)管理系統(tǒng)查詢數(shù)據(jù)標(biāo)準(zhǔn)，以開發(fā)符合數(shù)據(jù)標(biāo)準(zhǔn)的應(yīng)用提交標(biāo)準(zhǔn)代碼比對(duì)文檔查詢數(shù)據(jù)標(biāo)準(zhǔn)規(guī)范，反饋建議提出數(shù)據(jù)標(biāo)準(zhǔn)需求申請(qǐng)維護(hù)數(shù)據(jù)標(biāo)準(zhǔn)制訂、發(fā)布標(biāo)準(zhǔn)應(yīng)用系統(tǒng)代碼標(biāo)準(zhǔn)比對(duì)查詢數(shù)據(jù)平臺(tái)相關(guān)元數(shù)據(jù)，為開發(fā)應(yīng)用提供參考數(shù)據(jù)變更影響評(píng)估申請(qǐng)數(shù)據(jù)變更影響分析數(shù)據(jù)問題血緣分析了解本機(jī)構(gòu)特定系統(tǒng)數(shù)據(jù)質(zhì)量提出業(yè)務(wù)數(shù)據(jù)質(zhì)量檢核需求定義檢核需求與規(guī)則分析數(shù)據(jù)平臺(tái)數(shù)據(jù)質(zhì)量發(fā)現(xiàn)、發(fā)布數(shù)據(jù)檢核問題針對(duì)數(shù)據(jù)質(zhì)量問題提出完善建議數(shù)據(jù)平臺(tái)服務(wù)申請(qǐng)?zhí)峁?shù)據(jù)平臺(tái)服務(wù)數(shù)據(jù)平臺(tái)服務(wù)申請(qǐng)與數(shù)據(jù)平臺(tái)有效溝通數(shù)據(jù)存儲(chǔ)標(biāo)準(zhǔn)/模型庫圖示數(shù)據(jù)管理人員借助數(shù)據(jù)管理相關(guān)工具，實(shí)現(xiàn)對(duì)數(shù)據(jù)領(lǐng)域各要素的管理數(shù)據(jù)梳理業(yè)務(wù)梳理數(shù)據(jù)分析應(yīng)用分析國家、行業(yè)標(biāo)準(zhǔn)定義標(biāo)準(zhǔn)定義模型定義規(guī)則數(shù)據(jù)源系統(tǒng)數(shù)據(jù)質(zhì)量探查整體統(tǒng)計(jì)細(xì)節(jié)探索關(guān)聯(lián)分析數(shù)據(jù)質(zhì)量評(píng)估報(bào)告數(shù)據(jù)標(biāo)準(zhǔn)、模型、規(guī)則數(shù)據(jù)處理匹配、融合標(biāo)準(zhǔn)化處理交互式修復(fù)優(yōu)質(zhì)數(shù)據(jù)數(shù)據(jù)集成數(shù)據(jù)監(jiān)控大數(shù)據(jù)處理數(shù)據(jù)集成數(shù)據(jù)中心數(shù)據(jù)挖掘數(shù)據(jù)領(lǐng)域各要素關(guān)系圖之二L1：數(shù)據(jù)標(biāo)準(zhǔn)管理模塊將標(biāo)準(zhǔn)定義映射到元數(shù)據(jù)信息上，實(shí)現(xiàn)數(shù)據(jù)標(biāo)準(zhǔn)的規(guī)范要求落地。L2：元數(shù)據(jù)管理模塊為數(shù)據(jù)資產(chǎn)管理模塊提供存儲(chǔ)模型、屬性信息查詢服務(wù)。L3：元數(shù)據(jù)管理模塊為數(shù)據(jù)質(zhì)量管理模塊提供元數(shù)據(jù)相關(guān)屬性信息。L4：用戶通過元數(shù)據(jù)定義大數(shù)據(jù)平臺(tái)的數(shù)據(jù)結(jié)構(gòu)。L5：數(shù)據(jù)質(zhì)量管理模塊根據(jù)采集需求從大數(shù)據(jù)平臺(tái)采集數(shù)據(jù)。L6：數(shù)據(jù)質(zhì)量管理模塊將數(shù)據(jù)質(zhì)量問題反饋給大數(shù)據(jù)平臺(tái)。L7：數(shù)據(jù)質(zhì)量管理模塊向資產(chǎn)模塊提交數(shù)據(jù)質(zhì)量評(píng)估結(jié)果。L8：元數(shù)據(jù)管理模塊為數(shù)據(jù)安全管理模塊提供隱私級(jí)別定義服務(wù)。L9：數(shù)據(jù)資產(chǎn)管理模塊發(fā)起資產(chǎn)訪問申請(qǐng)，由數(shù)據(jù)安全管理模塊控制用戶訪問權(quán)限，控制數(shù)據(jù)資產(chǎn)的增加、刪除、變更操作權(quán)限，對(duì)訪問的數(shù)據(jù)內(nèi)容、數(shù)據(jù)屬性等操作進(jìn)行管控。L10：數(shù)據(jù)安全管理模塊為大數(shù)據(jù)平臺(tái)提供數(shù)據(jù)訪問權(quán)限策略。數(shù)據(jù)領(lǐng)域各要素關(guān)系圖之三概念模型邏輯模型物理模型構(gòu)建邏輯模型的框架輸入ETL元數(shù)據(jù)管理輸入應(yīng)用數(shù)據(jù)模型數(shù)據(jù)應(yīng)用輸入數(shù)據(jù)倉庫數(shù)據(jù)集市數(shù)據(jù)領(lǐng)域各要素關(guān)系圖之四企業(yè)開展數(shù)據(jù)管理工作的順序展示類系統(tǒng)分析類系統(tǒng)存儲(chǔ)類系統(tǒng)采集類系統(tǒng)管理類系統(tǒng)管理角度系統(tǒng)角度模型角度概念模型邏輯模型物理模型標(biāo)準(zhǔn)模型數(shù)據(jù)管控平臺(tái)數(shù)據(jù)標(biāo)準(zhǔn)管理系統(tǒng)元數(shù)據(jù)管理系統(tǒng)企業(yè)架構(gòu)系統(tǒng)數(shù)據(jù)標(biāo)準(zhǔn)管理元數(shù)據(jù)管理數(shù)據(jù)質(zhì)量管理數(shù)據(jù)安全管理主數(shù)據(jù)管理數(shù)據(jù)架構(gòu)管理主數(shù)據(jù)管理系統(tǒng)數(shù)據(jù)質(zhì)量管理系統(tǒng)數(shù)據(jù)服務(wù)平臺(tái)主題主題間關(guān)系主題中的重要實(shí)體實(shí)體間的相互關(guān)系實(shí)體關(guān)系屬性數(shù)據(jù)庫表和字段索引應(yīng)用數(shù)據(jù)模型滿足最終用戶對(duì)數(shù)據(jù)的訪問滿足應(yīng)用系統(tǒng)對(duì)數(shù)據(jù)的存取數(shù)據(jù)分類標(biāo)準(zhǔn)數(shù)據(jù)編碼規(guī)則數(shù)據(jù)分級(jí)標(biāo)準(zhǔn)數(shù)據(jù)共享目錄數(shù)據(jù)管理政策、組織、流程企業(yè)主數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)集成交換標(biāo)準(zhǔn)數(shù)據(jù)庫ETL數(shù)據(jù)倉庫決策分析數(shù)據(jù)采集器、攝像頭、掃描儀網(wǎng)絡(luò)爬蟲文件系統(tǒng)統(tǒng)計(jì)報(bào)表系統(tǒng)商業(yè)智能BI大屏展示系統(tǒng)實(shí)時(shí)監(jiān)控系統(tǒng)