數(shù)據(jù)治理體系完整指南

目錄

1.數(shù)據(jù)治理體系.......................................................................................2

2.如何構(gòu)建企業(yè)級(jí)數(shù)據(jù)治理體系........................................................................4

2.1.“數(shù)據(jù)治理”到底有什么用？.....................................................................5

2.2.“數(shù)據(jù)治理”應(yīng)該做什么？.......................................................................5

2.3.“數(shù)據(jù)治理”應(yīng)該怎么做？.......................................................................6

2.4.數(shù)據(jù)治理能不能一步到位？......................................................................7

2.5.數(shù)據(jù)治理全景圖................................................................................8

3.元數(shù)據(jù)...............................................................................................8

3.1,元數(shù)據(jù)解決的問題..............................................................................8

3.2.元數(shù)據(jù)分類.....................................................................................8

3.3,元數(shù)據(jù)模型成熟度..............................................................................9

3.4.元數(shù)據(jù)建設(shè)目標(biāo)和管理手段......................................................................9

4.數(shù)據(jù)標(biāo)準(zhǔn)............................................................................................10

4.1.內(nèi)容..........................................................................................10

4.2.數(shù)據(jù)標(biāo)準(zhǔn)內(nèi)容...................................................................................11

4.2.1.構(gòu)成和數(shù)據(jù)標(biāo)準(zhǔn)內(nèi)容.......................................................................11

4.2.2.數(shù)據(jù)標(biāo)準(zhǔn)類型（舉例）.......................................................................12

4.3.數(shù)據(jù)標(biāo)準(zhǔn)管理體系涉及思路......................................................................12

4.4.數(shù)據(jù)標(biāo)準(zhǔn)架構(gòu)體系..............................................................................14

4.5.管理類數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)原則........................................................................14

4.6.數(shù)據(jù)標(biāo)準(zhǔn)生命周期管理..........................................................................15

5.數(shù)據(jù)建模..........................................................................................16

5.1.概念..........................................................................................16

5.2.數(shù)據(jù)模型分類..................................................................................17

5.3.數(shù)據(jù)模型生命周期.............................................................................17

5.4.案例..........................................................................................18

6.數(shù)據(jù)集成..........................................................................................18

6.1.概念..........................................................................................18

6.2.數(shù)據(jù)集成整體架構(gòu).............................................................................19

7.數(shù)據(jù)生命周期......................................................................................19

7.1.階段劃分......................................................................................19

7.2.管理要求和手段...............................................................................20

第1頁共34頁

7.3.管理規(guī)范和管理辦法..................................21

8.數(shù)據(jù)質(zhì)量..........................................................................................21

8.1.數(shù)據(jù)質(zhì)量管理目標(biāo)....................................21

8.2.生命周期.............................................22

8.3.數(shù)據(jù)質(zhì)量維度..................................................................................22

8.4.數(shù)據(jù)質(zhì)量常用工具.............................................................................22

9.數(shù)據(jù)開發(fā)..........................................................................................22

9.1.數(shù)據(jù)資產(chǎn).............................................23

9.2.數(shù)據(jù)服務(wù).............................................24

10.數(shù)據(jù)安全.........................................................................................25

11.ETL——按照抽取、轉(zhuǎn)換、加載流程................................................................25

11.1.含義.........................................................................................25

11.2.ETL模式............................................26

11.3.離線和實(shí)時(shí)...................................................................................29

12.數(shù)據(jù)治理架構(gòu)的總結(jié)與分析.........................................................................30

12.1.國(guó)際數(shù)據(jù)管理協(xié)會(huì)(DAMA)數(shù)據(jù)治理框架............31

12.2.IBM數(shù)據(jù)治理框架圖二DAMA環(huán)境因素六邊圖........32

1.數(shù)據(jù)治理體系

數(shù)據(jù)治理體系內(nèi)容從兩個(gè)維度來看：

1)數(shù)據(jù)治理難點(diǎn)痛點(diǎn)：數(shù)據(jù)脈絡(luò)不清晰、數(shù)據(jù)匯聚能力不足、數(shù)據(jù)管控能力薄弱、數(shù)據(jù)治理體

系不完善、開放形式不完善。

2)數(shù)據(jù)治理5個(gè)核心：理、聚、管、治、用。

第2頁共34頁

數(shù)據(jù)分散孤立

數(shù)據(jù)脈絡(luò)不清晰數(shù)據(jù)跨層交叉

數(shù)據(jù)體系不全

缺少數(shù)據(jù)匯聚機(jī)制

數(shù)據(jù)匯聚能力不足數(shù)據(jù)匯聚時(shí)效性不高

缺乏多源異構(gòu)匯聚能力

缺乏數(shù)據(jù)統(tǒng)一標(biāo)準(zhǔn)

數(shù)據(jù)質(zhì)量參差不開

數(shù)據(jù)治理難點(diǎn)痛點(diǎn)數(shù)據(jù)管控能力薄弱

數(shù)據(jù)口徑不齊

安全權(quán)限管理分散

數(shù)據(jù)開發(fā)和標(biāo)準(zhǔn)脫節(jié)

治理體系不完輯數(shù)據(jù)開發(fā)過程不透明

缺乏全流程可視化管理工具

缺少統(tǒng)一數(shù)據(jù)資產(chǎn)視圖

數(shù)據(jù)治理體系

開放形式不完善數(shù)據(jù)開放形式單一

數(shù)據(jù)價(jià)值難以評(píng)估

文本

理梳理組織管核的數(shù)據(jù)，形成數(shù)據(jù)脈絡(luò)

聚構(gòu)建全面的數(shù)據(jù):匚聚機(jī)制

通過標(biāo)準(zhǔn)管理、元數(shù)據(jù)管理、質(zhì)量管理

數(shù)據(jù)治理五個(gè)核心

治實(shí)現(xiàn)數(shù)據(jù)的清洗、分類’轉(zhuǎn)換、關(guān)聯(lián)、質(zhì)檢、入庫等

數(shù)據(jù)治理最終價(jià)值體現(xiàn)，通過數(shù)據(jù)的共享開發(fā)、乂［濟(jì)也崩硼楊石焉場(chǎng)

用景提升數(shù)據(jù)價(jià)值

數(shù)據(jù)治理體系主要包含內(nèi)容有數(shù)據(jù)標(biāo)準(zhǔn)、元數(shù)據(jù)、數(shù)據(jù)建模、數(shù)據(jù)集成、數(shù)據(jù)生命周期、數(shù)據(jù)

質(zhì)量、數(shù)據(jù)開放、數(shù)據(jù)安全及數(shù)據(jù)應(yīng)用。

第3頁共34頁

關(guān)

價(jià)值

鍵業(yè)務(wù)

點(diǎn)

度

和制

架構(gòu)

組織

技術(shù)

蹴

數(shù)

準(zhǔn)

雌標(biāo)

建模

數(shù)據(jù)

據(jù)元數(shù)據(jù)

治

數(shù)理

據(jù)組

治織

理架

周期

生命

構(gòu)數(shù)據(jù)

體與

系制

度

流

程

用

數(shù)據(jù)應(yīng)

安全

數(shù)據(jù)

據(jù)

聊繳

松子

、二色

體系

治理

數(shù)據(jù)

業(yè)級(jí)

建企

何構(gòu)

2.如

是寫

候都只

多數(shù)時(shí)

，大

是吧

”。但

治理

“數(shù)據(jù)

加一個(gè)

在旁邊

，都會(huì)

時(shí)候

構(gòu)的

據(jù)架

做數(shù)

我在

通常

外人道

不足為

但是又

效，

能見

期才

，長(zhǎng)