用友網(wǎng)絡科技股份有限公司2024/5/3

數(shù)據(jù)倉庫設計案例介紹數(shù)倉構(gòu)建方法論POC數(shù)倉演示數(shù)倉案例分析數(shù)據(jù)倉庫構(gòu)建過程數(shù)據(jù)探查數(shù)據(jù)模型數(shù)據(jù)集成數(shù)據(jù)存儲數(shù)據(jù)應用數(shù)據(jù)探查梳理應用系統(tǒng)、數(shù)據(jù)流、數(shù)據(jù)關聯(lián)、數(shù)據(jù)分布等現(xiàn)狀，為后續(xù)工作做好基礎準備。數(shù)據(jù)模型構(gòu)建企業(yè)信息的完整統(tǒng)一數(shù)據(jù)模型，包含了現(xiàn)有系統(tǒng)的數(shù)據(jù)實體和實體間的關系、屬性、定義、描述和范例，綜合展現(xiàn)數(shù)據(jù)之間的關系，并適應新的數(shù)據(jù)要求。數(shù)據(jù)集成多異構(gòu)環(huán)境下的數(shù)據(jù)整合、多數(shù)據(jù)源下的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)整合、同時實現(xiàn)各級組織之間的數(shù)據(jù)傳輸。數(shù)據(jù)存儲數(shù)據(jù)倉庫設計方法數(shù)據(jù)倉庫總體架構(gòu)數(shù)據(jù)倉庫部署架構(gòu)數(shù)據(jù)應用定義數(shù)據(jù)的應用類型、應用對象及應用范疇。應用方式：數(shù)據(jù)接口型云端自助型移動分析型主數(shù)據(jù)規(guī)范元數(shù)據(jù)規(guī)范數(shù)據(jù)集成規(guī)范數(shù)據(jù)安全規(guī)范12345數(shù)據(jù)質(zhì)量規(guī)范關鍵步驟數(shù)據(jù)治理0數(shù)據(jù)探查生產(chǎn)數(shù)據(jù)來源分析數(shù)據(jù)與應用分布關系業(yè)務實體間數(shù)據(jù)流轉(zhuǎn)上下級組織間數(shù)據(jù)流轉(zhuǎn)概念模型邏輯模型物理模型定義了企業(yè)級的主題域、層面、主要的實體及實體間的業(yè)務關系對概念數(shù)據(jù)模型的進一步分解和細化，描述模型實體以及它們?nèi)绾侮P聯(lián)描述模型實體的細節(jié)，包括通過使用特定的(數(shù)據(jù)庫)產(chǎn)品如何實施模型的信息。數(shù)據(jù)模型數(shù)據(jù)模型設計方法星型模型目前數(shù)據(jù)倉庫常用的兩種模型為星型和雪花型:雪花模型維度與事實表的關鍵處理技術：維度表

一致性維表，緩慢變化維，層級設計事實表

事務性事實表，快照型事實表數(shù)據(jù)模型分層設計整合數(shù)據(jù)層：是EDW存儲數(shù)據(jù)的核心層，是對ODS整合數(shù)據(jù)按主題、維度的深度整合。匯總數(shù)據(jù)層：對整合層的數(shù)據(jù)按照主題分析的需要進行匯總，實現(xiàn)數(shù)據(jù)的收斂。應用數(shù)據(jù)層：為各級各層用戶提供綜合查詢統(tǒng)計、主題分析、專題分析以及決策支持。接口數(shù)據(jù)層存儲從源業(yè)務系統(tǒng)采集的數(shù)據(jù)，作為進行數(shù)據(jù)整合工作的臨時工作區(qū)。整合數(shù)據(jù)層存儲的是經(jīng)過數(shù)據(jù)淸洗、轉(zhuǎn)換、整合后的業(yè)務數(shù)據(jù)，是ODS的核心數(shù)據(jù)層。匯總數(shù)據(jù)層是針對ODS支撐的跨系統(tǒng)生產(chǎn)報表等應用需要，根據(jù)主題的維度形成的企業(yè)統(tǒng)計、匯總數(shù)據(jù)。數(shù)據(jù)共享層是一個數(shù)據(jù)服務層，本身不存儲數(shù)據(jù)。通過提供準實時批量數(shù)據(jù)共享和實時查詢服務來實現(xiàn)跨系統(tǒng)數(shù)據(jù)共享。數(shù)據(jù)集成技術數(shù)據(jù)獲取方式業(yè)務系統(tǒng)推送數(shù)據(jù)倉庫抽取數(shù)據(jù)獲取介質(zhì)文件上傳數(shù)據(jù)交換平臺數(shù)據(jù)庫直連CDC日志分析同步數(shù)據(jù)更新策略增量全量數(shù)據(jù)調(diào)度策略實時日周月自定期期間數(shù)倉存儲方案關系型數(shù)據(jù)庫在線存儲分層分庫，表分區(qū)預估數(shù)據(jù)增量，數(shù)據(jù)分布，確定分區(qū)方案離線存儲降低存儲成本，歷史數(shù)據(jù)歸檔離線列式數(shù)據(jù)庫壓縮率高，線性擴展列式存儲，聚合分析計算查詢效率高DB2-BluNoSQL數(shù)據(jù)庫分布式文件存儲，部署成本低長文本，照片等多媒體數(shù)據(jù)，快速索引查詢UDH大數(shù)據(jù)平臺數(shù)倉構(gòu)建方法論POC數(shù)倉演示數(shù)倉案例分析POC數(shù)據(jù)模型設計DM層DW層ODS層物資域合同域組織域項目域供應商域合同管理物資管理資金計劃主子表物資結(jié)算主子表物資驗收主子表業(yè)務系統(tǒng)資金計劃物資結(jié)算物資驗收項目管理數(shù)據(jù)集成元數(shù)據(jù)管理物資庫Oracle與UDH大數(shù)據(jù)平臺檔案庫供應商項目組織合同物資庫結(jié)構(gòu)設計方案物資庫Oracle物資基本分類物資安裝分類物資土建分類物資其他分類物資基本信息HBase庫索引信息圖片信息長文本信息利用維度重分類功能進行物料的多維度劃分數(shù)據(jù)集成關鍵技術演示結(jié)構(gòu)設計數(shù)據(jù)流設計調(diào)度策略設計數(shù)倉構(gòu)建方法論POC數(shù)倉演示數(shù)倉案例分析數(shù)據(jù)模型分層設計—聯(lián)通資金項目案例介紹1DWDM層資金業(yè)務系統(tǒng)資金計劃資金流資金調(diào)撥檔案數(shù)據(jù)項目銀行組織渠道地區(qū)支付項目組織地區(qū)支付方式歸集分析收入完成分析支出方式分析收入完成情況分析經(jīng)營成本支出分析常規(guī)可視化分析地圖分析地區(qū)收入渠道收入營業(yè)廳收入計劃支出數(shù)據(jù)模型分層設計—聯(lián)通資金項目案例介紹1數(shù)據(jù)模型分層設計—BQ商業(yè)分析案例介紹2DM層DW層BS層訂單域人員域客戶域組織域供應商域產(chǎn)品域業(yè)績分析客商分類財務供應鏈HR管理報表系統(tǒng)