商業(yè)智能實施方案Tuesday,January17,20231、實施方法?規(guī)劃解決方案支持數(shù)據(jù)倉庫管理(處理流程與操作)物理數(shù)據(jù)庫設(shè)計數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)設(shè)計與實現(xiàn)支持與增強解決方案體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理數(shù)據(jù)倉庫評估應(yīng)用增強邏輯數(shù)據(jù)模型回顧物理數(shù)據(jù)庫回顧性能調(diào)整容量規(guī)劃解決方案集成定制解決方案規(guī)劃詳細數(shù)據(jù)分析解決方案準備就緒解決方案實施建議現(xiàn)成解決方案規(guī)劃數(shù)據(jù)倉庫策略開發(fā)業(yè)務(wù)探索業(yè)務(wù)探索解決方案定義邏輯數(shù)據(jù)模型設(shè)計修改邏輯數(shù)據(jù)模型驗證解決方案數(shù)據(jù)倉庫的循環(huán)過程2、實施步驟數(shù)據(jù)倉庫管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成項目具體實施步驟項目前期準備業(yè)務(wù)探索信息探索邏輯數(shù)據(jù)模型1.項目前期準備2.業(yè)務(wù)探索（BusinessDiscovery)3.信息探索（InformationDiscovery)4.邏輯數(shù)據(jù)模型設(shè)計5.系統(tǒng)體系結(jié)構(gòu)設(shè)計6.物理數(shù)據(jù)庫設(shè)計7.數(shù)據(jù)轉(zhuǎn)換加載ETL8.前端應(yīng)用開發(fā)9.數(shù)據(jù)挖掘服務(wù)10.元數(shù)據(jù)管理11.數(shù)據(jù)倉庫管理（處理流程與操作）12.解決方案集成（測試驗收與試運行）2.1項目前期準備主要任務(wù)：–項目啟動會議(Kick-offMeeting)–確認項目范圍和主要目標–確認項目階段性驗收及總體驗收標準–確認項目實施計劃–成立項目組–確定各項目小組的成員及各自的工作職責(zé)–確定各項目小組的階段性工作目標–確定教育訓(xùn)練計劃–確定服務(wù)流程及方式交付項目：《項目組織機構(gòu)》《項目人員組成》項目前期準備業(yè)務(wù)探索信息探索邏輯數(shù)據(jù)模型2.2業(yè)務(wù)探索（BusinessDiscovery)主要任務(wù)：–確定重點用戶與數(shù)據(jù)源–用戶需求調(diào)研與確認–數(shù)據(jù)源確認–用戶需求和數(shù)據(jù)源的篩選和分析交付項目：《業(yè)務(wù)需求說明書BRL(BusinessRequirementList)》《概念數(shù)據(jù)模型CDM（ConceptualDataModel)》項目前期準備業(yè)務(wù)探索信息探索邏輯數(shù)據(jù)模型2.3信息探索（InformationDiscovery)主要任務(wù)：–分析用戶需求–數(shù)據(jù)源分析–進行工具評估–系統(tǒng)安全性設(shè)計–系統(tǒng)命名規(guī)范設(shè)計交付項目：《功能需求列表FRL(FunctionRequirementList)》《系統(tǒng)安全性設(shè)計說明書》《系統(tǒng)命名規(guī)范說明書》《數(shù)據(jù)質(zhì)量分析》項目前期準備業(yè)務(wù)探索信息探索邏輯數(shù)據(jù)模型2.4邏輯數(shù)據(jù)模型設(shè)計主要任務(wù)：–進行原始數(shù)據(jù)分析–建立實體模型–建立實體間依賴關(guān)系–完善并填入所有屬性–建立數(shù)據(jù)庫邏輯模型利用工具：Erwin/PowerDesigner交付項目：數(shù)據(jù)倉庫邏輯數(shù)據(jù)模型LDM《邏輯數(shù)據(jù)模型說明書》項目前期準備業(yè)務(wù)探索信息探索邏輯數(shù)據(jù)模型2.4邏輯數(shù)據(jù)模型概念邏輯數(shù)據(jù)模型是用來發(fā)現(xiàn)、記錄和溝通業(yè)務(wù)的詳細“藍圖”基于概念數(shù)據(jù)模型（CDM）由一系列表和實體詳細描述組成通用的業(yè)務(wù)語言便于業(yè)務(wù)與業(yè)務(wù)之間的功能理解集成當(dāng)前和未來數(shù)據(jù)的藍圖獨立于技術(shù)為物理數(shù)據(jù)庫設(shè)計作準備是IT人員和業(yè)務(wù)人員溝通的工具發(fā)現(xiàn)屬性發(fā)現(xiàn)關(guān)系發(fā)現(xiàn)實體1.業(yè)務(wù)規(guī)則2.ER圖3.ERA建模2.4邏輯數(shù)據(jù)模型(LDM)示例2.5系統(tǒng)體系結(jié)構(gòu)設(shè)計主要任務(wù)：對業(yè)務(wù)、技術(shù)環(huán)境及企業(yè)文化的充分了解，從技術(shù)、組織、教育和支持等方面對系統(tǒng)進行全面評估定義業(yè)務(wù)驅(qū)動力定義數(shù)據(jù)倉庫成功的關(guān)鍵因素定義數(shù)據(jù)倉庫的實施原則對系統(tǒng)體系結(jié)構(gòu)各個組件進行詳細設(shè)計交付項目：《系統(tǒng)體系結(jié)構(gòu)設(shè)計說明書》數(shù)據(jù)倉庫管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成2.5體體系結(jié)構(gòu)設(shè)設(shè)計組件用戶類型拓撲結(jié)構(gòu)網(wǎng)絡(luò)存取與與互連組織機構(gòu)安全性數(shù)據(jù)體系結(jié)結(jié)構(gòu)邏輯數(shù)據(jù)模模型元數(shù)據(jù)數(shù)據(jù)據(jù)質(zhì)質(zhì)量量命名名規(guī)規(guī)范范數(shù)據(jù)據(jù)采采集集與與轉(zhuǎn)轉(zhuǎn)換換用戶戶存存取取及及工工具具備份份系系統(tǒng)統(tǒng)操作作管管理理2.6物物理理數(shù)數(shù)據(jù)據(jù)庫庫設(shè)設(shè)計計主要要任任務(wù)務(wù)：：轉(zhuǎn)換換邏邏輯輯數(shù)數(shù)據(jù)據(jù)模模型型（（LDM））為為物物理理數(shù)數(shù)據(jù)據(jù)模模型型定義義主主索索引引、、次次索索引引非正正則則化化處處理理數(shù)據(jù)據(jù)庫庫建建立立設(shè)計計優(yōu)優(yōu)化化數(shù)據(jù)據(jù)庫庫功功能能測測試試使用用工工具具：：ERWwin交付付項項目目：：物理理數(shù)數(shù)據(jù)據(jù)模模型型（（LDM））《物物理理數(shù)數(shù)據(jù)據(jù)模模型型說說明明書書》》《數(shù)數(shù)據(jù)據(jù)庫庫描描述述語語言言DDL》》建模模方方法法：：第三三范范式式3NF星型型結(jié)結(jié)構(gòu)構(gòu)雪花花狀狀結(jié)結(jié)構(gòu)構(gòu)數(shù)據(jù)據(jù)倉倉庫庫管管理理物理理數(shù)數(shù)據(jù)據(jù)模型型數(shù)據(jù)據(jù)轉(zhuǎn)轉(zhuǎn)換換應(yīng)用用開開發(fā)發(fā)數(shù)據(jù)據(jù)挖挖掘掘服務(wù)務(wù)系統(tǒng)統(tǒng)體體系系結(jié)結(jié)構(gòu)構(gòu)設(shè)設(shè)計計元數(shù)數(shù)據(jù)據(jù)管管理理解決決方方案案集集成成2.6數(shù)數(shù)據(jù)據(jù)模模型型的的演演變變概念念數(shù)數(shù)據(jù)據(jù)模模型型（CDM––ConceptualDataModel））主要要實實體體和和它它們們的的關(guān)關(guān)系系（（MajorEntitiesandTheirRelationships））邏輯輯數(shù)數(shù)據(jù)據(jù)模模型型（LDM-LogicalDataModel））業(yè)務(wù)務(wù)模模型型加加（（CDMPlus））:所有有的的表表及及簡簡單單的的數(shù)數(shù)據(jù)據(jù)（（AllTableswithSampleData））輔助助的的表表及及簡簡單單的的數(shù)數(shù)據(jù)據(jù)（（MinorTableswithSampleData））主鍵鍵與與外外鍵鍵的的關(guān)關(guān)系系（（PK&FKRelationships））數(shù)據(jù)據(jù)約約束束（（Constraints））屬性性（（Attributes））擴展展邏邏輯輯數(shù)數(shù)據(jù)據(jù)模模型型（ELDM-ExtendedLogicalDataModel））邏輯輯數(shù)數(shù)據(jù)據(jù)模模型型加加（（LDMPlus））:存取取詳詳細細描描述述（（AccessDemographics））數(shù)據(jù)據(jù)詳詳細細描描述述（（DataDemographics））物理理數(shù)數(shù)據(jù)據(jù)模模型型（PDM-PhysicalDataModel））擴張張邏邏輯輯數(shù)數(shù)據(jù)據(jù)模模型型（（ELDMPlus））:索引引（（Indices））非正正則則化化（（Denormalization））2.6非非正正則則化化處處理理(Denormalization)非正正則則化化的的兩兩種種類類型型：物理理非非正正則則化化派生生數(shù)數(shù)據(jù)據(jù)（（DerivedData））匯總總表表（（SummaryTables））重復(fù)復(fù)的的Groups(RepeatingGroups)多物物理理表表（（MultiplePhysicalTables））預(yù)連連接接（（Pre-joins））子實實體體（（Sub-entities））邏輯輯非非正正則則化化視圖圖（（Views））邏輯輯星星型型結(jié)結(jié)構(gòu)構(gòu)（（LogicalStarSchemas））物理理非非正正則則化化對對模模型型的的靈靈活活性性會會有有影影響響邏輯輯非非正正則則化化是是一一個個優(yōu)優(yōu)選選的的方方法法（（OLAP實實現(xiàn)現(xiàn)））2.6物物理理數(shù)數(shù)據(jù)據(jù)模模型型（（PDM））2.7數(shù)數(shù)據(jù)據(jù)轉(zhuǎn)轉(zhuǎn)換換與與加加載載（（ETL））主要要任任務(wù)務(wù)：：數(shù)據(jù)據(jù)源源及及其其特特性性定定義義數(shù)據(jù)據(jù)析析取取、、轉(zhuǎn)轉(zhuǎn)換換和和加加載載策策略略設(shè)設(shè)計計構(gòu)建建和和測測試試初始始加加載載的程程序序和和處處理理流流程程構(gòu)建建和和測測試試日常常加加載載的程程序序和和處處理理流流程程40%的的工工作作量量在在數(shù)數(shù)據(jù)據(jù)轉(zhuǎn)轉(zhuǎn)換換與與加加載載上上使用用工工具具：：Sagent或或Datastage、、Informatic交付付項項目目：：《數(shù)數(shù)據(jù)據(jù)轉(zhuǎn)轉(zhuǎn)換換加加載載設(shè)設(shè)計計說說明明書書》》《數(shù)數(shù)據(jù)據(jù)映映射射（（DataMapping））說說明明書書》》數(shù)據(jù)據(jù)轉(zhuǎn)轉(zhuǎn)換換加加載載腳腳本本（（ETLScripts)加載流程控制制（ETLProcessControl)數(shù)據(jù)倉庫管理理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成成2.7數(shù)據(jù)據(jù)清洗方法在源系統(tǒng)上進進行清洗（數(shù)數(shù)據(jù)析取前））在加載服務(wù)器器上進行清洗洗（數(shù)據(jù)析取取后、加載前前）在數(shù)據(jù)倉庫里里進行清洗（（數(shù)據(jù)加載后后）源系統(tǒng)ETL服務(wù)器器數(shù)據(jù)倉庫2.7數(shù)據(jù)據(jù)轉(zhuǎn)換常用手手段析取Extracting條件Conditioning剔除Scrubbing合并Merging濃縮Enrichment確認Validating加載Loading評分Scoring關(guān)系識別Householding2.8前端端應(yīng)用開發(fā)主要任務(wù)：前端應(yīng)用體系系結(jié)構(gòu)設(shè)計OLAP應(yīng)用用設(shè)計(Summary/Fact表表及Cub的產(chǎn)生生）前端應(yīng)用開發(fā)發(fā)（隨機查詢、預(yù)預(yù)定義報表、、OLAP應(yīng)用）撰寫用戶使用用手冊用戶測試驗收收使用工具：查詢報表工具具(Hyperionperformancesuit)OLAP工具具（Essbase)基于Web的的開發(fā)工具(J2EE)其他開發(fā)工具具,如:Portal交付項目：《前端應(yīng)用體系系結(jié)構(gòu)設(shè)計說說明書》《應(yīng)用模塊設(shè)設(shè)計說明書》》《用戶使用手手冊》數(shù)據(jù)倉庫管理理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成成2.10元元數(shù)據(jù)管理元數(shù)據(jù)(Metadata)是指指關(guān)于數(shù)據(jù)的的數(shù)據(jù)，即用用來描述數(shù)據(jù)據(jù)的類型、來來源、定義、、存儲位置，，使得業(yè)務(wù)用用戶可以正確確地使用數(shù)據(jù)據(jù)倉庫。主要任務(wù)：定義元數(shù)據(jù)使使用功能設(shè)計元數(shù)據(jù)環(huán)環(huán)境邏輯結(jié)構(gòu)構(gòu)設(shè)計元數(shù)據(jù)環(huán)環(huán)境物理結(jié)構(gòu)構(gòu)選擇合適的元元數(shù)據(jù)管理工工具建立元數(shù)據(jù)倉倉庫（MetadataRepository)建立和測試元元數(shù)據(jù)接口使用工具：ETLTOOLS交付項目：《元數(shù)據(jù)管管理說明書》》數(shù)據(jù)倉庫管理理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成成2.10元元數(shù)據(jù)開發(fā)元數(shù)據(jù)的開發(fā)發(fā)應(yīng)該包含在在數(shù)據(jù)倉庫實實施過程的每每一步驟中，，下圖是元數(shù)數(shù)據(jù)各部分內(nèi)內(nèi)容與數(shù)據(jù)倉倉庫開發(fā)過程程的對應(yīng)關(guān)系系：2.11數(shù)數(shù)據(jù)倉庫管理理主要任務(wù)：設(shè)計和開發(fā)數(shù)數(shù)據(jù)倉庫支持持體系結(jié)構(gòu)開發(fā)和測試數(shù)數(shù)據(jù)倉庫日常常運作流程開發(fā)和測試性性能監(jiān)視程序序開發(fā)和測試數(shù)數(shù)據(jù)備份與恢恢復(fù)程序開發(fā)和測試安安全系統(tǒng)設(shè)計和開發(fā)操操作人員/最最終用戶培訓(xùn)訓(xùn)計劃建立用戶支持持和培訓(xùn)材料料使用工具：系統(tǒng)監(jiān)控工具具和管理工具具交付項項目：：《數(shù)據(jù)據(jù)倉庫庫管理理過程程說明明書》》《數(shù)據(jù)據(jù)備份份過程程設(shè)計計說明明書》》《安全全管理理模塊塊設(shè)計計說明明書》》《用戶戶培訓(xùn)訓(xùn)計劃劃》及及《用用戶使使用手手冊》》數(shù)據(jù)倉倉庫管管理物理數(shù)數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)轉(zhuǎn)換應(yīng)用開開發(fā)數(shù)據(jù)挖挖掘服務(wù)系統(tǒng)體體系結(jié)結(jié)構(gòu)設(shè)設(shè)計元數(shù)據(jù)據(jù)管理理解決方方案集集成2.12解解決決方案案集成成主要任任務(wù)：：建立并并執(zhí)行行集成成測試試計劃劃建立并并執(zhí)行行數(shù)據(jù)據(jù)倉庫庫平臺臺測試試計劃劃建立并并執(zhí)行行系統(tǒng)統(tǒng)驗收收測試試計劃劃移植開開發(fā)系系統(tǒng)到到生產(chǎn)產(chǎn)系統(tǒng)統(tǒng)執(zhí)行用用戶培培訓(xùn)計計劃實施數(shù)數(shù)據(jù)倉倉庫管管理基基礎(chǔ)設(shè)設(shè)施項目實實施完完成回顧項項目狀狀態(tài)交付項項目：：《數(shù)據(jù)據(jù)轉(zhuǎn)換換管理理系統(tǒng)統(tǒng)測試試報告告》《數(shù)據(jù)據(jù)訪問問和信信息發(fā)發(fā)布系系統(tǒng)測測試報報告》》《數(shù)據(jù)據(jù)倉庫庫平臺臺測試試報告告》《數(shù)據(jù)據(jù)倉庫庫管理理過程程測試試報告告》《系統(tǒng)統(tǒng)回顧顧報告告》數(shù)據(jù)倉倉庫管管理物理數(shù)數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)轉(zhuǎn)換應(yīng)用開開發(fā)數(shù)據(jù)挖挖掘服務(wù)系統(tǒng)體體系結(jié)結(jié)構(gòu)設(shè)設(shè)計元數(shù)據(jù)據(jù)管理理解決方方案集集成總結(jié)：：主要要步驟驟及文文檔間間關(guān)系系BusinessDiscovery(業(yè)業(yè)務(wù)探探索)業(yè)務(wù)需需求說說明書書(BRL)