1、稅務(wù)行業(yè)數(shù)據(jù)倉庫建設(shè)方案技術(shù)創(chuàng)新，變革未來Page 2 目錄稅務(wù)行業(yè)數(shù)據(jù)倉庫現(xiàn)狀數(shù)據(jù)倉庫理解 數(shù)據(jù)倉庫的建設(shè)路線規(guī)劃數(shù)據(jù)集市的建設(shè)路線規(guī)劃部分省級稅務(wù)局?jǐn)?shù)據(jù)架構(gòu)數(shù)據(jù)規(guī)劃原則交易庫數(shù)據(jù)量相對穩(wěn)定查詢統(tǒng)計(jì)與交易分離統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)和口徑集成的統(tǒng)一數(shù)據(jù)視圖基于用戶數(shù)據(jù)分析需求按業(yè)務(wù)類型分類管理預(yù)先處理，一次計(jì)算，多處共享效率優(yōu)先，分區(qū)存儲空間換時間，多維按分析主題分集市數(shù)據(jù)規(guī)劃原則稅務(wù)總局?jǐn)?shù)據(jù)架構(gòu)國稅征管系統(tǒng)地稅征管系統(tǒng)其它數(shù)據(jù)源區(qū)數(shù)據(jù)準(zhǔn)備區(qū)ODS區(qū)數(shù)據(jù)倉庫宏觀稅源分析征管狀況分析其它集市數(shù)據(jù)集市在線歷史數(shù)據(jù)區(qū)近幾個月數(shù)據(jù)近兩年明細(xì)數(shù)據(jù)其它數(shù)據(jù)區(qū)電子檔案數(shù)據(jù)指標(biāo)數(shù)據(jù)其它近十年數(shù)據(jù)近十年分析數(shù)據(jù)離線歷史數(shù)

2、據(jù)區(qū)國稅征管地稅征管其它國稅征管地稅征管其它基礎(chǔ)數(shù)據(jù)輕度匯總其它確保數(shù)據(jù)量相對穩(wěn)定數(shù)據(jù)架構(gòu)之交換層ETL地稅源ORACLE國稅源大集中網(wǎng)絡(luò)發(fā)票EXCEL等數(shù)據(jù)登記停業(yè)注銷DJ_GTY_GZX_GZX_KP_KJXXZX_KP_KJXX_MXZX_KP_NSRZT T_DJ_JGNSRT_FP_FPFSPZT_FP_FPFSPZMXT_DM_GYSWJG 數(shù)據(jù)層總體架構(gòu)數(shù)據(jù)架構(gòu)之ODS層法人庫T_DJ_JGNSRT_ZS_YZMXT_ZS_YZMX_LS發(fā)票庫稅務(wù)機(jī)關(guān)庫T_DM_GY_SWJG倉庫總體數(shù)據(jù)架構(gòu)ODS數(shù)據(jù)整合區(qū)匯總區(qū)數(shù)據(jù)集市區(qū)數(shù)據(jù)層反饋區(qū)源數(shù)據(jù)交換層DJ_GTY_GZX_GZX_K

3、P_KJXXZX_KP_KJXX_MXZX_KP_NSRZT T_DJ_JGNSRT_FP_FPFSPZT_FP_FPFSPZMXT_DM_GY_SWJG T_FP_FPFSPZT_FP_FPFSPZMXZX_KP_KJXXZX_KP_KJXX_MXZX_KP_NSRZT數(shù)據(jù)架構(gòu)之交換層ETL地稅源ORACLE國稅源大集中網(wǎng)絡(luò)發(fā)票EXCEL非結(jié)構(gòu)化數(shù)據(jù)登記停業(yè)注銷DJ_GTY_GZX_GZX_KP_KJXXZX_KP_KJXX_MXZX_KP_NSRZT T_DJ_JGNSRT_FP_FPFSPZT_FP_FPFSPZMXT_DM_GYSWJG 數(shù)據(jù)倉庫數(shù)據(jù)架構(gòu)ODS數(shù)據(jù)整合區(qū)匯總區(qū)數(shù)據(jù)集市區(qū)

4、數(shù)據(jù)層反饋區(qū)源數(shù)據(jù)交換層廣東省地稅數(shù)據(jù)利用現(xiàn)狀大集中個稅管理其它在線發(fā)票外部數(shù)據(jù)數(shù)據(jù)源區(qū)確保數(shù)據(jù)量相對穩(wěn)定分發(fā)廣州數(shù)據(jù)明細(xì)數(shù)據(jù)數(shù)據(jù)倉庫匯總數(shù)據(jù)加工稅源綜合管理系統(tǒng)任務(wù)管理復(fù)制決策支持準(zhǔn)備數(shù)據(jù)明細(xì)數(shù)據(jù)數(shù)據(jù)倉庫匯總數(shù)據(jù)加工塊策支持系統(tǒng)基本查詢基本分析納稅評估業(yè)務(wù)快線納稅檔案綜合分析文檔管理名單管理監(jiān)控預(yù)測疑點(diǎn)挖掘分類管理復(fù)制發(fā)票準(zhǔn)備數(shù)據(jù)明細(xì)數(shù)據(jù)數(shù)據(jù)倉庫輕度匯總ETL發(fā)票二期數(shù)據(jù)利用系統(tǒng)報(bào)表應(yīng)用數(shù)據(jù)分析監(jiān)控預(yù)警明細(xì)數(shù)據(jù)數(shù)據(jù)集市匯總數(shù)據(jù)維度匯總查詢統(tǒng)計(jì)復(fù)制直屬分局相關(guān)數(shù)據(jù)明細(xì)數(shù)據(jù)匯總數(shù)據(jù)直屬分局稅費(fèi)監(jiān)控平臺報(bào)表應(yīng)用會統(tǒng)分析社保監(jiān)控查詢統(tǒng)計(jì)支持平臺支持?jǐn)?shù)據(jù)源數(shù)據(jù)轉(zhuǎn)換功能管理和調(diào)度功能集成和開放性管理元數(shù)

5、據(jù)ETL工具比較 ETL過程在整數(shù)據(jù)倉庫應(yīng)用過程中通常會占到80%的比重，可見其在數(shù)據(jù)利用系統(tǒng)建設(shè)中的重要性，下面從以下幾個方給出業(yè)界主流的三種工具比較：ETL工具比較關(guān)鍵功能點(diǎn)InformaticaAscential DataStage1：性能要求專用數(shù)據(jù)庫驅(qū)動支持有大批量數(shù)據(jù)轉(zhuǎn)移(調(diào)用數(shù)據(jù)庫自身功能,load)支持沒有，通過寫腳本間接支持（7版后有針對不同數(shù)據(jù)庫的load stage）進(jìn)程并發(fā)處理支持支持線程并發(fā)處理支持沒有負(fù)載均衡PowerCenter支持沒有對CPU、內(nèi)存的可管理和分配支持沒有穩(wěn)定性在NT平臺上不夠穩(wěn)定較好處理速度較快較好大數(shù)據(jù)量壓力測試810G/小時較好2：調(diào)度任務(wù)調(diào)度計(jì)劃支持有基于時間的調(diào)度/基于事件的調(diào)度支持支持提供調(diào)度的API供運(yùn)維平臺調(diào)用支持有并發(fā)任務(wù)調(diào)度支持需要用DataStage TX產(chǎn)品ETL工具比較任務(wù)的監(jiān)控支持支持，但對于進(jìn)程附加任務(wù)無法監(jiān)控錯誤信息的捕捉支持支持，但很多時候信息不準(zhǔn)確3：元數(shù)據(jù)接口元數(shù)據(jù)是否采用RDBMS儲存、OS支持情況采用RDBMS儲存，支持多種OS元數(shù)據(jù)庫備份/恢復(fù)支持支持元數(shù)據(jù)庫的遷移支持支持元數(shù)據(jù)庫是否支持平滑升級支持元數(shù)據(jù)交換，與PowerDesigner/Erwin交換支持（Metadata Exchange） 支持元數(shù)據(jù)交換，與OLAP、前端工具的交換支持與Essbase的數(shù)據(jù)交換（Metadata