金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案1議程大數(shù)據(jù)分析平臺綜述123945大數(shù)據(jù)分析平臺總體架構(gòu)大數(shù)據(jù)分析平臺演進路線大數(shù)據(jù)分析平臺一期實施重點附錄:數(shù)據(jù)質(zhì)量管理平臺議程2金融集團管理分析類應(yīng)用建設(shè)現(xiàn)狀基本分析基本的現(xiàn)狀存在的多關(guān)注的內(nèi)容商城已建立面向整個零售業(yè)務(wù)的數(shù)據(jù)·商城數(shù)據(jù)倉庫累積數(shù)據(jù)沒有充分利用·數(shù)據(jù)平臺整體架構(gòu);倉庫,整合了前臺業(yè)務(wù)運營數(shù)據(jù)和后·缺乏面向整個金融集團的統(tǒng)一、完整數(shù)據(jù)平臺各層建設(shè)的標準臺管理數(shù)據(jù),建立了面向零售的管理的數(shù)據(jù)視圖較成熟的金融業(yè)數(shù)據(jù)橫型分析應(yīng)用●缺乏支撐金融集團日常業(yè)務(wù)運轉(zhuǎn)的風數(shù)據(jù)質(zhì)量治理;金融集團已開展供應(yīng)鏈金融、人人貸險評估體系●元數(shù)據(jù)管理和保理等多種業(yè)務(wù),積累了一定量的·缺乏金融集團客戶360度視圖,客戶數(shù)據(jù)標準建設(shè)業(yè)務(wù)數(shù)據(jù),同時業(yè)務(wù)人員也從客戶管行為分析和預(yù)測無法實現(xiàn)●數(shù)據(jù)整合;風險評級和經(jīng)營規(guī)模預(yù)測等方面·缺乏面向金融業(yè)務(wù)運營管理的關(guān)鍵績·數(shù)據(jù)應(yīng)用建設(shè);提出了大量分析預(yù)測需求;效指標體系;數(shù)據(jù)平臺的軟硬環(huán)境數(shù)據(jù)平臺、數(shù)據(jù)應(yīng)用、數(shù)據(jù)管控基礎(chǔ)數(shù)據(jù)平臺和B應(yīng)用建設(shè)是未來一段時間的重點!金融集團管理分析類應(yīng)用建設(shè)現(xiàn)狀基本分析3大數(shù)據(jù)分析平臺建設(shè)目標通過數(shù)據(jù)平臺和B應(yīng)用建設(shè),金融集團將搭建統(tǒng)一的大數(shù)據(jù)共享和分析平臺,對各類業(yè)務(wù)進行前瞻性預(yù)測及分析,為集團各層次用戶提供統(tǒng)一的決策分析支持,提升數(shù)據(jù)共享與流轉(zhuǎn)能力統(tǒng)一制定目標和分自定義報表工具多種格式報表B|分析工具行+列的簡單定義方式圖數(shù)據(jù)推送平臺已實現(xiàn)了主要零售及金融業(yè)務(wù)系統(tǒng)統(tǒng)一定義BL應(yīng)用查看職能都門的集團決策層數(shù)據(jù)清洗、整合,為未來金融集團數(shù)據(jù)平臺提供了業(yè)務(wù)經(jīng)營情況豐富的數(shù)據(jù)源統(tǒng)一規(guī)劃分析劃分分析主題統(tǒng)一部署技術(shù)基礎(chǔ)>供應(yīng)鏈金系部非結(jié)構(gòu)化數(shù)據(jù)P系統(tǒng)采購管理系統(tǒng)共他業(yè)務(wù)系統(tǒng)各級業(yè)務(wù)操作大數(shù)據(jù)分析平臺建設(shè)目標4大數(shù)據(jù)分析平臺建設(shè)預(yù)期收益1.實現(xiàn)數(shù)據(jù)共拿通過數(shù)據(jù)平臺實現(xiàn)數(shù)據(jù)集中,確保金融集團各級部門均可在保證數(shù)據(jù)隱私和安全的前提下使用數(shù)據(jù),充分發(fā)揮數(shù)據(jù)作為企業(yè)重要資產(chǎn)的業(yè)務(wù)價值實現(xiàn)分散在供應(yīng)鏈金融、人人貸、保理等各個業(yè)務(wù)系統(tǒng)中的數(shù)據(jù)在數(shù)據(jù)平臺中的集2加強業(yè)務(wù)協(xié)作》中和整合,建立單一的產(chǎn)品、客戶等數(shù)據(jù)的企業(yè)級視圖,有效促進業(yè)務(wù)的集成和協(xié)作,井為企業(yè)級分析、交叉銷售提供基礎(chǔ)3促進業(yè)務(wù)創(chuàng)新金融集團業(yè)務(wù)人員可以基于明細可信的數(shù)據(jù)進行多維分析和數(shù)據(jù)挖掘,為金融業(yè)務(wù)創(chuàng)新(客戶服務(wù)創(chuàng)新、產(chǎn)品創(chuàng)新等)創(chuàng)造了有利條件通過數(shù)據(jù)平臺對數(shù)據(jù)進行集中,為管理分析、挖掘預(yù)測類等系統(tǒng)提供一致的數(shù)據(jù)基4提升建設(shè)效率》礎(chǔ),改變現(xiàn)有系統(tǒng)數(shù)據(jù)來源多、數(shù)據(jù)處理復(fù)雜的現(xiàn)狀,實現(xiàn)應(yīng)用系統(tǒng)建設(shè)模式的轉(zhuǎn)變,提升相關(guān)T系統(tǒng)的建設(shè)和運行效率5改善數(shù)據(jù)質(zhì)量從中長期看,數(shù)據(jù)倉庫對金融集團分散在各個業(yè)務(wù)系統(tǒng)中的數(shù)據(jù)整合、清洗,有助于企業(yè)整體數(shù)據(jù)質(zhì)量的改善,提高的數(shù)據(jù)的實用性大數(shù)據(jù)分析平臺建設(shè)預(yù)期收益5議程大數(shù)據(jù)分析平臺綜述2345大數(shù)據(jù)分析平臺總體架構(gòu)大數(shù)據(jù)分析平臺演進路線大數(shù)據(jù)分析平臺一期實施重點附錄:數(shù)據(jù)質(zhì)量管理平臺議程6大數(shù)據(jù)分析平臺總體架構(gòu)數(shù)據(jù)T人員內(nèi)部用戶管控平臺!品內(nèi)部管理分析業(yè)務(wù)沙盤演練應(yīng)用集市數(shù)據(jù)區(qū)客戶管理財務(wù)管理又險管理沙盤演練數(shù)據(jù)區(qū)增信實奧主數(shù)據(jù)管控客戶匯總賬待社交媒體處題數(shù)數(shù)據(jù)計理后大數(shù)據(jù)滬協(xié)議題產(chǎn)蘭算層區(qū)零告就先京貼源數(shù)據(jù)區(qū)大數(shù)活交接短件數(shù)活車數(shù)提交實組件數(shù)區(qū)技交染件數(shù)據(jù)交換平臺p睡目目目企業(yè)內(nèi)外部半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)產(chǎn)生層大數(shù)據(jù)分析平臺總體架構(gòu)7大數(shù)據(jù)分析平臺總體架構(gòu)—數(shù)據(jù)產(chǎn)生層源數(shù)據(jù)內(nèi)容●內(nèi)部業(yè)務(wù)系統(tǒng)產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù)商城日常零售業(yè)務(wù)處理過程中產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù),存儲在關(guān)系型數(shù)據(jù)庫中,如:供應(yīng)商信息、采購信息、商品信息、銷售流水令金融集團日常業(yè)務(wù)處理過程中產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù),存儲在關(guān)系型數(shù)據(jù)庫中,如:客戶信息、賬戶信息、金融產(chǎn)品信息、交易流水企業(yè)內(nèi)部非結(jié)構(gòu)化數(shù)據(jù)日常業(yè)務(wù)處理過程中產(chǎn)生的非結(jié)構(gòu)化數(shù)據(jù),存儲形式多樣,主要包括用戶訪問日志、用戶投訴、用戶點評●企業(yè)外部數(shù)據(jù)令企業(yè)外部數(shù)據(jù)以非結(jié)構(gòu)化為主,主要包括國家政策法規(guī)、論壇等互聯(lián)網(wǎng)信息、地理位置等移動信息、微博等社交媒體信息…源數(shù)據(jù)增量●在本次項目實施中將采用以增量為主、全量為輔結(jié)合的方式獲取源數(shù)據(jù)商城和金融集團業(yè)務(wù)系統(tǒng)的數(shù)據(jù)◆增量數(shù)據(jù)識別、獲取由云數(shù)據(jù)推送平臺負責,云數(shù)據(jù)推送平臺采用分析、對比源系統(tǒng)日志方式實現(xiàn)對于無法通過上述方式獲取增量的源系統(tǒng)數(shù)據(jù),則采用某一個時間范圍內(nèi)的全部數(shù)據(jù)作為增量◆初始數(shù)據(jù)加載均采用全量模式大數(shù)據(jù)分析平臺總體架構(gòu)—數(shù)據(jù)產(chǎn)生層8大數(shù)據(jù)分析平臺總體架構(gòu)一數(shù)據(jù)交換層傳輸組件是根據(jù)數(shù)據(jù)源存儲的不同分類而設(shè)計的,本質(zhì)是通過分析數(shù)據(jù)存儲結(jié)構(gòu)和數(shù)據(jù)存儲庫的特點來針對性的設(shè)計工具,以追求卓越的性能數(shù)據(jù)交換層設(shè)計目標數(shù)據(jù)服務(wù)層保證數(shù)據(jù)在平臺內(nèi)高速流轉(zhuǎn)數(shù)據(jù)區(qū)數(shù)據(jù)交數(shù)據(jù)庫數(shù)據(jù)交大數(shù)據(jù)交換組換組件保證數(shù)據(jù)交換過程中不失真NAS存儲Hado數(shù)據(jù)平臺導(dǎo)入|數(shù)據(jù)平臺導(dǎo)出|E程元數(shù)據(jù)臨時區(qū)臨時區(qū)序區(qū)保證數(shù)據(jù)交換過程中不丟失云數(shù)據(jù)推送平臺保證數(shù)據(jù)交換過程安全可靠商城系統(tǒng)金融集團系統(tǒng)據(jù)大數(shù)據(jù)分析平臺總體架構(gòu)一數(shù)據(jù)交換層9大數(shù)據(jù)分析平臺總體架構(gòu)—數(shù)據(jù)交換層NAS存H美群元數(shù)]存鋪數(shù)據(jù)平臺各個他飲集群的元數(shù)據(jù)信息,如13文件系統(tǒng)據(jù)區(qū)元數(shù)據(jù)集團數(shù)據(jù)交換平臺每日獲取運輸局推送平臺提供的業(yè)務(wù)系統(tǒng)變數(shù)據(jù)平臺臨時數(shù)化數(shù)據(jù),暫存在Ns臨時數(shù)據(jù)區(qū)據(jù)區(qū)金融數(shù)據(jù)平臺加工計算結(jié)果返回給業(yè)務(wù)系統(tǒng),暫存在NAs臨時數(shù)據(jù)區(qū)數(shù)據(jù)平合教據(jù)里凈一存請在心集樣定目柔,各接口展務(wù)器通過文件處理程序區(qū)系統(tǒng)Link建立映射大數(shù)據(jù)分析平臺總體架構(gòu)—數(shù)據(jù)交換層NAS存10金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件11金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件12金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件13金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件14金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件15金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件16金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件17金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件18金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件19金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件20金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件21金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件22金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件23金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件24金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件25金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件26金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件27金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件28金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件29金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件30金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件31金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件32金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件33金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件34金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件35金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件36金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件37金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件38金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件39金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件40金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件41金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件42金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件43金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件44金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件45金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件46金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件47金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件48金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件49金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件50金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件51金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件52金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件53金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件54金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件55金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件56金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件57金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件58金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件59金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件60金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件61金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件62金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件63金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件64金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件65金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件66金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件67金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件68金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件69金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件70金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件71金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件72金融公司大數(shù)據(jù)分析平臺總體架構(gòu)方案課件73