金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案1議程大數(shù)據(jù)分析平臺(tái)綜述123945大數(shù)據(jù)分析平臺(tái)總體架構(gòu)大數(shù)據(jù)分析平臺(tái)演進(jìn)路線大數(shù)據(jù)分析平臺(tái)一期實(shí)施重點(diǎn)附錄:數(shù)據(jù)質(zhì)量管理平臺(tái)議程2金融集團(tuán)管理分析類應(yīng)用建設(shè)現(xiàn)狀基本分析基本的現(xiàn)狀存在的多關(guān)注的內(nèi)容商城已建立面向整個(gè)零售業(yè)務(wù)的數(shù)據(jù)·商城數(shù)據(jù)倉庫累積數(shù)據(jù)沒有充分利用·數(shù)據(jù)平臺(tái)整體架構(gòu);倉庫,整合了前臺(tái)業(yè)務(wù)運(yùn)營數(shù)據(jù)和后·缺乏面向整個(gè)金融集團(tuán)的統(tǒng)一、完整數(shù)據(jù)平臺(tái)各層建設(shè)的標(biāo)準(zhǔn)臺(tái)管理數(shù)據(jù),建立了面向零售的管理的數(shù)據(jù)視圖較成熟的金融業(yè)數(shù)據(jù)橫型分析應(yīng)用●缺乏支撐金融集團(tuán)日常業(yè)務(wù)運(yùn)轉(zhuǎn)的風(fēng)數(shù)據(jù)質(zhì)量治理;金融集團(tuán)已開展供應(yīng)鏈金融、人人貸險(xiǎn)評(píng)估體系●元數(shù)據(jù)管理和保理等多種業(yè)務(wù),積累了一定量的·缺乏金融集團(tuán)客戶360度視圖,客戶數(shù)據(jù)標(biāo)準(zhǔn)建設(shè)業(yè)務(wù)數(shù)據(jù),同時(shí)業(yè)務(wù)人員也從客戶管行為分析和預(yù)測無法實(shí)現(xiàn)●數(shù)據(jù)整合;風(fēng)險(xiǎn)評(píng)級(jí)和經(jīng)營規(guī)模預(yù)測等方面·缺乏面向金融業(yè)務(wù)運(yùn)營管理的關(guān)鍵績·數(shù)據(jù)應(yīng)用建設(shè);提出了大量分析預(yù)測需求;效指標(biāo)體系;數(shù)據(jù)平臺(tái)的軟硬環(huán)境數(shù)據(jù)平臺(tái)、數(shù)據(jù)應(yīng)用、數(shù)據(jù)管控基礎(chǔ)數(shù)據(jù)平臺(tái)和B應(yīng)用建設(shè)是未來一段時(shí)間的重點(diǎn)!金融集團(tuán)管理分析類應(yīng)用建設(shè)現(xiàn)狀基本分析3大數(shù)據(jù)分析平臺(tái)建設(shè)目標(biāo)通過數(shù)據(jù)平臺(tái)和B應(yīng)用建設(shè),金融集團(tuán)將搭建統(tǒng)一的大數(shù)據(jù)共享和分析平臺(tái),對各類業(yè)務(wù)進(jìn)行前瞻性預(yù)測及分析,為集團(tuán)各層次用戶提供統(tǒng)一的決策分析支持,提升數(shù)據(jù)共享與流轉(zhuǎn)能力統(tǒng)一制定目標(biāo)和分自定義報(bào)表工具多種格式報(bào)表B|分析工具行+列的簡單定義方式圖數(shù)據(jù)推送平臺(tái)已實(shí)現(xiàn)了主要零售及金融業(yè)務(wù)系統(tǒng)統(tǒng)一定義BL應(yīng)用查看職能都門的集團(tuán)決策層數(shù)據(jù)清洗、整合,為未來金融集團(tuán)數(shù)據(jù)平臺(tái)提供了業(yè)務(wù)經(jīng)營情況豐富的數(shù)據(jù)源統(tǒng)一規(guī)劃分析劃分分析主題統(tǒng)一部署技術(shù)基礎(chǔ)>供應(yīng)鏈金系部非結(jié)構(gòu)化數(shù)據(jù)P系統(tǒng)采購管理系統(tǒng)共他業(yè)務(wù)系統(tǒng)各級(jí)業(yè)務(wù)操作大數(shù)據(jù)分析平臺(tái)建設(shè)目標(biāo)4大數(shù)據(jù)分析平臺(tái)建設(shè)預(yù)期收益1.實(shí)現(xiàn)數(shù)據(jù)共拿通過數(shù)據(jù)平臺(tái)實(shí)現(xiàn)數(shù)據(jù)集中,確保金融集團(tuán)各級(jí)部門均可在保證數(shù)據(jù)隱私和安全的前提下使用數(shù)據(jù),充分發(fā)揮數(shù)據(jù)作為企業(yè)重要資產(chǎn)的業(yè)務(wù)價(jià)值實(shí)現(xiàn)分散在供應(yīng)鏈金融、人人貸、保理等各個(gè)業(yè)務(wù)系統(tǒng)中的數(shù)據(jù)在數(shù)據(jù)平臺(tái)中的集2加強(qiáng)業(yè)務(wù)協(xié)作》中和整合,建立單一的產(chǎn)品、客戶等數(shù)據(jù)的企業(yè)級(jí)視圖,有效促進(jìn)業(yè)務(wù)的集成和協(xié)作,井為企業(yè)級(jí)分析、交叉銷售提供基礎(chǔ)3促進(jìn)業(yè)務(wù)創(chuàng)新金融集團(tuán)業(yè)務(wù)人員可以基于明細(xì)可信的數(shù)據(jù)進(jìn)行多維分析和數(shù)據(jù)挖掘,為金融業(yè)務(wù)創(chuàng)新(客戶服務(wù)創(chuàng)新、產(chǎn)品創(chuàng)新等)創(chuàng)造了有利條件通過數(shù)據(jù)平臺(tái)對數(shù)據(jù)進(jìn)行集中,為管理分析、挖掘預(yù)測類等系統(tǒng)提供一致的數(shù)據(jù)基4提升建設(shè)效率》礎(chǔ),改變現(xiàn)有系統(tǒng)數(shù)據(jù)來源多、數(shù)據(jù)處理復(fù)雜的現(xiàn)狀,實(shí)現(xiàn)應(yīng)用系統(tǒng)建設(shè)模式的轉(zhuǎn)變,提升相關(guān)T系統(tǒng)的建設(shè)和運(yùn)行效率5改善數(shù)據(jù)質(zhì)量從中長期看,數(shù)據(jù)倉庫對金融集團(tuán)分散在各個(gè)業(yè)務(wù)系統(tǒng)中的數(shù)據(jù)整合、清洗,有助于企業(yè)整體數(shù)據(jù)質(zhì)量的改善,提高的數(shù)據(jù)的實(shí)用性大數(shù)據(jù)分析平臺(tái)建設(shè)預(yù)期收益5議程大數(shù)據(jù)分析平臺(tái)綜述2345大數(shù)據(jù)分析平臺(tái)總體架構(gòu)大數(shù)據(jù)分析平臺(tái)演進(jìn)路線大數(shù)據(jù)分析平臺(tái)一期實(shí)施重點(diǎn)附錄:數(shù)據(jù)質(zhì)量管理平臺(tái)議程6大數(shù)據(jù)分析平臺(tái)總體架構(gòu)數(shù)據(jù)T人員內(nèi)部用戶管控平臺(tái)!品內(nèi)部管理分析業(yè)務(wù)沙盤演練應(yīng)用集市數(shù)據(jù)區(qū)客戶管理財(cái)務(wù)管理又險(xiǎn)管理沙盤演練數(shù)據(jù)區(qū)增信實(shí)奧主數(shù)據(jù)管控客戶匯總賬待社交媒體處題數(shù)數(shù)據(jù)計(jì)理后大數(shù)據(jù)滬協(xié)議題產(chǎn)蘭算層區(qū)零告就先京貼源數(shù)據(jù)區(qū)大數(shù)活交接短件數(shù)活車數(shù)提交實(shí)組件數(shù)區(qū)技交染件數(shù)據(jù)交換平臺(tái)p睡目目目企業(yè)內(nèi)外部半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)產(chǎn)生層大數(shù)據(jù)分析平臺(tái)總體架構(gòu)7大數(shù)據(jù)分析平臺(tái)總體架構(gòu)—數(shù)據(jù)產(chǎn)生層源數(shù)據(jù)內(nèi)容●內(nèi)部業(yè)務(wù)系統(tǒng)產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù)商城日常零售業(yè)務(wù)處理過程中產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù),存儲(chǔ)在關(guān)系型數(shù)據(jù)庫中,如:供應(yīng)商信息、采購信息、商品信息、銷售流水令金融集團(tuán)日常業(yè)務(wù)處理過程中產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù),存儲(chǔ)在關(guān)系型數(shù)據(jù)庫中,如:客戶信息、賬戶信息、金融產(chǎn)品信息、交易流水企業(yè)內(nèi)部非結(jié)構(gòu)化數(shù)據(jù)日常業(yè)務(wù)處理過程中產(chǎn)生的非結(jié)構(gòu)化數(shù)據(jù),存儲(chǔ)形式多樣,主要包括用戶訪問日志、用戶投訴、用戶點(diǎn)評(píng)●企業(yè)外部數(shù)據(jù)令企業(yè)外部數(shù)據(jù)以非結(jié)構(gòu)化為主,主要包括國家政策法規(guī)、論壇等互聯(lián)網(wǎng)信息、地理位置等移動(dòng)信息、微博等社交媒體信息…源數(shù)據(jù)增量●在本次項(xiàng)目實(shí)施中將采用以增量為主、全量為輔結(jié)合的方式獲取源數(shù)據(jù)商城和金融集團(tuán)業(yè)務(wù)系統(tǒng)的數(shù)據(jù)◆增量數(shù)據(jù)識(shí)別、獲取由云數(shù)據(jù)推送平臺(tái)負(fù)責(zé),云數(shù)據(jù)推送平臺(tái)采用分析、對比源系統(tǒng)日志方式實(shí)現(xiàn)對于無法通過上述方式獲取增量的源系統(tǒng)數(shù)據(jù),則采用某一個(gè)時(shí)間范圍內(nèi)的全部數(shù)據(jù)作為增量◆初始數(shù)據(jù)加載均采用全量模式大數(shù)據(jù)分析平臺(tái)總體架構(gòu)—數(shù)據(jù)產(chǎn)生層8大數(shù)據(jù)分析平臺(tái)總體架構(gòu)一數(shù)據(jù)交換層傳輸組件是根據(jù)數(shù)據(jù)源存儲(chǔ)的不同分類而設(shè)計(jì)的,本質(zhì)是通過分析數(shù)據(jù)存儲(chǔ)結(jié)構(gòu)和數(shù)據(jù)存儲(chǔ)庫的特點(diǎn)來針對性的設(shè)計(jì)工具,以追求卓越的性能數(shù)據(jù)交換層設(shè)計(jì)目標(biāo)數(shù)據(jù)服務(wù)層保證數(shù)據(jù)在平臺(tái)內(nèi)高速流轉(zhuǎn)數(shù)據(jù)區(qū)數(shù)據(jù)交數(shù)據(jù)庫數(shù)據(jù)交大數(shù)據(jù)交換組換組件保證數(shù)據(jù)交換過程中不失真NAS存儲(chǔ)Hado數(shù)據(jù)平臺(tái)導(dǎo)入|數(shù)據(jù)平臺(tái)導(dǎo)出|E程元數(shù)據(jù)臨時(shí)區(qū)臨時(shí)區(qū)序區(qū)保證數(shù)據(jù)交換過程中不丟失云數(shù)據(jù)推送平臺(tái)保證數(shù)據(jù)交換過程安全可靠商城系統(tǒng)金融集團(tuán)系統(tǒng)據(jù)大數(shù)據(jù)分析平臺(tái)總體架構(gòu)一數(shù)據(jù)交換層9大數(shù)據(jù)分析平臺(tái)總體架構(gòu)—數(shù)據(jù)交換層NAS存H美群元數(shù)]存鋪數(shù)據(jù)平臺(tái)各個(gè)他飲集群的元數(shù)據(jù)信息,如13文件系統(tǒng)據(jù)區(qū)元數(shù)據(jù)集團(tuán)數(shù)據(jù)交換平臺(tái)每日獲取運(yùn)輸局推送平臺(tái)提供的業(yè)務(wù)系統(tǒng)變數(shù)據(jù)平臺(tái)臨時(shí)數(shù)化數(shù)據(jù),暫存在Ns臨時(shí)數(shù)據(jù)區(qū)據(jù)區(qū)金融數(shù)據(jù)平臺(tái)加工計(jì)算結(jié)果返回給業(yè)務(wù)系統(tǒng),暫存在NAs臨時(shí)數(shù)據(jù)區(qū)數(shù)據(jù)平合教據(jù)里凈一存請?jiān)谛募瘶佣咳?各接口展務(wù)器通過文件處理程序區(qū)系統(tǒng)Link建立映射大數(shù)據(jù)分析平臺(tái)總體架構(gòu)—數(shù)據(jù)交換層NAS存10金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件11金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件12金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件13金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件14金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件15金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件16金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件17金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件18金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件19金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件20金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件21金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件22金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件23金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件24金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件25金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件26金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件27金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件28金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件29金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件30金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件31金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件32金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件33金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件34金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件35金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件36金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件37金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件38金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件39金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件40金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件41金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件42金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件43金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件44金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件45金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件46金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件47金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件48金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件49金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件50金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件51金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件52金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件53金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件54金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件55金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件56金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件57金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件58金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件59金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件60金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件61金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件62金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件63金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件64金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件65金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件66金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件67金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件68金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件69金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件70金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件71金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件72金融公司大數(shù)據(jù)分析平臺(tái)總體架構(gòu)方案課件73