1、大數(shù)據(jù)的思維,王淳 天云大數(shù)據(jù),2020/8/24,1,IT的定位,2020/8/24,2,CIO,CDO,Information Technology,虛擬化 Vs. 大數(shù)據(jù),2020/8/24,3,Vs.,傳統(tǒng) Vs. 創(chuàng)新,2020/8/24,4,Linux/HDFS,J2EE,存儲(chǔ)設(shè)備,數(shù)據(jù)庫(kù),Web,操作系統(tǒng),J2EE,Hive/HBase ,Web,X86 PC Servers,Vs.,傳統(tǒng)架構(gòu)面臨海量數(shù)據(jù)處理的瓶頸： 數(shù)據(jù)的自由度和性能矛盾。 固定字段、維度的表結(jié)構(gòu)，限制了數(shù)據(jù)的入庫(kù)和拓展。 數(shù)據(jù)索引方式的瓶頸，依賴文件目錄結(jié)構(gòu)（NAS）或私有的位圖塊表結(jié)構(gòu)（Block）。,低成

2、本-x86 PC 服務(wù)器 可擴(kuò)展-線性擴(kuò)展 靈活的數(shù)據(jù)結(jié)構(gòu)-schema free 海量數(shù)據(jù)下的超高性能-及時(shí)實(shí)時(shí),大數(shù)據(jù)創(chuàng)新在銀行的應(yīng)用,2020/8/24,5,核心系統(tǒng) 保留13個(gè)月以內(nèi)的數(shù)據(jù) 查詢時(shí)間段有限制，響應(yīng)時(shí)間很快,磁帶庫(kù) 保留昨日以前數(shù)據(jù) 線下保存，恢復(fù)時(shí)間長(zhǎng)、效率低,歷史數(shù)據(jù)查詢系統(tǒng) 保留1個(gè)月以前數(shù)據(jù) 查詢沒(méi)有時(shí)間段限制，響應(yīng)時(shí)間很快,數(shù)據(jù)倉(cāng)庫(kù) 保留昨日以前數(shù)據(jù) 不對(duì)外提供聯(lián)機(jī)服務(wù),正文備份,數(shù)據(jù)采集,數(shù)據(jù)采集,高TCO/低ROI,核心減負(fù)、全量在線,2020/8/24,6,對(duì)公活期交易明細(xì)查詢；活期法人透支戶交易明細(xì)查詢；對(duì)公定期交易明細(xì)查詢；對(duì)私活期交易明細(xì)查詢；對(duì)私定

3、期交易明細(xì)查詢；換卡登記明細(xì)查詢,所有歷史賬務(wù)明細(xì)數(shù)據(jù)在線存儲(chǔ) 大量查詢業(yè)務(wù)操作遷出核心系統(tǒng) 大量并發(fā)查詢請(qǐng)求毫秒級(jí)別響應(yīng) 豐富業(yè)務(wù)創(chuàng)新數(shù)據(jù)挖掘靈活實(shí)現(xiàn),銀行客戶精準(zhǔn)營(yíng)銷,2020/8/24,7,基于上網(wǎng)日志的客戶標(biāo)簽,2020/8/24,8,利用自然語(yǔ)言處理+支持向量機(jī)算法 基于用戶上網(wǎng)行為和內(nèi)容給客戶打標(biāo)簽。 確保營(yíng)銷活動(dòng)實(shí)時(shí)有效,全省7000多萬(wàn)用戶， 每天300+億條上網(wǎng)記錄， 每條記錄對(duì)應(yīng)網(wǎng)頁(yè)數(shù)據(jù)平局17.9KB， 相當(dāng)于每天網(wǎng)絡(luò)傳輸約500+TB的數(shù)據(jù)量， 每天進(jìn)行自然語(yǔ)言處理和客戶標(biāo)簽更新,無(wú)人工干預(yù)的機(jī)器學(xué)習(xí),2020/8/24,9,年收入2.9萬(wàn)，總標(biāo)保1.5萬(wàn)以上，高達(dá)9萬(wàn)

4、的兩全產(chǎn)品，產(chǎn)品覆蓋面齊全,年收入高達(dá)18萬(wàn)，總標(biāo)保只有1萬(wàn)，壽險(xiǎn)和年金金額較高，無(wú)投連產(chǎn)品,年收入2.9萬(wàn)，高達(dá)6.3萬(wàn)的萬(wàn)能產(chǎn)品，產(chǎn)品覆蓋面齊全,年收入只有0.3萬(wàn)，高達(dá)7.7萬(wàn)的投連產(chǎn)品,年收入9.7萬(wàn)，標(biāo)保只有0.5萬(wàn),年收入只有0.8萬(wàn)，高達(dá)2.9萬(wàn)的年金產(chǎn)品,年收入4.8萬(wàn)，總標(biāo)保2.6萬(wàn)以上，高達(dá)7.6萬(wàn)的年金產(chǎn)品，產(chǎn)品覆蓋面齊全,打破經(jīng)驗(yàn)與規(guī)則，去大師，去精英。Let data talk。,2020/8/24,10,秒級(jí)的犯罪嫌疑人排查,乘坐同一班列車(chē)，住同一酒店的兩個(gè)人可能是同伙，刑偵人員將不同線索拼湊起來(lái)排查疑犯，可是來(lái)自于多源數(shù)據(jù)的處理在傳統(tǒng)IOE架構(gòu)上，需要數(shù)小時(shí)甚至整日。 天云大數(shù)據(jù)平臺(tái)將這一操作縮短至3秒，同時(shí)描述出疑犯的交往關(guān)