秒針dmp解決方案forcbsi_第1頁
秒針dmp解決方案forcbsi_第2頁
秒針dmp解決方案forcbsi_第3頁
秒針dmp解決方案forcbsi_第4頁
秒針dmp解決方案forcbsi_第5頁
已閱讀5頁,還剩59頁未讀, 繼續(xù)免費閱讀

付費下載

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

數(shù)據(jù)基于獨立ID的

效果監(jiān)測數(shù)據(jù)應(yīng)用/價值挖掘云計算云人工智能通過多種

監(jiān)測方案進行大數(shù)據(jù)積累DTVCosmeticsAUTO&Finance綜合門戶財經(jīng)類電子商務(wù)資訊社交搜索引擎4000+活動400+2000+頻道6000+位1000

Billion+為90%

的Top

100

國際品牌及國內(nèi)知名品牌

提供互聯(lián)網(wǎng)

監(jiān)測服務(wù)豐富的第

數(shù)據(jù)來源:

綜合門戶,垂直

及客戶APP等3

Billion日志9Million點擊日志6Million產(chǎn)品日志100Million受眾覆蓋5

TB日志

量單天日志最高承壓量可達到100Billion5項18項發(fā)明專利申請,涵蓋收集數(shù)據(jù)、人工智能、語義分析等領(lǐng)域一種利用計算機對詞義進行排歧的方法、系統(tǒng)及檢索方法

一種利用多種來源的

標識估算獨立

者數(shù)量的方法一種網(wǎng)吧IP庫生成方法的確定方法及系統(tǒng)、權(quán)值向量的學(xué)習(xí)方法及系統(tǒng)一種監(jiān)測網(wǎng)絡(luò)電視系統(tǒng)組播業(yè)務(wù)的方法及其系統(tǒng)一種監(jiān)測IPTV用戶行為的方法及其系統(tǒng)一種基于

的分布式網(wǎng)絡(luò)

方法及系統(tǒng)

一種自動識別產(chǎn)品命名實體的方法及裝置一種在中文文本中識別汽車昵稱的方法和裝置互聯(lián)網(wǎng)用戶樣本集的擴充、屬性參數(shù)獲取方法及裝置使用非隨機樣本用戶進行網(wǎng)絡(luò)行為信息的估計方法和裝置數(shù)字電視中宣傳信息的發(fā)送方法和系統(tǒng)及數(shù)字電視系統(tǒng)實現(xiàn)互聯(lián)網(wǎng)用戶

情況統(tǒng)計分析的方法及裝置

信息搜索方法和系統(tǒng)一種自動優(yōu)化IP地域信息庫的方法及系統(tǒng)多個IP地域信息庫的合并方法及系統(tǒng)一種服務(wù)器快速批量上架的方法監(jiān)測Flas

信息的方法及信息

裝置

花大成本把數(shù)據(jù)收回來,沒辦法把數(shù)據(jù)打通。數(shù)據(jù)如何打通使用不是很清楚到底自己的人群有什么樣的特點,想定義他們?nèi)ネ斗?,無法定義不出來。如何找到他們知道數(shù)據(jù)很重要,但是沒有人管理數(shù)據(jù),而且軟硬件成本太高了。如何管理數(shù)據(jù)這么大量的數(shù)據(jù),放在哪,安全嗎。數(shù)據(jù)的安全性秒針第一方DMP解決方案第一方DMP概述數(shù)據(jù)收集、整合打通數(shù)據(jù)安全性人群管理、算法應(yīng)用

對接、性能指標完善的界面展示案例+報價+優(yōu)勢第一方DMP概述第一方數(shù)據(jù)源數(shù)據(jù)管理、數(shù)據(jù)挖掘可擴展,應(yīng)用接口唯一使用權(quán)第一方DMP、整合、分類、

、挖掘客戶的數(shù)據(jù)只有客戶

使用數(shù)據(jù)、官

內(nèi)數(shù)據(jù)、銷售數(shù)據(jù)、

數(shù)據(jù)集群擴展,多服務(wù)對接數(shù)據(jù)收集、數(shù)據(jù)

、整合、計算分析引擎用戶細分系統(tǒng)管理EDM數(shù)據(jù)數(shù)據(jù)數(shù)據(jù)PC

監(jiān)測日志監(jiān)測日志交易平臺DSPServingDMP電視

監(jiān)測日志數(shù)據(jù)應(yīng)用數(shù)據(jù)管理數(shù)據(jù)收集Dashboard系統(tǒng)集成子平臺TOOLSBI

子平臺套件DashBoard分布式文件

數(shù)據(jù)庫Distributed

File

Cluster管理系統(tǒng)分布式同步關(guān)系數(shù)據(jù)庫D-RDB

Cluster元數(shù)據(jù)信息倉庫【MetaData

Storage

Cluster】ETL

工具數(shù)據(jù)轉(zhuǎn)換子系統(tǒng)用戶權(quán)限控制模塊查詢服務(wù)模塊塊式計算模塊實時計算模塊分布式流文件集群D-Stream

Cluster監(jiān)控子系統(tǒng)HQLSDK文件瀏覽權(quán)限管理數(shù)據(jù)管理運維管理大數(shù)據(jù)容器任務(wù)管理模塊任務(wù)管理數(shù)據(jù)輸出模塊Balance工具數(shù)據(jù)模板工具任務(wù)語言編譯器-HIVE實現(xiàn)原子指標平臺DashBoard開發(fā)工具BI-SDK數(shù)據(jù)輸入模塊DriverAPI分布式應(yīng)用公共計算平臺YARN

資源調(diào)度管理任務(wù)流管理-OOZIE\TM報表生成DataMining算法實現(xiàn)數(shù)據(jù)收集、整合打通自主采集數(shù)據(jù)對接已有數(shù)據(jù)通過監(jiān)測代碼實時

得到數(shù)據(jù)監(jiān)測代碼則由TagManager

管理對接已有數(shù)據(jù)系統(tǒng)接入數(shù)據(jù)通過跟DMP對接傳送數(shù)據(jù)(導(dǎo)入/DMP直接采取/API等)PC端和移動端官網(wǎng)全流量數(shù)據(jù)日志隊列服務(wù)同步日志隊列日志備份服務(wù)數(shù)據(jù)收集服務(wù)冗余文本日志數(shù)據(jù)分析服務(wù)

實時推送 日志實時寫入分析結(jié)果統(tǒng)計報表web服務(wù)器數(shù)據(jù)倉庫拉取數(shù)據(jù)生成報告者網(wǎng)頁/APPJs調(diào)用上傳日志數(shù)據(jù)分析員查看統(tǒng)計報告監(jiān)測PC端

監(jiān)測移動端

監(jiān)測數(shù)字電視數(shù)字電視

監(jiān)測PC1號店亞馬遜……社交??……PSven爬蟲工具API

監(jiān)測代碼1提升代碼安全性23456簡化加碼工作提升

速度提升修改效率提升代碼可控性提升APP應(yīng)用可控性DMP數(shù)據(jù)倉庫數(shù)據(jù)SEM數(shù)據(jù)EDM數(shù)據(jù)數(shù)據(jù)客戶自有第數(shù)據(jù)其它外部數(shù)據(jù)……3.

數(shù)據(jù)過濾、敏感數(shù)據(jù)加密保護2.按一致性hash進行partition-sort處理7.特有的字典壓縮算法壓縮6.按關(guān)鍵數(shù)據(jù)進行多數(shù)據(jù)源數(shù)據(jù)關(guān)聯(lián)8.基于R-Tree空間的技術(shù)組織索引1.支持所有主流數(shù)據(jù)格式接入ETL4.數(shù)據(jù)結(jié)構(gòu)化處理唯一設(shè)備標識碼ID賬號+行為特征基于

ID和行為特征的聚類算法基于時間、地點及行為的打通算法樣本IP+行為+UserAgent機頂盒IDPCDTVMobile秒針為某查詢引擎,提供搭建DMP系統(tǒng),將業(yè)務(wù)數(shù)據(jù)整合進行為數(shù)據(jù)庫,并基于搭建數(shù)據(jù)方法的數(shù)據(jù)調(diào)用接口監(jiān)測服務(wù)&其他非結(jié)構(gòu)化數(shù)據(jù)某業(yè)務(wù)共享數(shù)據(jù)庫商品數(shù)據(jù)庫訂單數(shù)據(jù)庫數(shù)據(jù)庫庫存數(shù)據(jù)庫行為數(shù)據(jù)庫監(jiān)測所得用戶行為數(shù)據(jù)庫中隱藏的用戶行為定義用戶行為用戶行為線索組織以用戶為線索的計算框架自定義的計算模型用戶

篩選、人群定義用戶行為ETL商品數(shù)據(jù)庫數(shù)據(jù)庫訂單數(shù)據(jù)庫數(shù)據(jù)查詢引擎某3C產(chǎn)品采銷數(shù)據(jù)部快消品采銷數(shù)據(jù)部研究部門

部門6億網(wǎng)民2億網(wǎng)民大量網(wǎng)民行為非結(jié)構(gòu)化數(shù)據(jù)多

數(shù)據(jù)來源1億網(wǎng)民覆蓋5億網(wǎng)民單天數(shù)據(jù)增加5TB歷史數(shù)據(jù)總量2PB數(shù)據(jù)安全性秒針收集與用戶相關(guān)的信息,如

收入、瀏覽行為、瀏覽器類型和版本、操作系統(tǒng)等客戶的數(shù)據(jù)在收集后只供客戶自己使用,不會共享給其他客戶?;谶@樣的數(shù)據(jù)隱私保護和秒針對第一方數(shù)據(jù)的ownership,秒針只做第一方DMP不收集用戶PII信息(如、號和家庭地址等)(有特定需求和特定內(nèi)容除外),不經(jīng)不公開和售賣用戶PII信息。不收集、內(nèi)容等敏感網(wǎng)絡(luò)內(nèi)容信息對于比較敏感的

以及PII數(shù)據(jù),DMP在保護好數(shù)據(jù)隱私的前提下,讓數(shù)據(jù)得到很好的應(yīng)用。解決方案是:數(shù)據(jù)加

與數(shù)據(jù)權(quán)限控制聯(lián)合使用。即首先會對敏感數(shù)據(jù)進行加密,再對數(shù)據(jù)管理員進行權(quán)限控制,劃分不同的等級的權(quán)限,權(quán)限低的管理員無法對加密后的數(shù)據(jù)進行,擁有一定等級及以上權(quán)限的管理員才能對數(shù)據(jù)進行并加以應(yīng)用。加密134xxxx2222控制134xxxx2222權(quán)限控制高權(quán)限低權(quán)限網(wǎng)絡(luò)層應(yīng)用層數(shù)據(jù)層磁盤陣列故障?網(wǎng)絡(luò)癱瘓?機房故障?、水災(zāi)等?分布式文件系統(tǒng)、分布式數(shù)據(jù)庫每份數(shù)據(jù)至少兩個以上拷貝異地容災(zāi)系統(tǒng)硬件上使用RAID5、RAID10等專業(yè),阻斷不合法請求來源實時

感知系統(tǒng),使用專業(yè)的APP掃描引擎對

WEB

接口進行定期掃描網(wǎng)絡(luò)

日志定期審計嚴密的權(quán)限控制和日志記錄一切數(shù)據(jù)和系統(tǒng)訪問皆需記錄一切數(shù)據(jù)訪問日志和用戶登錄日志,包括系統(tǒng)查看及API調(diào)用使用專有密鑰并配備復(fù)雜通過普華永道IT審計金牌客戶行業(yè)內(nèi)高度認可的標準保證行業(yè)和相關(guān)用戶受眾測量服務(wù)真實、可靠和有效聯(lián)合第

審計公司進行審計目前行業(yè)內(nèi)并沒有

的數(shù)據(jù)隱私保護標準,各家數(shù)據(jù)公司無法完善的保護用戶及客戶的數(shù)據(jù)隱私,第 DMP可能直接或間接秒針堅持只做第一方DMP,不會做第

DMP,對

的安全保護作為DMP服務(wù)第一要務(wù)研究

解決方案指定專人負責(zé),所有涉及數(shù)據(jù)的項目及產(chǎn)品均需通過隱私風(fēng)險評估與數(shù)據(jù)合作伙伴AudienceScience[1]

共同服務(wù)寶潔大數(shù)據(jù)業(yè)務(wù)秒針加入廣協(xié)領(lǐng)導(dǎo)的行業(yè)隱私保護標準項目組,推動行業(yè)隱私保護的制定收集國外相關(guān)資料進行公司培訓(xùn)本土大數(shù)據(jù)管各項隱私保護標注:AudienceScience為理企業(yè),數(shù)據(jù)保護通過準的認證隱私保護標準項目組;進行消費者意愿調(diào)研;與行業(yè)各參與方進研究國內(nèi)外相關(guān)行可實施性論證建立行業(yè)隱私保護標準及自律規(guī)范,為地區(qū)及國家下一步

做準備推動標準在全行業(yè)內(nèi)實施,建立

業(yè)對個人隱私數(shù)據(jù)的保護機制小組成員:秒針市場研究經(jīng)理兼

助理人群管理、算法人群屬性??教育程度個人月收入職業(yè)秒針Panel屬性Panel

ID教育程度個人月收入職業(yè)116MSenior

High

School<2000Student235FPh.D10,000Teacher355MJunior

High

School80,000CManagerWges汽車運動游戲購物UsersAngel20Nancy25Peter?10251520153025機器學(xué)習(xí)

Apache

MahoutSVM/RBM/KNN...用戶樣本庫人工判別/入戶調(diào)研細分模型用戶行為->分類屬性細分結(jié)果待細分用戶數(shù)據(jù)用戶

家庭構(gòu)成行為日志User10001??User10002??User10003??NBA總決賽重播@08-03

10:39:07

1h5s;

通@08-0319:27:45

20m5s;…意甲

@08-01

20:30:07

1h20m7s;

@08-0416:27:45

1h20m36s;...聯(lián)播@08-0119:27:075s;聲動亞洲@08-0523:21:13

55m37s;...…………User98006??天氣預(yù)報@08-03

19:32:07

2m1s;汽車世界@08-0218:17:45

35m40s;...用戶家庭構(gòu)成User10001

三口NBA、財經(jīng)User10002

五口足球、財經(jīng)User10003單身女性音樂……User98006單身汽車用戶

家庭構(gòu)成User1夫妻

NBA、汽車User2三口足球行為日志NBA總決賽

@08-01

10:30:07

1h20m7s;汽車世界@08-02

18:27:45

55m30s;...焦點訪談@08-04

19:30:00

20m10s;

聯(lián)播@08-05

19:07:00

20m7s;…User3五口

時政、財經(jīng)聯(lián)播@08-02

19:00:00

28m30s;

中國@08-06

20:36:00

40m8s;…………User10000

單身女性

音樂中國

@08-02

09:30:07

2h7s;...行為用戶小米2S三星GT-I8552三星I9082魅族MX3用戶A√√用戶B√用戶C√√√用戶小米2S三星GT-I8552三星I9082用戶A√用戶B√√√用戶C√√User

CFItem

CF用戶A用戶B用戶C小米2S三星GT-I8552三星I9082魅族MX3喜歡相似用戶A用戶B用戶C小米2S三星GT-I8552三星I9082相似喜歡應(yīng)用

對接、性能指標通過秒針Exchange平臺的RTB過程,秒針DMP中數(shù)據(jù)已經(jīng)與各個DSP進行了截止目前為止:至少70%MZID已與行業(yè)DSP的ID打通,數(shù)據(jù)可用性極高Map已對接對接時間正在對接傳漾2013年9月美杉品友2013年7月力美璧合2013年6月晟新數(shù)2013年5月Vizury舜飛2013年4月MediaV互動通2012年12月悠易互通2012年11月輸出受眾數(shù)據(jù),用于精準輸出源數(shù)據(jù),用于二次計算自定義開發(fā)API分業(yè)務(wù)提供基于SSD和內(nèi)存的兩種分布式的數(shù)據(jù)

系統(tǒng)數(shù)據(jù) 與計算在本地結(jié)合,提高效率秒針調(diào)度算法及本地資源管理池,支持1000個任務(wù)并發(fā)處理,任務(wù)調(diào)度時間復(fù)雜度為O(1),相比原生的hadoop任務(wù)管理耗時減少一個數(shù)量級同時支持批處理計算及流式計算20000qps單機并發(fā)請求300M/s單機計算吞吐量SSD:10ms以內(nèi)內(nèi)存:1ms以內(nèi)響應(yīng)速度線形可擴展規(guī)模線形可擴展集群規(guī)模完善的系統(tǒng)界面展示簡單案例秒針監(jiān)測抓?。旱凑J證的用戶數(shù)據(jù),導(dǎo)入DMP并設(shè)定為DSP投放的目標人群DMP監(jiān)測主DSPminisiteAdExchange數(shù)據(jù)支撐的數(shù)字:主應(yīng)用第

DMP

、

、管理數(shù)據(jù),并通過數(shù)據(jù)挖掘發(fā)揮數(shù)據(jù)價值主通過DMP的數(shù)據(jù)挖掘成果,借助DSP在Ad

Exchange交易平臺上采購

資源,投放主應(yīng)用第 監(jiān)測系統(tǒng),獲得真實的 投放數(shù)據(jù)驗證投放效果,并將 監(jiān)測數(shù)據(jù)接入DMP,指導(dǎo)未來的

投放數(shù)據(jù)銷售數(shù)據(jù)用戶瀏覽行為behaviorpanel秒針DMP:積累庫加入間接轉(zhuǎn)換分析后,可以發(fā)現(xiàn):EDM-

A/

B的貢獻被低估了半;

的貢獻被高估了將近42%;EDM-媒體A24%59%EDM-媒體B17%直接貢獻占比分析EDM-媒體A51%EDM-媒體B32%17%直接+間接貢獻占比分析行為搜索行為瀏覽行為秒針DMP、同樣

了商品A的人30%

了B20%

了C20%

了D猜您喜歡商品A商品B產(chǎn)品C秒針DMP收集,進而實施商品的各種用戶行為,應(yīng)用算法進行商品關(guān)聯(lián),用戶聚類,行為,提升用戶購物體驗、促進消費報價SAAS模式按照日均3.5億流量報價579萬/年,License模式報價820萬/年模式服務(wù)說明總價(元/年)備注SAAS模式按照日均3.5億流量計算報價5,790,625元/年系統(tǒng)自帶10個人群分類器,每新增定制一個分類器50,000元;0.05元/CPM單獨收取數(shù)據(jù)傳輸費用;License模式服務(wù)集群+

+

備份6,700,000元/年應(yīng)采用多機房熱備的系統(tǒng)架構(gòu),共30臺免費50小時/年第一年

服務(wù)器成本1,500,000元*報價按照最終實際結(jié)果來調(diào)整秒針優(yōu)勢榮獲2012年第四屆廣告主

獎“最具行業(yè)貢獻獎”AdMonitor榮獲2012年第四屆主金遠獎“最值得信賴的第網(wǎng)絡(luò)監(jiān)測系統(tǒng)”榮獲2012年

獎特別貢獻獎榮獲2012年中國最具投資價值企業(yè)50強MixReach助力強生榮獲2012年金鼠標網(wǎng)絡(luò)大賽“最具創(chuàng)新精神廣告主獎”榮獲2012年中國年度創(chuàng)新成長企業(yè)

100強秒針系統(tǒng)是國家高新技

術(shù)企業(yè)和雙軟認證企業(yè),擁有超過20項國家專利。金鼠標

最佳網(wǎng)絡(luò)

工具-MobileMonitor金鼠標

最佳網(wǎng)絡(luò)

工具-VOptimizer獎最具行業(yè)貢獻力數(shù)據(jù)公司2012年度最佳技術(shù)驅(qū)動行業(yè)榮譽和獎項“MMA中國無線·無線

監(jiān)測標準發(fā)布會”“可測量的移動世界”移動互聯(lián)網(wǎng)

趨勢先行”“移動移動互聯(lián)網(wǎng)秒針發(fā)布全球首個基于SDK的第

移動

監(jiān)測產(chǎn)品秒針_M

創(chuàng)始會員,標準

長單位,為

主和

商傳達20息12年12月17日秒針攜手多家共同探討移動互聯(lián)網(wǎng)發(fā)展與各方一起,推動IP庫完善中國標準地理IP庫建立為

主與

雙方利益,于2011年8月開始和各方溝通,推動IP庫完善;先后為8家媒體提供IP庫校驗服務(wù)。作為中國IP地理信息標準成員,在廣協(xié)下建立中國互聯(lián)網(wǎng)

IP標準地理信息庫。標準地理IP庫秒針基于:優(yōu)秀的互聯(lián)網(wǎng)監(jiān)測服務(wù)豐富的數(shù)據(jù)管理經(jīng)驗強大的技術(shù)力量儲備促使多家客戶與秒針簽訂大數(shù)據(jù)管理的合作意向家庭戶→人→電腦→→IP服務(wù)團隊技術(shù)開發(fā)總秒針創(chuàng)始人兼CTO。負責(zé)公司產(chǎn)品

、技術(shù)開發(fā)和研究創(chuàng)新;

數(shù)學(xué)學(xué)

士、計算機

與理論

;10余項國內(nèi)外發(fā)明專利的發(fā)明人;

奧數(shù)競賽的保送

;多次獲國際算法大獎;連續(xù)兩年擔(dān)任ACM-ICPC亞洲賽區(qū)裁判工作;15年的

開發(fā)經(jīng)驗和11年的

開發(fā)管理經(jīng)驗業(yè)務(wù)總副

辦總經(jīng)理

,負責(zé)公司的產(chǎn)品推廣和客戶服務(wù);超過15年的

從業(yè)經(jīng)驗,曾任歐萊雅

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評論

0/150

提交評論