產(chǎn)品發(fā)布渠道測(cè)試效果分析發(fā)布渠道測(cè)試方法渠道表現(xiàn)分析的基本概念渠道表現(xiàn)分析的實(shí)施方案010203目錄CONTENTS發(fā)布渠道測(cè)試方法1AB測(cè)試是為了驗(yàn)證一個(gè)新的產(chǎn)品交互設(shè)計(jì)、產(chǎn)品功能點(diǎn)或者策略的效果，在同一時(shí)間段，向兩組在統(tǒng)計(jì)學(xué)意義上特征一致的用戶(一般叫作對(duì)照組和實(shí)驗(yàn)明)分別展示優(yōu)化前(對(duì)照組)/優(yōu)化后(實(shí)驗(yàn)組)的產(chǎn)品交互設(shè)計(jì)、產(chǎn)品功能點(diǎn)或策略，并通過數(shù)據(jù)分析，判斷優(yōu)化前后的產(chǎn)品交互設(shè)計(jì)、產(chǎn)品功能點(diǎn)或者策略在一個(gè)或者多個(gè)評(píng)估指標(biāo)上是否符合預(yù)期的一種實(shí)驗(yàn)方法。注意實(shí)驗(yàn)組和對(duì)照組僅有一個(gè)變量發(fā)生變化！A/B測(cè)試法定義01目的03計(jì)算方案帶來的ROI:至于新改進(jìn)的功能,究竟給平臺(tái)帶來了多數(shù)DAU,多少額外的銷售量等。判斷方案的優(yōu)劣:究竟是A方案好些,還是B方案好些。A/B測(cè)試法目的基礎(chǔ)建設(shè)-抽樣算法問題：抽樣算法的好壞，決定了這次AB測(cè)試的科學(xué)程度。互聯(lián)網(wǎng)公司最基礎(chǔ)的抽樣算法是對(duì)用戶ID進(jìn)行哈希取模后隨機(jī)分組,但這就有可能將高轉(zhuǎn)化率的用戶都分配至某一組，導(dǎo)致樣本分組從源頭即不可信。要求：抽樣算法是AB測(cè)試的基礎(chǔ)，需要在最開始就采用較為合理的抽樣算法。A/B測(cè)試法步驟實(shí)驗(yàn)一定是有目的的，沒有目的的實(shí)驗(yàn)是沒有價(jià)值的.確定試驗(yàn)方案和最終基準(zhǔn)指標(biāo)均值型指標(biāo):如人均時(shí)長(zhǎng),人均購(gòu)買樣本量很大時(shí):z檢驗(yàn)樣本量很小時(shí):t檢驗(yàn)比值型指標(biāo):如注冊(cè)轉(zhuǎn)化率確定假設(shè)檢驗(yàn)方法并選取置信區(qū)間在設(shè)計(jì)實(shí)驗(yàn)時(shí),就需要計(jì)算出該次實(shí)驗(yàn)的最少樣本量,從而結(jié)合產(chǎn)品DAU推算出最少實(shí)驗(yàn)天數(shù).確定實(shí)驗(yàn)樣本量和最低實(shí)驗(yàn)天數(shù)A/B測(cè)試法步驟確定業(yè)務(wù)層面流兩分配邏輯ROI即投資回報(bào)比.通常情況下,方案的成本是可以直接計(jì)算的;而對(duì)于收益而言,就需要計(jì)算與對(duì)照組的差值來得出來.AB測(cè)試實(shí)驗(yàn)效果評(píng)估不影響用戶體驗(yàn)：如UI實(shí)驗(yàn)等，可均勻分配流量實(shí)驗(yàn)，以快速得到實(shí)驗(yàn)結(jié)論；不確定性較強(qiáng)的實(shí)驗(yàn)：如產(chǎn)品新功能上線，需小流量實(shí)驗(yàn)，盡量減小用戶體驗(yàn)影響，在允許的時(shí)間內(nèi)得到結(jié)論；希望收益最大化的實(shí)驗(yàn)：如運(yùn)營(yíng)活動(dòng)等，盡可能將效果最大化，一般需要大流量實(shí)驗(yàn)，留出小部分對(duì)照組用于評(píng)估ROIA/B測(cè)試法步驟發(fā)布渠道評(píng)估注意事項(xiàng)新鮮勁數(shù)據(jù)陷阱人群差異陷阱21步驟觀測(cè)指標(biāo)到穩(wěn)定態(tài)后，再做評(píng)估新用戶的使用時(shí)長(zhǎng)往往會(huì)比老用戶低很多,比會(huì)員用戶低更多.產(chǎn)品測(cè)試產(chǎn)品測(cè)試，是指通過產(chǎn)品短期的市場(chǎng)投放，快速獲取市場(chǎng)的反饋數(shù)據(jù)，從而幫助商家完成發(fā)布渠道的選擇和產(chǎn)品的營(yíng)銷定位。定義注意測(cè)試時(shí)投入產(chǎn)出比肯定很低，但是為了避免后期產(chǎn)生更大的損失，測(cè)試過程不可少。！產(chǎn)品測(cè)試定義，在獲取數(shù)據(jù)的過程中，想迅速獲得足夠的數(shù)據(jù)，需要啟動(dòng)推廣工具，盡管會(huì)付出一定的推廣費(fèi)用，但相對(duì)于時(shí)間而言，是值得的。若行業(yè)中某產(chǎn)品的的銷量較好，并不意味著本企業(yè)中該產(chǎn)品會(huì)表現(xiàn)得好，需要先將產(chǎn)品投放市場(chǎng)，獲取反饋數(shù)據(jù)，再進(jìn)行后期的大批量進(jìn)貨等操作。投放原因投放依據(jù)產(chǎn)品測(cè)試測(cè)試方法直通車測(cè)款是商家利用消費(fèi)者對(duì)關(guān)鍵詞的搜索及喜好等購(gòu)買意向，通過有意識(shí)地對(duì)關(guān)鍵詞及購(gòu)買意向位置進(jìn)行付費(fèi)，將自己的產(chǎn)品推薦到消費(fèi)者前面，然后根據(jù)產(chǎn)品的展現(xiàn)次數(shù)、點(diǎn)擊次數(shù)、加購(gòu)物車數(shù)量、購(gòu)買金額等指標(biāo)進(jìn)行分析，通過分析對(duì)比從而了解產(chǎn)品的市場(chǎng)前景。適用范圍較少產(chǎn)品的推廣測(cè)試及重點(diǎn)產(chǎn)品的推廣測(cè)試?直通車測(cè)款的基本內(nèi)容建議在無線端直通車平臺(tái)投放推廣現(xiàn)在絕大部分類目，無線端都是主要流量的來源。適當(dāng)提高關(guān)鍵詞的出價(jià)出價(jià)太低將獲取不到足夠高的展示位，沒有展現(xiàn)量，自然沒有點(diǎn)擊量來進(jìn)行數(shù)據(jù)的積累。這樣流量來源第一比較單一，第二測(cè)款時(shí)數(shù)據(jù)比其他直通車來源可靠。選取站內(nèi)關(guān)鍵詞關(guān)閉定向流量入口選取大詞、搜索詞、一級(jí)詞這類關(guān)鍵詞可以適用于類目中相匹配的大多數(shù)產(chǎn)品，而且往往也是在行情中搜索量、展現(xiàn)量及點(diǎn)擊量較大的詞。1432產(chǎn)品測(cè)試測(cè)試方法鉆石展位測(cè)款A(yù)京東快車測(cè)款B多多搜索C產(chǎn)品測(cè)試測(cè)試方法其他測(cè)款方法渠道表現(xiàn)分析的基本概念2渠道表現(xiàn)分析的基本概念渠道表現(xiàn)分析是指企業(yè)在不同電商平臺(tái)上進(jìn)行投放測(cè)試后，對(duì)不同渠道的投放效果進(jìn)行評(píng)估和分析，以了解不同渠道對(duì)產(chǎn)品發(fā)布的貢獻(xiàn)，從而優(yōu)化渠道結(jié)構(gòu)，提高發(fā)布效果。注意此時(shí)企業(yè)已進(jìn)行完產(chǎn)品的投放測(cè)試，分析數(shù)據(jù)為產(chǎn)品在不同投放渠道上的表現(xiàn)數(shù)據(jù)！渠道表現(xiàn)分析的流程始01020304確定評(píng)價(jià)體系構(gòu)成因素確定評(píng)價(jià)體系指標(biāo)評(píng)價(jià)指標(biāo)的賦權(quán)計(jì)算矩陣分析渠道表現(xiàn)分析的基本概念渠道表現(xiàn)分析的基本概念，1,發(fā)現(xiàn)新的市場(chǎng)機(jī)會(huì)；2,優(yōu)化產(chǎn)品策略；3,指導(dǎo)營(yíng)銷策略的制定。1,了解各渠道的銷售效果和效率，選擇最優(yōu)發(fā)布渠道。2,進(jìn)行產(chǎn)品營(yíng)銷定位直接意義間接意義渠道表現(xiàn)分析的實(shí)施方案3渠道表現(xiàn)分析的實(shí)施方案確定評(píng)價(jià)體系構(gòu)成因素-轉(zhuǎn)化漏斗流量互動(dòng)交易獲取客戶互動(dòng)操作下單轉(zhuǎn)化和收益對(duì)一個(gè)電商產(chǎn)品的渠道價(jià)值的評(píng)價(jià)需要同時(shí)考慮以下幾個(gè)因素，即用戶規(guī)模、用戶互動(dòng)行為、用戶轉(zhuǎn)化和用戶收益。渠道表現(xiàn)分析的實(shí)施方案確定評(píng)價(jià)體系指標(biāo)ROI是渠道的投資回報(bào)率，指通過投資而應(yīng)返回的價(jià)值，即企業(yè)從一項(xiàng)投資活動(dòng)中得到的經(jīng)濟(jì)回報(bào)。ROI是一個(gè)非常重要的指標(biāo)，它可以同時(shí)體現(xiàn)用戶流量規(guī)模、用戶轉(zhuǎn)化和用戶收益這三個(gè)因素。渠道表現(xiàn)分析的實(shí)施方案確定評(píng)價(jià)體系指標(biāo)，ROI需要有一個(gè)周期，即投入成本多久后獲得收益，二一些經(jīng)營(yíng)模式的投資回報(bào)期相對(duì)較長(zhǎng)，導(dǎo)致ROI統(tǒng)計(jì)的不夠完全.ROI指標(biāo)過于單一，需考慮其他指標(biāo)以持續(xù)經(jīng)營(yíng)。不足1不足2因此，引入用戶參與度這一指標(biāo)以反應(yīng)用戶互動(dòng)行為。渠道表現(xiàn)分析的實(shí)施方案確定評(píng)價(jià)體系指標(biāo)Engagement即用戶參與度指標(biāo)，反應(yīng)用戶行為，其中包含數(shù)量指標(biāo)、行為指標(biāo)、質(zhì)量指標(biāo)這三大類別。渠道評(píng)估思路主要是將渠道表現(xiàn)拆分為ROI及Engagement這兩個(gè)維度來進(jìn)行矩陣分析，發(fā)現(xiàn)問題再