第3章?tīng)I(yíng)銷大數(shù)據(jù)采集及預(yù)處理【學(xué)時(shí)】3學(xué)時(shí)【學(xué)習(xí)目標(biāo)】了解大數(shù)據(jù)的類型和數(shù)據(jù)來(lái)源；了解數(shù)據(jù)采集過(guò)程，培育正確的信息隱私觀；了解大數(shù)據(jù)采集方法；掌握數(shù)據(jù)預(yù)處理的方法，每種方法對(duì)應(yīng)處理的問(wèn)題類型以及應(yīng)用大語(yǔ)言模型進(jìn)行數(shù)據(jù)預(yù)處理的方法【課程內(nèi)容】數(shù)據(jù)采集數(shù)據(jù)類型結(jié)構(gòu)化數(shù)據(jù)非結(jié)構(gòu)化數(shù)據(jù)半結(jié)構(gòu)化數(shù)據(jù)數(shù)據(jù)來(lái)源搜索引擎電子商務(wù)平臺(tái)社交媒體平臺(tái)數(shù)據(jù)采集方法系統(tǒng)日志感知設(shè)備網(wǎng)絡(luò)爬蟲(chóng)市場(chǎng)調(diào)查數(shù)據(jù)采集方法數(shù)據(jù)獲取渠道缺乏數(shù)據(jù)質(zhì)量難以保證隱私安全問(wèn)題日益凸顯數(shù)據(jù)預(yù)處理數(shù)據(jù)清洗遺漏值噪聲異常值數(shù)據(jù)集成數(shù)據(jù)不一致數(shù)據(jù)重復(fù)數(shù)據(jù)冗余數(shù)據(jù)變換數(shù)據(jù)規(guī)約DeepSeek應(yīng)用案例上傳數(shù)據(jù)文件并提出數(shù)據(jù)清洗請(qǐng)求清洗結(jié)果呈現(xiàn)與應(yīng)用根據(jù)清洗建議執(zhí)行操作八爪魚(yú)采集器數(shù)據(jù)采集應(yīng)用案例八爪魚(yú)的特點(diǎn)自定義功能強(qiáng)大可視化界面數(shù)據(jù)類型豐富數(shù)據(jù)導(dǎo)出方便簡(jiǎn)單參數(shù)配置采集方式多樣運(yùn)用八爪魚(yú)模板模式采集選擇模板并設(shè)置采集輸入關(guān)鍵參數(shù)并啟動(dòng)導(dǎo)出采集數(shù)據(jù)并選擇運(yùn)用八爪魚(yú)自定義模式采創(chuàng)建自定義任務(wù)設(shè)置循環(huán)點(diǎn)擊與翻頁(yè)…采集目標(biāo)字段優(yōu)化與調(diào)整采集流程完成采集并導(dǎo)出數(shù)據(jù)去重導(dǎo)出數(shù)據(jù)記錄【重點(diǎn)、難點(diǎn)】1.重點(diǎn)：營(yíng)銷大數(shù)據(jù)的類型和數(shù)據(jù)來(lái)源2.難點(diǎn)：大數(shù)據(jù)預(yù)處理的步驟，以及每個(gè)步驟對(duì)應(yīng)處理的問(wèn)題【思考與練習(xí)】簡(jiǎn)述大數(shù)據(jù)分析的流程及每一步的主要任務(wù)。舉例說(shuō)明大數(shù)據(jù)的類型及其分別有哪些特點(diǎn)。營(yíng)銷實(shí)踐中，可以通過(guò)哪些渠道收集用戶數(shù)據(jù)?如何保護(hù)用戶的隱私?數(shù)據(jù)預(yù)處理的流程是什么？對(duì)于大數(shù)據(jù)分析有什么作用？實(shí)際操作中，如何使用大語(yǔ)言模型輔助進(jìn)行數(shù)據(jù)預(yù)處理？簡(jiǎn)述八爪魚(yú)兩種采集方式的區(qū)別以及優(yōu)缺點(diǎn)案例回答要點(diǎn)：案例討論題：瑞幸咖啡通過(guò)哪些渠道收集數(shù)據(jù)？怎么將大數(shù)據(jù)融入到營(yíng)銷中的？線上渠道：自有平臺(tái)（APP、小程序）：訂單、支付、偏好、會(huì)員信息。社交媒體（微信、微博）：用戶評(píng)價(jià)、互動(dòng)數(shù)據(jù)。第三方合作（外賣(mài)平臺(tái)、聯(lián)名品牌）：購(gòu)買(mǎi)行為、活動(dòng)數(shù)據(jù)。線下渠道：門(mén)店P(guān)OS系統(tǒng)：交易時(shí)間、產(chǎn)品銷量。門(mén)店監(jiān)控：顧客流動(dòng)路徑、停留時(shí)間。私域社群（企業(yè)微信）：復(fù)購(gòu)行為、實(shí)時(shí)反饋。大數(shù)據(jù)在營(yíng)銷中的應(yīng)用個(gè)性化推薦與動(dòng)態(tài)定價(jià)：基于消費(fèi)頻次、地理位置差異化發(fā)放優(yōu)惠券，優(yōu)化定價(jià)策略。聯(lián)名營(yíng)銷與爆款預(yù)測(cè)：通過(guò)用戶興趣標(biāo)簽選擇IP（如茅臺(tái)、線條小狗），結(jié)合歷史數(shù)據(jù)與社交媒體熱度推出爆品。私域流量精準(zhǔn)運(yùn)營(yíng)：社群定時(shí)推送優(yōu)惠（如早餐5折），標(biāo)準(zhǔn)化SOP結(jié)合用戶活躍時(shí)段提升復(fù)購(gòu)。瑞幸咖啡是如何充分利用用戶數(shù)據(jù)驅(qū)動(dòng)產(chǎn)品研發(fā)的？

數(shù)據(jù)驅(qū)動(dòng)的研發(fā)體系需求挖掘：分析用戶搜索詞（如“低糖”“茶咖”）和會(huì)員口味偏好，確定研發(fā)方向（如碧螺知春拿鐵）。賽馬機(jī)制：多組研發(fā)方案盲測(cè)篩選，原料數(shù)字化組合（如香味=1、奶味=2），年均超100款新品測(cè)試。供應(yīng)鏈標(biāo)準(zhǔn)化：IoT設(shè)備統(tǒng)一參數(shù)（萃取壓力、溫度），基于預(yù)售數(shù)據(jù)備貨（如醬香拿鐵厚乳）。數(shù)據(jù)整合與協(xié)同跨部門(mén)共享：研發(fā)、營(yíng)銷、供應(yīng)鏈數(shù)據(jù)聯(lián)動(dòng)（如根據(jù)點(diǎn)擊率調(diào)整菜單、結(jié)合地域偏好調(diào)整甜度）。實(shí)時(shí)反饋迭代：整合社交媒體輿情（如小紅書(shū)UGC），快速優(yōu)化產(chǎn)品（如生酪拿鐵衍生口味）。思考題回答要點(diǎn)：簡(jiǎn)述大數(shù)據(jù)分析的流程及每一步的主要任務(wù)。數(shù)據(jù)采集--盡可能全面的收集數(shù)據(jù)。數(shù)據(jù)預(yù)處理--對(duì)數(shù)據(jù)進(jìn)行清洗，便于分析。數(shù)據(jù)分析--洞察用戶行為，對(duì)用戶行為進(jìn)行預(yù)測(cè)，得到數(shù)據(jù)背后的信息。舉例說(shuō)明大數(shù)據(jù)的類型，分別有什么特點(diǎn)？結(jié)構(gòu)化數(shù)據(jù)有日期、電話號(hào)碼、郵政編碼、客戶姓名，特點(diǎn)：明確定義、定量數(shù)據(jù)、容易訪問(wèn)、容易分析。非結(jié)構(gòu)化數(shù)據(jù)有文本、語(yǔ)音、監(jiān)控?cái)?shù)據(jù)、圖片、HTML(超文本標(biāo)記語(yǔ)言)，特點(diǎn)：沒(méi)有明確的定義、定性數(shù)據(jù)、難以獲得、難以分析。半結(jié)構(gòu)化數(shù)據(jù)有電子郵件，特點(diǎn)：有定義性和一致性，在擁有一些組織屬性的情況下，也保留了數(shù)據(jù)的流動(dòng)性。營(yíng)銷實(shí)踐中，可以通過(guò)哪些渠道收集用戶數(shù)據(jù)，如何確保隱私保護(hù)等問(wèn)題？可以通過(guò)搜索引擎、電子商務(wù)平臺(tái)、社交媒體平臺(tái)來(lái)獲得用戶相關(guān)的營(yíng)銷大數(shù)據(jù)。對(duì)數(shù)據(jù)的獲取和使用不僅要合規(guī)化，還要符合倫理道德。數(shù)據(jù)預(yù)處理的流程是什么，對(duì)于大數(shù)據(jù)分析有什么作用？數(shù)據(jù)預(yù)處理過(guò)程主要包括數(shù)據(jù)清洗、數(shù)據(jù)集成、數(shù)據(jù)變換、數(shù)據(jù)規(guī)約四個(gè)步驟。數(shù)據(jù)預(yù)處理能夠幫助改善數(shù)據(jù)質(zhì)量，進(jìn)而提高數(shù)據(jù)挖掘進(jìn)程的有效性和準(zhǔn)確性。實(shí)際操作中，如何使用大語(yǔ)言模型輔助進(jìn)行數(shù)據(jù)預(yù)處理？上傳數(shù)據(jù)文件并提出數(shù)據(jù)清洗請(qǐng)求清洗結(jié)果呈現(xiàn)與應(yīng)用根據(jù)清洗建議執(zhí)行操作簡(jiǎn)述八爪魚(yú)兩種采集方式的區(qū)別以及優(yōu)缺點(diǎn)模板采集是基于預(yù)設(shè)規(guī)則庫(kù)提供標(biāo)準(zhǔn)化采集模板。用戶輸入U(xiǎn)RL或關(guān)鍵詞，選擇對(duì)應(yīng)模板即可自動(dòng)提取數(shù)據(jù)（如商品名稱、價(jià)格）。自定義采集是用戶手動(dòng)配置采集規(guī)則，通過(guò)模擬瀏覽器操作（點(diǎn)擊、翻頁(yè)、提取字段）實(shí)現(xiàn)精準(zhǔn)抓取。模板