打造基于產(chǎn)教融合的就業(yè)育人綜合服務(wù)平臺(tái)打造基于產(chǎn)教融合的就業(yè)育人綜合服務(wù)平臺(tái)項(xiàng)目3統(tǒng)計(jì)電影網(wǎng)站用戶影評(píng)數(shù)據(jù)教案課程名稱：Hadoop大數(shù)據(jù)開發(fā)基礎(chǔ)課程類別：必修適用專業(yè)：大數(shù)據(jù)技術(shù)類相關(guān)專業(yè)總學(xué)時(shí)：64學(xué)時(shí)（其中理論28學(xué)時(shí)，實(shí)驗(yàn)36學(xué)時(shí)）總學(xué)分：4.0學(xué)分本項(xiàng)目學(xué)時(shí)：10學(xué)時(shí)材料清單《Hadoop大數(shù)據(jù)開發(fā)基礎(chǔ)（第3版）（微課版）》教材。項(xiàng)目3配套PPT、數(shù)據(jù)和代碼文件。Windows操作系統(tǒng)下的IDEA與Java安裝包。引導(dǎo)性提問。探究性問題。拓展性問題。教學(xué)目標(biāo)與基本要求教學(xué)目標(biāo)本項(xiàng)目開始將正式對(duì)電影網(wǎng)站用戶影評(píng)數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析，首先從搭建開發(fā)環(huán)境開始，詳細(xì)介紹在Windows下安裝Java和IDEA開發(fā)工具，以及在IDEA中創(chuàng)建MapReduce工程并添加對(duì)應(yīng)依賴的過程。緊接著通過對(duì)Hadoop官方示例源碼的解讀，幫助學(xué)員深入了解MapReduce的工作原理與執(zhí)行流程，隨后以網(wǎng)站用戶登錄次數(shù)排序任務(wù)為例，分析MapReduce編程的基本思路和處理邏輯，實(shí)現(xiàn)核心代碼的編寫。最后基于MapReduce編程，實(shí)現(xiàn)對(duì)影評(píng)數(shù)據(jù)中所有電影評(píng)分次數(shù)的統(tǒng)計(jì)，并分析不同性別的用戶對(duì)電影評(píng)分的差異?；疽笳莆赵赪indows下安裝Java和IntelliJIDEA的方法。掌握在IntelliJIDEA中創(chuàng)建MapReduce工程和配置MapReduce環(huán)境的方法。熟悉MapReduce的工作原理及執(zhí)行流程。了解Hadoop官方示例中的WordCount源碼。了解MapReduce編程的基本思路。熟悉map()方法與reduce()方法的處理邏輯。掌握編寫基礎(chǔ)的MapReduce程序處理簡(jiǎn)單任務(wù)的方法。問題引導(dǎo)性提問引導(dǎo)性提問需要教師根據(jù)教材內(nèi)容和學(xué)生實(shí)際水平，提出問題，啟發(fā)引導(dǎo)學(xué)生去解決問題，提問，從而達(dá)到理解、掌握知識(shí)，發(fā)展各種能力和提高思想覺悟的目的。常用的編程語(yǔ)言及對(duì)應(yīng)的開發(fā)工具都有哪些？Java和Python分別都有哪些優(yōu)缺點(diǎn)？探究性問題探究性問題需要教師深入鉆研教材的基礎(chǔ)上精心設(shè)計(jì)，提問的角度或者在引導(dǎo)性提問的基礎(chǔ)上，從重點(diǎn)、難點(diǎn)問題切入，進(jìn)行插入式提問?；蛘呤菍?duì)引導(dǎo)式提問中尚未涉及但在課文中又是重要的問題加以設(shè)問。IDEA中導(dǎo)入Jar包的方式有哪些？MapReduce程序中具體的作業(yè)執(zhí)行流程是什么樣的？拓展性問題拓展性問題需要教師深刻理解教材的意義，學(xué)生的學(xué)習(xí)動(dòng)態(tài)后，根據(jù)學(xué)生學(xué)習(xí)層次，提出切實(shí)可行的關(guān)乎實(shí)際的可操作問題。亦可以提供拓展資料供學(xué)生研習(xí)探討，完成拓展性問題。MapReduce程序中Combiner階段與Reducer階段有什么區(qū)別？MapReduce程序中是否可以不設(shè)置Reducer階段？IDEA中編寫的MapReduce程序是否可以直接在IDEA中運(yùn)行？主要知識(shí)點(diǎn)、重點(diǎn)與難點(diǎn)主要知識(shí)點(diǎn)在IntelliJIDEA中搭建MapReduce開發(fā)環(huán)境。通過WordCount源碼理解MapReduce編程。對(duì)網(wǎng)站用戶登錄次數(shù)數(shù)據(jù)根據(jù)登錄次數(shù)進(jìn)行升序排序。統(tǒng)計(jì)電影網(wǎng)站用戶影評(píng)數(shù)據(jù)中所有電影的評(píng)分次數(shù)。統(tǒng)計(jì)電影網(wǎng)站用戶影評(píng)數(shù)據(jù)中不同性別的用戶對(duì)電影的評(píng)分。重點(diǎn)在IntelliJIDEA中創(chuàng)建并配置MapReduce工程。了解MapReduce實(shí)現(xiàn)詞頻統(tǒng)計(jì)的執(zhí)行流程。使用MapReduce處理不同問題時(shí)的分析思路與處理邏輯。統(tǒng)計(jì)電影網(wǎng)站用戶影評(píng)數(shù)據(jù)。在IDEA打包MapReduce程序并提交至虛擬機(jī)Hadoop集群運(yùn)行的步驟。難點(diǎn)使用MapReduce處理不同問題時(shí)的分析思路與處理邏輯。MapReduce程序的編寫。教學(xué)過程設(shè)計(jì)理論教學(xué)過程在Windows下安裝Java。下載、安裝并啟動(dòng)IntelliJIDEA。創(chuàng)建MapReduce工程。配置MapReduce環(huán)境。了解MapReduce實(shí)現(xiàn)詞頻統(tǒng)計(jì)的執(zhí)行流程。讀懂官方提供的WordCount源碼。分析思路與處理邏輯。編寫核心模塊代碼。打包程序并提交MapReduce任務(wù)給集群運(yùn)行。創(chuàng)建并配置工程項(xiàng)目。統(tǒng)計(jì)所有電影的評(píng)分次數(shù)。統(tǒng)計(jì)不同性別的用戶對(duì)電影的評(píng)分。實(shí)驗(yàn)教學(xué)過程在Windows下安裝Java。下載、安裝并啟動(dòng)IntelliJIDEA。創(chuàng)建MapReduce工程。配置MapReduce環(huán)境。編寫核心模塊代碼。打包程序并提交MapReduce任務(wù)給集群運(yùn)行。創(chuàng)建并配置工程項(xiàng)目。統(tǒng)計(jì)所有電影的評(píng)分次數(shù)。統(tǒng)計(jì)不同性別的用戶對(duì)電影的評(píng)分。教材與參考資料教材張軍，張良均．Hadoop大數(shù)據(jù)開發(fā)基礎(chǔ)（第3版）（微課版）[M]．北京：人民郵電出版社．2025．參考資料[1]