《大數(shù)據(jù)技術(shù)》教學(xué)大綱課程英文名BigDataTechnology課程代碼03M0183學(xué)分2.5總學(xué)時(shí)40理論學(xué)時(shí)28實(shí)驗(yàn)學(xué)時(shí)0上機(jī)學(xué)時(shí)12實(shí)踐學(xué)時(shí)0課程類(lèi)別專(zhuān)業(yè)教育課課程性質(zhì)任選先修課程面向?qū)ο蟪绦蛟O(shè)計(jì)適用專(zhuān)業(yè)計(jì)算機(jī)科學(xué)與技術(shù)（中外合作辦學(xué)）開(kāi)課學(xué)院信息工程學(xué)院注：課程類(lèi)別是指公共基礎(chǔ)課/學(xué)科基礎(chǔ)課/專(zhuān)業(yè)教育課；課程性質(zhì)是指必修/限選/任選。一、課程地位與課程目標(biāo)（一）課程地位本課程是計(jì)算機(jī)科學(xué)與技術(shù)專(zhuān)業(yè)開(kāi)設(shè)的一門(mén)專(zhuān)業(yè)選修課。信息時(shí)代已開(kāi)始逐步過(guò)渡到數(shù)據(jù)時(shí)代，大數(shù)據(jù)處理技術(shù)越來(lái)越重要，企業(yè)應(yīng)用也越來(lái)越多。在培養(yǎng)計(jì)劃中，這門(mén)課程云計(jì)算、大數(shù)據(jù)方向的核心課程。（二）課程目標(biāo)本課程學(xué)生通過(guò)聽(tīng)課、參與課堂互動(dòng)、完成課后作業(yè)，學(xué)生將能夠：掌握大數(shù)據(jù)的基本概念、原理和應(yīng)用。培養(yǎng)對(duì)大數(shù)據(jù)應(yīng)用價(jià)值的認(rèn)識(shí)和興趣，激發(fā)學(xué)習(xí)動(dòng)力。梳理知識(shí)脈絡(luò)，掌握核心思想，形成系統(tǒng)化的知識(shí)框架。培養(yǎng)學(xué)生細(xì)致縝密的工作態(tài)度和團(tuán)結(jié)協(xié)作精神。課程目標(biāo)：1.掌握大數(shù)據(jù)的基本概念，了解背景、動(dòng)力和發(fā)展趨勢(shì)；2.掌握離線大數(shù)據(jù)分析技術(shù)，即Hadoop；3.掌握在線大數(shù)據(jù)分析技術(shù)，即Spark。思政目標(biāo)：1.理解課程知識(shí)的內(nèi)涵和價(jià)值，培養(yǎng)學(xué)生創(chuàng)新能力和課程知識(shí)綜合運(yùn)用能力，訓(xùn)練邏輯思維、辯證思維以及發(fā)現(xiàn)問(wèn)題、分析問(wèn)題與解決問(wèn)題的能力，掌握科學(xué)的思維方法，培養(yǎng)全局觀念和大局意識(shí)；2.培養(yǎng)嚴(yán)謹(jǐn)求實(shí)、一絲不茍、愛(ài)崗敬業(yè)、無(wú)私奉獻(xiàn)的工作作風(fēng)和良好的職業(yè)素養(yǎng)；培養(yǎng)團(tuán)隊(duì)合作精神和溝通能力以及勇于探索、實(shí)事求是的實(shí)踐精神。3.培養(yǎng)學(xué)生的民族自豪感與文化認(rèn)同感，踐行文化自信，培養(yǎng)學(xué)生團(tuán)結(jié)合作、激發(fā)學(xué)生學(xué)習(xí)強(qiáng)國(guó)的熱情，引導(dǎo)學(xué)生樹(shù)立正確的人生觀、價(jià)值觀和理想信念。二、課程目標(biāo)達(dá)成的途徑與方法以課堂教學(xué)為主，結(jié)合自學(xué)、課堂討論、課外作業(yè)、小組大作業(yè)等。課程目標(biāo)課程目標(biāo)內(nèi)容支撐畢業(yè)要求指標(biāo)點(diǎn)目標(biāo)達(dá)成的途徑與方法教學(xué)內(nèi)容課程目標(biāo)1掌握大數(shù)據(jù)的基本概念，了解背景和動(dòng)力、發(fā)展趨勢(shì)；指標(biāo)點(diǎn)1.1：能將數(shù)學(xué)、自然科學(xué)、計(jì)算機(jī)科學(xué)與技術(shù)基礎(chǔ)和專(zhuān)業(yè)知識(shí)用于對(duì)復(fù)雜工程問(wèn)題的合理定義和恰當(dāng)表述中。課堂講授課堂討論實(shí)驗(yàn)課外作業(yè)第1章大數(shù)據(jù)概念課程目標(biāo)2掌握離線大數(shù)據(jù)分析技術(shù)指標(biāo)點(diǎn)5.1：了解計(jì)算機(jī)領(lǐng)域常用的軟硬件設(shè)計(jì)及開(kāi)發(fā)工具、開(kāi)發(fā)環(huán)境、模擬軟件和設(shè)備的使用原理和方法，并理解其適用范圍和局限性。課堂講授課堂討論實(shí)驗(yàn)課外作業(yè)第2章Hadoop架構(gòu)，技術(shù)原理第3章MapReduce計(jì)算第4章Hive云數(shù)據(jù)倉(cāng)庫(kù)課程目標(biāo)3掌握在線大數(shù)據(jù)分析技術(shù)指標(biāo)點(diǎn)5.2：能夠針對(duì)具體的問(wèn)題，選用或開(kāi)發(fā)滿足特定需求的計(jì)算機(jī)軟硬件工具和設(shè)備，利用合適的信息資源，對(duì)復(fù)雜工程問(wèn)題進(jìn)行分析、計(jì)算、設(shè)計(jì)、模擬和預(yù)測(cè)，并能夠分析其局限性。課堂講授課堂討論3.實(shí)驗(yàn)4.課外作業(yè)第5章Spark計(jì)算三、課程目標(biāo)與相關(guān)畢業(yè)要求的對(duì)應(yīng)關(guān)系課程目標(biāo)課程目標(biāo)對(duì)畢業(yè)要求的支撐程度（H、M、L）畢業(yè)要求1畢業(yè)要求5課程目標(biāo)1L課程目標(biāo)2H課程目標(biāo)3M注：1.支撐強(qiáng)度分別填寫(xiě)H、M或L（其中H表示支撐程度高、M為中等、L為低）。四、課程主要內(nèi)容與基本要求大數(shù)據(jù)概念1.1大數(shù)據(jù)概念、背景和動(dòng)力1.2大數(shù)據(jù)發(fā)展趨勢(shì)1.3課程地位、任務(wù)、基本要求基本要求：掌握大數(shù)據(jù)基本概念，理解大數(shù)據(jù)的處理流程，了解大數(shù)據(jù)在行業(yè)中的應(yīng)用和未來(lái)趨勢(shì)。結(jié)合國(guó)家戰(zhàn)略，讓學(xué)生認(rèn)識(shí)到大數(shù)據(jù)技術(shù)對(duì)于國(guó)家經(jīng)濟(jì)發(fā)展的重要意義。Hadoop架構(gòu)，技術(shù)原理2.1大數(shù)據(jù)處理架構(gòu)Hadoop2.2Hadoop發(fā)展歷程、版本演變、生態(tài)系統(tǒng)2.3Hadoop的安裝和使用方法基本要求：了解Hadoop的發(fā)展歷程，掌握Hadoop的安裝和使用方法。具備操作Hadoop的能力。介紹Hadoop的創(chuàng)新思維，歷代科學(xué)家的巨大貢獻(xiàn)，培養(yǎng)學(xué)生科學(xué)探索精神。MapReduce計(jì)算3.1概述、工作流程、實(shí)例分析、具體應(yīng)用3.2MapReduce編程實(shí)踐基本要求：掌握MapReduce的基本原理、架構(gòu)以及工作機(jī)制，具備MapReduce的編程能力。引導(dǎo)學(xué)生通過(guò)MapReduce在知名平臺(tái)應(yīng)用實(shí)例，促進(jìn)科技與社會(huì)發(fā)展相結(jié)合。Hive云數(shù)據(jù)倉(cāng)庫(kù)4.1Hive云數(shù)據(jù)倉(cāng)庫(kù)4.2Hive編程實(shí)踐基本要求：了解Hive的數(shù)據(jù)模型、構(gòu)架與組件。具備Hive操作編程能力。讓學(xué)生了解Hive在社會(huì)發(fā)展中的作用，增強(qiáng)服務(wù)社會(huì)的意識(shí)。Spark計(jì)算5.1Spark概述、生態(tài)系統(tǒng)、運(yùn)行架構(gòu)、部署方式5.2Spark編程實(shí)踐基本要求：掌握Spark的原理以及能夠使用Spark框架做數(shù)據(jù)處理。強(qiáng)調(diào)在線數(shù)據(jù)分析在國(guó)家信息化建設(shè)和智能化社會(huì)轉(zhuǎn)型中的作用，培養(yǎng)學(xué)生的社會(huì)責(zé)任感和創(chuàng)新意識(shí)。五、課程學(xué)時(shí)安排章節(jié)號(hào)教學(xué)內(nèi)容學(xué)時(shí)數(shù)學(xué)生任務(wù)對(duì)應(yīng)課程目標(biāo)第1章1.1大數(shù)據(jù)概念、背景和動(dòng)力1.2大數(shù)據(jù)發(fā)展趨勢(shì)1.3課程地位、任務(wù)、基本要求2課前自學(xué)大數(shù)據(jù)發(fā)展現(xiàn)狀和趨勢(shì)完成基本概念作業(yè)課程目標(biāo)1第2章2.1大數(shù)據(jù)處理架構(gòu)Hadoop2.2Hadoop發(fā)展歷程、版本演變、生態(tài)系統(tǒng)2.3Hadoop的安裝和使用方法2課前了解Hadoop相關(guān)基本內(nèi)容完成Hadoop的安裝課程目標(biāo)2第3章3.1概述、工作流程、實(shí)例分析、具體應(yīng)用、3.2MapReduce編程實(shí)踐8(2)課前了解MapReduce基本功能完成MapReduce作業(yè)課程目標(biāo)2第4章4.1Hive云數(shù)據(jù)倉(cāng)庫(kù)4.2Hiv編程實(shí)踐12(4)課前自學(xué)Hive相關(guān)功能完成Hive作業(yè)課程目標(biāo)2第5章5.1Spark概述、生態(tài)系統(tǒng)、運(yùn)行架構(gòu)、部署方式5.2Spark編程實(shí)踐16(6)課前了解Spark相關(guān)功能完成Spark作業(yè)課程目標(biāo)3六、實(shí)踐環(huán)節(jié)及基本要求序號(hào)實(shí)驗(yàn)項(xiàng)目名稱(chēng)學(xué)時(shí)基本要求學(xué)生任務(wù)實(shí)驗(yàn)性質(zhì)實(shí)驗(yàn)類(lèi)別1分布式并行編程模型MapReduce2掌握MapReduce基本使用方法利用系統(tǒng)的集成環(huán)境菜單操作或正確輸入命令并得到結(jié)果驗(yàn)證必做2Hive實(shí)驗(yàn)12掌握Hive的基本語(yǔ)法正確輸入命令并得到結(jié)果驗(yàn)證必做3Hive實(shí)驗(yàn)22掌握Hive的編程方法編程驗(yàn)證必做4SPARK實(shí)驗(yàn)12掌握SPARK的基本使用技巧正確輸入命令并得到結(jié)果驗(yàn)證必做5SPARK實(shí)驗(yàn)22編寫(xiě)SPARK基本應(yīng)用程序編程驗(yàn)證必做6大數(shù)據(jù)的應(yīng)用2編寫(xiě)綜合應(yīng)用程序編程綜合必做注：1.實(shí)驗(yàn)性質(zhì)指演示性、驗(yàn)證性、設(shè)計(jì)性、綜合性等；2.實(shí)驗(yàn)類(lèi)別指必做、選做等。七、考核方式及成績(jī)?cè)u(píng)定考核內(nèi)容考核方式評(píng)定標(biāo)準(zhǔn)（依據(jù)）占總成績(jī)比例過(guò)程考核含到課率、課堂討論發(fā)言、平時(shí)課堂作業(yè)、平時(shí)實(shí)驗(yàn)等點(diǎn)名記錄、討論發(fā)言記錄作業(yè)批改成績(jī)50%期末考核考試或大作業(yè)卷面成績(jī)、大作業(yè)批改成績(jī)50%考核類(lèi)別考查成績(jī)登記方式百分制或五級(jí)制八、推薦教材與主要參考書(shū)（一）推薦教材：大數(shù)據(jù)技術(shù)原理與應(yīng)用，林子雨，人民郵電出版社，2024年8月，第4版（二）主要參考書(shū)：1.S