1、大數(shù)據(jù)技術(shù)導(dǎo)論課程教學(xué)大綱Instruction of Big Data Technology一、課程基本情況課程編號：課程類別：專業(yè)任選課課程學(xué)分：2 學(xué)分課程總學(xué)時：32 學(xué)時，其中講課： 20 學(xué)時，實(shí)驗(yàn)（含上機(jī)）： 12 學(xué)時課程性質(zhì)：考試開課學(xué)期：第 3 學(xué)期先修課程：大學(xué)生計(jì)算機(jī)基礎(chǔ)適用專業(yè)：計(jì)算機(jī)應(yīng)用技術(shù)開課單位： 計(jì)算機(jī)科學(xué)與技術(shù)學(xué)院二、課程性質(zhì)、教學(xué)目標(biāo)和任務(wù)本課程設(shè)置的目的是通過對Hadoop,HDFS,MapReduce,HBase,R養(yǎng)學(xué)生有較強(qiáng)數(shù)據(jù)開發(fā)能力打下良好基礎(chǔ)。三、教學(xué)內(nèi)容和要求1.概論（4 學(xué)時）了解大數(shù)據(jù)技術(shù)產(chǎn)生的歷史必然；理解大數(shù)據(jù)的特征；理解大數(shù)據(jù)生命

2、周期；理解大數(shù)據(jù)、云計(jì)算、物聯(lián)網(wǎng)之間的相互關(guān)系；了解大數(shù)據(jù)的變革；熟練掌握Linux了解Linux熟練使用viLinux重點(diǎn)：linux難點(diǎn)：大數(shù)據(jù)生命周期。2.大數(shù)據(jù)生態(tài)系統(tǒng)（4 學(xué)時）掌握HDFS掌握HDFS掌握HDFS掌握MapReduce理解Map理解MapReduce了解zookeeper目的：通過上述知識的學(xué)習(xí)，使學(xué)生了解大數(shù)據(jù)生態(tài)系統(tǒng)疾病組件，掌握HDFS MapReduce工作原理，并進(jìn)行相應(yīng)的操作。重點(diǎn)：HDFS 工作原理和讀寫過程； 難點(diǎn)：MapReduce 編程。大數(shù)據(jù)采集與預(yù)處理）理解數(shù)據(jù)及其分類；了解數(shù)據(jù)采集方法和工具；掌握數(shù)據(jù)清洗的任務(wù)和作用；掌握數(shù)據(jù)變換的種類和過

3、程；熟練PythonPython重點(diǎn)：Python 爬蟲； 難點(diǎn)：Python 爬蟲。大數(shù)據(jù)庫）理解NoSQLNewSQL；理解批量處理技術(shù)；了解流計(jì)算原理；了解圖計(jì)算原理；了解查詢分析計(jì)算原理；掌握HBASE熟練HBASE shell目的：通過上述知識的學(xué)習(xí)，使學(xué)生理解NoSQL 與 NewSQL，掌握 HBASE 模型和基本操作。重點(diǎn)：HBASE shell 操作； 難點(diǎn)：理解NoSQLNewSQL大數(shù)據(jù)分析）了解數(shù)據(jù)分析的原則、特點(diǎn)；掌握大數(shù)據(jù)分析流程；理解數(shù)據(jù)認(rèn)知的基本方法；掌握特征工程的作用和基本方法；掌握數(shù)據(jù)建模的常用方法了解通用計(jì)算引擎Spark掌握hive目的：通過上述知識的學(xué)習(xí)，使學(xué)生掌握大數(shù)據(jù)分析流程和相關(guān)技術(shù)； 重點(diǎn)：hive 的數(shù)據(jù)分析方法；難點(diǎn)：數(shù)據(jù)建模。大數(shù)