統(tǒng)計(jì)預(yù)測(cè)與決策課程教學(xué)大綱（StatisticalForecastingAndDecisionMaking）一、課程概況課程代碼：0806033學(xué)分：3學(xué)時(shí)：48先修課程：數(shù)學(xué)分析、概率論與數(shù)理統(tǒng)計(jì)、統(tǒng)計(jì)學(xué)原理、應(yīng)用回歸分析適用專業(yè)：應(yīng)用統(tǒng)計(jì)學(xué)建議教材:《統(tǒng)計(jì)預(yù)測(cè)和決策》（第五版），徐國(guó)祥，上海財(cái)經(jīng)大學(xué)出版社，2016.1課程歸口：理學(xué)院課程的性質(zhì)與任務(wù)：本課程是應(yīng)用統(tǒng)計(jì)學(xué)專業(yè)的一門重要基礎(chǔ)課。本課程一方面為后繼課程提供所需的基礎(chǔ)，同時(shí)還為培養(yǎng)學(xué)生的獨(dú)立工作能力提供必要的訓(xùn)練。通過本課程的教學(xué)，培養(yǎng)學(xué)生的實(shí)際動(dòng)手能力，對(duì)大型社會(huì)調(diào)查的數(shù)據(jù)匯總、分組、整理能力，對(duì)基礎(chǔ)資料綜合定量分析、研究能力。學(xué)生學(xué)好這門課程的基本內(nèi)容和方法，對(duì)今后的學(xué)習(xí)、研究和應(yīng)用都具有關(guān)鍵性的作用。二、課程目標(biāo)目標(biāo)1.掌握統(tǒng)計(jì)預(yù)測(cè)的概念和作用，統(tǒng)計(jì)預(yù)測(cè)方法的分類和選擇，理解統(tǒng)計(jì)預(yù)測(cè)的步驟。了解定性預(yù)測(cè)概念，定性預(yù)測(cè)特點(diǎn)，定性預(yù)測(cè)和定量預(yù)測(cè)的關(guān)系，理解定性預(yù)測(cè)的主要方法。目標(biāo)2.掌握回歸預(yù)測(cè)法、時(shí)間序列分解法和趨勢(shì)外推法、時(shí)間序列平滑預(yù)測(cè)法、自適應(yīng)過濾法、平穩(wěn)時(shí)間序列預(yù)測(cè)法、干預(yù)分析模型預(yù)測(cè)法、景氣預(yù)測(cè)法及灰色預(yù)測(cè)法。目標(biāo)3.明確測(cè)定預(yù)測(cè)精度的方法，以及影響經(jīng)濟(jì)現(xiàn)象的可預(yù)測(cè)性的因素；同時(shí)，在實(shí)際預(yù)測(cè)過程中，綜合考慮各種預(yù)測(cè)方法選擇影響因素，選擇合適的預(yù)測(cè)方法，進(jìn)行研究。目標(biāo)4.掌握決策的基本概念、決策的分類方式、決策最終的一般步驟，及決策的公理、要作出正確決策時(shí)所應(yīng)遵循的基本原則。目標(biāo)5.掌握風(fēng)險(xiǎn)決策方法、貝葉斯決策方法、不確定型決策方法和多目標(biāo)決策法。本課程支撐專業(yè)培養(yǎng)計(jì)劃中畢業(yè)要求5-2（占該指標(biāo)點(diǎn)達(dá)成度的4%）、畢業(yè)要求6-1（占該指標(biāo)點(diǎn)達(dá)成度的7%）、畢業(yè)要求6-2（占該指標(biāo)點(diǎn)達(dá)成度的3%），畢業(yè)要求6-3（占該指標(biāo)點(diǎn)達(dá)成度的4%）、畢業(yè)要求7-3（占該指標(biāo)點(diǎn)達(dá)成度的6%），對(duì)應(yīng)關(guān)系如表所示。 畢業(yè)要求指標(biāo)點(diǎn)課程目標(biāo)目標(biāo)1目標(biāo)2目標(biāo)3目標(biāo)4目標(biāo)5畢業(yè)要求5-2√√√√√畢業(yè)要求6-1√√√畢業(yè)要求6-2√√√畢業(yè)要求6-3√√√畢業(yè)要求7-3√√√三、課程內(nèi)容及要求（一）統(tǒng)計(jì)預(yù)測(cè)概述1.教學(xué)內(nèi)容（1）統(tǒng)計(jì)預(yù)測(cè)的概念和作用。（2）統(tǒng)計(jì)預(yù)測(cè)方法的分類及選擇。（3）統(tǒng)計(jì)預(yù)測(cè)的原則與步驟。2.基本要求（1）根據(jù)統(tǒng)計(jì)預(yù)測(cè)的概念和作用，會(huì)選擇統(tǒng)計(jì)預(yù)測(cè)方法。（2）明確一個(gè)完整的統(tǒng)計(jì)預(yù)測(cè)所包含的一般步驟。3.思政內(nèi)容介紹統(tǒng)計(jì)學(xué)家的故事，學(xué)習(xí)他們嚴(yán)謹(jǐn)?shù)目茖W(xué)精神和工匠精神，弘揚(yáng)愛國(guó)主義精神。（二）定性預(yù)測(cè)法1.教學(xué)內(nèi)容（1）定性預(yù)測(cè)的概念和特點(diǎn)。（2）定性預(yù)測(cè)和定量預(yù)測(cè)之間的關(guān)系。（3）德爾菲法。（4）主觀概率法。（5）定性預(yù)測(cè)的其他方法。（6）情景預(yù)測(cè)法。2.基本要求（1）根據(jù)各種定性預(yù)測(cè)方法的特點(diǎn)、應(yīng)用條件和適用場(chǎng)合，結(jié)合具體的案例加以運(yùn)用。3.思政內(nèi)容理論結(jié)合實(shí)際，將理論用于實(shí)踐，解決生產(chǎn)生活中的實(shí)際問題。（三）回歸預(yù)測(cè)法1.教學(xué)內(nèi)容（1）一元線性回歸預(yù)測(cè)法。（2）多元線性回歸預(yù)測(cè)法。（3）非線性回歸預(yù)測(cè)法。（4）應(yīng)用回歸預(yù)測(cè)法應(yīng)注意的問題。2.基本要求（1）會(huì)運(yùn)用回歸預(yù)測(cè)法，并掌握回歸預(yù)測(cè)法的適用范圍和運(yùn)用該方法所應(yīng)注意的問題。（2）能熟練運(yùn)用常用的統(tǒng)計(jì)軟件對(duì)研究對(duì)象進(jìn)行回歸分析。3.思政內(nèi)容找尋事物發(fā)展的規(guī)律，掌握事物發(fā)展的趨勢(shì)，利用所學(xué)知識(shí)解決實(shí)際問題，做到學(xué)有所用。（四）時(shí)間序列分解法和趨勢(shì)外推法1.教學(xué)內(nèi)容（1）時(shí)間序列分解法。（2）趨勢(shì)外推法。（3）多項(xiàng)式曲線趨勢(shì)外推法。（4）指數(shù)曲線趨勢(shì)外推法。（5）生長(zhǎng)曲線趨勢(shì)外推法。（6）曲線擬合優(yōu)度分析。2.基本要求（1）依據(jù)時(shí)間序列分解法，并根據(jù)研究對(duì)象，通過圖形識(shí)別法和差分法選擇趨勢(shì)模型進(jìn)行預(yù)測(cè)。3.思政內(nèi)容辯證唯物主義認(rèn)為物質(zhì)世界是按照它本身所固有的規(guī)律運(yùn)動(dòng)、變化和發(fā)展的。（五）時(shí)間序列平滑預(yù)測(cè)1.教學(xué)內(nèi)容（1）一次移動(dòng)平均法。（2）一次指數(shù)平滑法。（3）線性二次移動(dòng)平均法。（4）線性二次指數(shù)平滑法。（5）二次曲線指數(shù)平滑法。（6）二次曲線指數(shù)平滑法。2.基本要求（1）能夠明確各種時(shí)間序列平滑預(yù)測(cè)方法的適用場(chǎng)合。（2）會(huì)選擇合適的時(shí)間序列平滑預(yù)測(cè)模型進(jìn)行預(yù)測(cè)分析。3.思政內(nèi)容培養(yǎng)學(xué)生的探索精神，遇到困難要嘗試不同的方法，最終會(huì)有一個(gè)較好的解決途徑。（六）自適應(yīng)過濾法1.教學(xué)內(nèi)容（1）自適應(yīng)過濾法概述及應(yīng)用。（2）電子計(jì)算機(jī)在自適應(yīng)過濾法中的應(yīng)用。2.基本要求（1）根據(jù)自適應(yīng)過濾法的概述，會(huì)對(duì)其進(jìn)行應(yīng)用。（2）會(huì)運(yùn)用電子計(jì)算機(jī)對(duì)自適應(yīng)過濾法進(jìn)行應(yīng)用。3.思政內(nèi)容引入計(jì)算機(jī)科學(xué)家的故事，學(xué)習(xí)他們嚴(yán)謹(jǐn)?shù)目茖W(xué)態(tài)度。（七）平穩(wěn)時(shí)間序列預(yù)測(cè)法1.教學(xué)內(nèi)容（1）平穩(wěn)時(shí)間序列預(yù)測(cè)法概述。（2）時(shí)間序列的自相關(guān)分析。（3）單位根檢驗(yàn)和協(xié)整檢驗(yàn)。（4）ARMA模型的建模。（5）時(shí)間序列的案例分析。2.基本要求（1）理解平穩(wěn)時(shí)間序列預(yù)測(cè)法概述。會(huì)運(yùn)用時(shí)間序列的自相關(guān)分析、單位根檢驗(yàn)和協(xié)整檢驗(yàn)、ARMA模型的建模。（2）會(huì)對(duì)時(shí)間序列的案例進(jìn)行分析。3.思政內(nèi)容找尋事物發(fā)展的規(guī)律，掌握事物發(fā)展的趨勢(shì)，利用所學(xué)知識(shí)解決實(shí)際問題，做到學(xué)有所用。（八）干預(yù)分析模型預(yù)測(cè)法1.教學(xué)內(nèi)容（1）干預(yù)分析模型概述。（2）單變量干預(yù)分析模型的識(shí)別與估計(jì)。（3）干預(yù)分析模型的應(yīng)用實(shí)例。2.基本要求（1）掌握單變量干預(yù)分析模型的識(shí)別與估計(jì)。3.思政內(nèi)容培養(yǎng)學(xué)生多角度思考問題，面對(duì)生活和學(xué)習(xí)中的干擾或干預(yù)能夠有效應(yīng)對(duì)。（九）景氣預(yù)測(cè)法1.教學(xué)內(nèi)容（1）景氣循環(huán)描述。（2）景氣指標(biāo)體系。（3）擴(kuò)散指數(shù)和合成指數(shù)。2.基本要求（1）會(huì)用景氣預(yù)測(cè)法。3.思政內(nèi)容理論結(jié)合實(shí)際，將理論用于實(shí)踐，解決生產(chǎn)生活中的實(shí)際問題。（十）灰色預(yù)測(cè)法1.教學(xué)內(nèi)容（1）灰色預(yù)測(cè)理論。（2）GM(1,1)模型。（3）GM(1,1)殘差模型及GM(n,h)模型。2.基本要求（1）理解并掌握灰色預(yù)測(cè)理論并應(yīng)用其解決簡(jiǎn)單實(shí)際問題。3.思政內(nèi)容理論結(jié)合實(shí)際，將理論用于實(shí)踐，解決生產(chǎn)生活中的實(shí)際問題。（十一）預(yù)測(cè)精度測(cè)定與預(yù)測(cè)評(píng)價(jià)1.教學(xué)內(nèi)容（1）預(yù)測(cè)精度測(cè)定。（2）定量預(yù)測(cè)方法的比較。（3）定性預(yù)測(cè)與定量預(yù)測(cè)的綜合運(yùn)用。2.基本要求（1）明確測(cè)定預(yù)測(cè)精度的方法，以及影響經(jīng)濟(jì)現(xiàn)象的可預(yù)測(cè)性的因素。（2）在實(shí)際預(yù)測(cè)過程中，綜合考慮各種預(yù)測(cè)方法選擇影響因素，最終選擇合適的預(yù)測(cè)方法，進(jìn)行研究。3.思政內(nèi)容理論結(jié)合實(shí)際，將理論用于實(shí)踐，解決生產(chǎn)生活中的實(shí)際問題。（十二）統(tǒng)計(jì)決策概述1.教學(xué)內(nèi)容（1）決策的概念和種類。（2）決策的作用和步驟。（3）決策的公理與原則。2.基本要求（1）掌握決策的基本概念、決策的分類方式、決策的一般步驟，及決策的公理、要作出正確決策時(shí)所應(yīng)遵循的基本原則。3.思政內(nèi)容引入中國(guó)歷史上的決策案例，如田忌賽馬的分配決策。弘揚(yáng)中華優(yōu)秀傳統(tǒng)文化，建立民族文化自信。（十三）風(fēng)險(xiǎn)型決策方法1.教學(xué)內(nèi)容（1）風(fēng)險(xiǎn)型決策的基本問題。（2）不同標(biāo)準(zhǔn)的決策方法。（3）決策樹。（4）風(fēng)險(xiǎn)決策的敏感性分析。（5）完全信息價(jià)值。（6）效用概率決策方法。（7）連續(xù)型變量的風(fēng)險(xiǎn)型決策方法。（8）馬爾科夫決策方法。2.基本要求（1）掌握各種風(fēng)險(xiǎn)型決策方法，并運(yùn)用這些方法解決相應(yīng)的決策問題。3.思政內(nèi)容通過實(shí)際案例，樹立崇尚自然、尊重自然的理念。（十四）貝葉斯決策方法1.教學(xué)內(nèi)容（1）貝葉斯決策概述。（2）貝葉斯決策方法的類型和應(yīng)用。2.基本要求（1）掌握貝葉斯決策的基本概念，明確這種決策方法的優(yōu)缺點(diǎn)，并能貝葉斯決策方法進(jìn)行決策分析。3.思政內(nèi)容理論結(jié)合實(shí)際，將理論用于實(shí)踐，解決生產(chǎn)生活中的實(shí)際問題。（十五）不確定型決策方法1.教學(xué)內(nèi)容（1）“好中求好”決策方法。（2）“壞中求好”決策方法。（3）系數(shù)決策方法。（4）“最小的最大后悔值”決策方法。（5）各種決策方法的比較和選擇。2.基本要求（1）掌握各種不確定型決策方法準(zhǔn)則，并能根據(jù)實(shí)際情況，選擇合適的決策方案。3.思政內(nèi)容引導(dǎo)學(xué)生積極對(duì)待生活，樹立正確的世界觀、人生觀、價(jià)值觀。（十六）多目標(biāo)決策法1.教學(xué)內(nèi)容（1）多目標(biāo)決策概述。（2）層次分析法。（3）多屬性效用決策法。（4）優(yōu)劣系數(shù)法。（5）模糊決策法。2.基本要求（1）明確處理多目標(biāo)問題所應(yīng)遵循的原則，并掌握處理多目標(biāo)問題的各種決策方法。3.思政內(nèi)容引導(dǎo)學(xué)生堅(jiān)定理想信念，踐行社會(huì)主義核心價(jià)值觀。面對(duì)社會(huì)的各種誘惑時(shí)，要做出有利于國(guó)家和人民的正確選擇。教學(xué)內(nèi)容與課程目標(biāo)的對(duì)應(yīng)關(guān)系及學(xué)時(shí)分配如表所示。序號(hào)教學(xué)內(nèi)容支撐的課程目標(biāo)支撐的畢業(yè)要求指標(biāo)點(diǎn)講授學(xué)時(shí)1統(tǒng)計(jì)預(yù)測(cè)概述目標(biāo)15-222定性預(yù)測(cè)法目標(biāo)25-2、6-1、6-3、7-333回歸預(yù)測(cè)法目標(biāo)25-2、6-1、6-3、7-334時(shí)間序列分解法和趨勢(shì)外推法目標(biāo)25-2、6-1、6-3、7-355時(shí)間序列平滑預(yù)測(cè)法目標(biāo)25-2、6-1、6-3、7-346自適應(yīng)過濾法、平穩(wěn)時(shí)間序列預(yù)測(cè)法目標(biāo)25-2、6-1、6-3、7-337干預(yù)分析模型預(yù)測(cè)法、景氣預(yù)測(cè)法目標(biāo)25-2、6-1、6-3、7-338灰色預(yù)測(cè)法目標(biāo)25-2、6-1、6-3、7-339預(yù)測(cè)精度測(cè)定與預(yù)測(cè)評(píng)價(jià)目標(biāo)35-2、6-1、6-2、6-3、7-3310統(tǒng)計(jì)決策概述目標(biāo)45-2311風(fēng)險(xiǎn)型決策方法目標(biāo)55-2、6-1、6-3、7-3512貝葉斯決策方法目標(biāo)55-2、6-1、6-3、7-3513不確定型決策方法目標(biāo)55-2、6-1、6-3、7-3314多目標(biāo)決策方法目標(biāo)55-2、6-1、6-3、7-33合計(jì)48四、課程實(shí)施（一）注重培養(yǎng)學(xué)生的邏輯推理能力，逐漸讓學(xué)生理解和掌握各種預(yù)測(cè)的特點(diǎn)、應(yīng)用特點(diǎn)、適用場(chǎng)合，并能將具體的預(yù)測(cè)方法應(yīng)用到市場(chǎng)經(jīng)濟(jì)實(shí)踐中。（二）以教師課堂講授為主，教師課前對(duì)講授內(nèi)容進(jìn)行精心準(zhǔn)備，充分利用多媒體等現(xiàn)代化教學(xué)手段，并輔之以大量的實(shí)例，將統(tǒng)計(jì)預(yù)測(cè)的基本概念、原理、方法講清、講透。同時(shí)課堂中注重例題的講解及適當(dāng)?shù)乃伎碱}練習(xí)，確保課程進(jìn)度正常進(jìn)行，并及時(shí)關(guān)注學(xué)生掌握程度和課堂氣氛。（三）主要教學(xué)環(huán)節(jié)的質(zhì)量要求如表所示。主要教學(xué)環(huán)節(jié)質(zhì)量要求1備課（1）掌握本課程教學(xué)大綱內(nèi)容，嚴(yán)格按照教學(xué)大綱要求進(jìn)行課程教學(xué)內(nèi)容的組織。（2）熟悉教材各章節(jié)，借助專業(yè)書籍資料，并依據(jù)教學(xué)大綱編寫授課計(jì)劃，編寫每次授課的教案。教案內(nèi)容包括章節(jié)標(biāo)題、教學(xué)目的、教法設(shè)計(jì)、課堂類型、時(shí)間分配、授課內(nèi)容、課后作業(yè)、教學(xué)效果分析等方面。（3）根據(jù)各部分教學(xué)內(nèi)容，構(gòu)思授課思路、技巧，選擇合適的教學(xué)方法。2講授（1）要點(diǎn)準(zhǔn)確、推理正確、條理清晰、重點(diǎn)突出，能夠理論聯(lián)系實(shí)際，熟練地解答和講解例題。（2）采用多種教學(xué)方式（如啟發(fā)式教學(xué)、案例分析教學(xué)、討論式教學(xué)、多媒體示范教學(xué)等），注重培養(yǎng)學(xué)生發(fā)現(xiàn)、分析和解決問題的能力。（3）能夠采用現(xiàn)代信息技術(shù)輔助教學(xué)。（4）表達(dá)方式應(yīng)能便于學(xué)生理解、接受，力求形象生動(dòng)，使學(xué)生在掌握知識(shí)的過程中，保持較為濃厚的學(xué)習(xí)興趣。3作業(yè)布置與批改學(xué)生必須完成規(guī)定數(shù)量的作業(yè)，作業(yè)必須達(dá)到以下基本要求：（1）按時(shí)按量完成作業(yè)，不缺交，不抄襲。（2）書寫規(guī)范、清晰。（3）解題方法和步驟正確。教師批改和講評(píng)作業(yè)要求如下：（1）學(xué)生的作業(yè)要按時(shí)全部批改，并及時(shí)進(jìn)行講評(píng)。（2）教師批改和講評(píng)作業(yè)要認(rèn)真、細(xì)致，按百分制評(píng)定成績(jī)并寫明日期。（3）學(xué)生作業(yè)的平均成績(jī)應(yīng)作為本課程總評(píng)成績(jī)中平時(shí)成績(jī)的重要組成部分。4課外答疑為了解學(xué)生的學(xué)習(xí)情況，幫助學(xué)生更好地理解和消化所學(xué)知識(shí)、改進(jìn)學(xué)習(xí)方法和思維方式，培養(yǎng)其獨(dú)立思考問題的能力，任課教師需每周安排一定時(shí)間進(jìn)行課外答疑與輔導(dǎo)。5成績(jī)考核本課程考核的方式為閉卷筆試?？荚嚥扇〗炭挤蛛x，監(jiān)考由學(xué)院統(tǒng)一安排。有下列情況之一者，總評(píng)成績(jī)?yōu)椴患案瘢海?）缺交作業(yè)次數(shù)達(dá)1/3以上者。（2）缺課次數(shù)達(dá)本學(xué)期總授課學(xué)時(shí)的1/3以上者。五、考核方式（一）課程考核包括期末考試、平時(shí)及作業(yè)情況考核和實(shí)驗(yàn)考核，期末考試采用閉卷筆試。（二）課程成績(jī)=平時(shí)作業(yè)×30%+考勤及課堂練習(xí)×20%+期末考試成績(jī)×50%。具體內(nèi)容和比例如表所示。成績(jī)組成考核/評(píng)價(jià)環(huán)節(jié)權(quán)重考核/評(píng)價(jià)細(xì)則對(duì)應(yīng)的畢業(yè)要求指標(biāo)點(diǎn)平時(shí)成績(jī)平時(shí)作業(yè)30%課后完成20-30個(gè)習(xí)題，主要考核學(xué)生對(duì)每節(jié)課知識(shí)點(diǎn)的復(fù)習(xí)、理解和掌握程度，計(jì)算全部作業(yè)的平均成績(jī)?cè)侔?0%計(jì)入總成績(jī)。5-2、6-1、7-3考勤及課堂練習(xí)20%以隨機(jī)的形式，在每章內(nèi)容進(jìn)行中或結(jié)束后，隨堂測(cè)試1-3題，主要考核學(xué)生課堂的聽課效果和課后及時(shí)復(fù)習(xí)消化本章知識(shí)的能力，結(jié)合平時(shí)考勤，最后按20%計(jì)入課程總成績(jī)。5-2、6-1期末考試期末考試卷面成績(jī)50%試卷題型包括填空題、選擇題、計(jì)算題和證明題等，以卷面成績(jī)的50%計(jì)入課程總成績(jī)。5-1、6-1、6-26-3注：考核環(huán)節(jié)應(yīng)體現(xiàn)公平、誠(chéng)信，如有抄襲作業(yè)、考核作弊等行為，總評(píng)成績(jī)記為不合格。（三）每個(gè)課程目標(biāo)達(dá)成度計(jì)算方法如下：式中：Ai=平時(shí)作業(yè)占總評(píng)成績(jī)的權(quán)重×課程目標(biāo)i在平時(shí)成績(jī)中的權(quán)重，Bi=考勤及課堂表現(xiàn)占總評(píng)成績(jī)的權(quán)重×課程目標(biāo)i在期末成績(jī)中的權(quán)重，Ci=期末成績(jī)占總評(píng)成績(jī)的權(quán)重×課程目標(biāo)i在期末成績(jī)中的權(quán)重。六、有關(guān)說明（一）持續(xù)改進(jìn)本課程根據(jù)學(xué)生作業(yè)、課堂討論、平時(shí)考核情況和學(xué)生、教學(xué)督導(dǎo)等的反饋，及時(shí)對(duì)教學(xué)中的不足之處進(jìn)行改進(jìn)，并在下一輪課程教學(xué)中整改完善，確保相應(yīng)畢業(yè)要求指標(biāo)點(diǎn)達(dá)成。參考書目及學(xué)習(xí)資料1．徐國(guó)祥．統(tǒng)計(jì)預(yù)測(cè)和決策學(xué)習(xí)指導(dǎo)與習(xí)題．上海財(cái)經(jīng)大學(xué)出版社，20052．暴奉賢，陳宏立．經(jīng)濟(jì)預(yù)測(cè)與決策方法．暨南大學(xué)出版社，20083．馮方權(quán)．經(jīng)濟(jì)預(yù)測(cè)與決策技術(shù)．武漢大學(xué)出版社，2008大數(shù)據(jù)采集與預(yù)處理課程教學(xué)大綱（BigDataCollectionandPreprocessing）一、課程概況課程代碼：0806034學(xué)分：2學(xué)時(shí)：32（其中：講授學(xué)時(shí)20）先修課程：數(shù)學(xué)分析、高等代數(shù)與解析幾何、數(shù)據(jù)科學(xué)導(dǎo)論、概率論、程序設(shè)計(jì)語言、數(shù)據(jù)庫(kù)原理、概率論與數(shù)理統(tǒng)計(jì)、適用專業(yè)：應(yīng)用統(tǒng)計(jì)學(xué)建議教材：《大數(shù)據(jù)采集與預(yù)處理技術(shù)》，劉麗敏，廖志芳，周筠編著，中南大學(xué)出版社，2020.1課程歸口：理學(xué)院課程的性質(zhì)與任務(wù)：大數(shù)據(jù)采集與預(yù)處理是數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)的專業(yè)課程。本課程以數(shù)據(jù)的采集與預(yù)處理為主要內(nèi)容，通過講述大數(shù)據(jù)的概念和關(guān)鍵技術(shù)、大數(shù)據(jù)采集基礎(chǔ)知識(shí)、常用大數(shù)據(jù)采集架構(gòu)、大數(shù)據(jù)遷移技術(shù)、互聯(lián)網(wǎng)數(shù)據(jù)的抓取與處理技術(shù)、數(shù)據(jù)預(yù)處理等技術(shù)，為數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)的本科生搭建起大數(shù)據(jù)的知識(shí)架構(gòu)，闡述大數(shù)據(jù)采集和數(shù)據(jù)預(yù)處理的基本原理，開展相關(guān)的初級(jí)實(shí)踐，為學(xué)生在大數(shù)據(jù)以及相關(guān)領(lǐng)域的學(xué)習(xí)奠定重要的基礎(chǔ)。課程目標(biāo)目標(biāo)1.了解大數(shù)據(jù)的整體架構(gòu)，能解釋相關(guān)的專業(yè)術(shù)語形成對(duì)大數(shù)據(jù)關(guān)鍵技術(shù)的總體認(rèn)識(shí)。目標(biāo)2.掌握傳統(tǒng)數(shù)據(jù)采集技術(shù)和大數(shù)據(jù)采集技術(shù)，形成大數(shù)據(jù)采集技術(shù)的初步認(rèn)識(shí)。目標(biāo)3.掌握大數(shù)據(jù)采集架構(gòu)，包括Chukwa、Flume、Scrible以及ApacheKafka等，了解針對(duì)日志系統(tǒng)的采集方法。目標(biāo)4.通過學(xué)習(xí)基于存儲(chǔ)的數(shù)據(jù)遷移、基于主機(jī)邏輯卷的遷移、基于數(shù)據(jù)庫(kù)的遷移和服務(wù)器虛擬化數(shù)據(jù)遷移等掌握大數(shù)據(jù)遷移技術(shù)，了解針對(duì)系統(tǒng)數(shù)據(jù)來源復(fù)雜、數(shù)據(jù)量大的企業(yè)數(shù)據(jù)的采集方法。目標(biāo)5.掌握互聯(lián)網(wǎng)數(shù)據(jù)抓取與處理技術(shù)，會(huì)根據(jù)實(shí)際問題進(jìn)行互聯(lián)網(wǎng)數(shù)據(jù)的爬蟲技術(shù)以及分詞技術(shù)。目標(biāo)6.熟練掌握數(shù)據(jù)預(yù)處理技術(shù)，包括數(shù)據(jù)的描述以及數(shù)據(jù)清洗、數(shù)據(jù)集成、數(shù)據(jù)變換和數(shù)據(jù)歸約等相關(guān)算法和技術(shù)。本課程支撐專業(yè)培養(yǎng)計(jì)劃中畢業(yè)要求3-2（占該指標(biāo)點(diǎn)達(dá)成度的10%）、畢業(yè)要求4-1（占該指標(biāo)點(diǎn)達(dá)成度的5%）和畢業(yè)要求5-3（占該指標(biāo)點(diǎn)達(dá)成度的4%；），對(duì)應(yīng)關(guān)系如表所示。 畢業(yè)要求指標(biāo)點(diǎn)課程目標(biāo)目標(biāo)1目標(biāo)2目標(biāo)3目標(biāo)4目標(biāo)5目標(biāo)6畢業(yè)要求3-2√畢業(yè)要求4-1√畢業(yè)要求5-3√三、課程內(nèi)容及要求（一）大數(shù)據(jù)概述1.教學(xué)內(nèi)容（1）大數(shù)據(jù)的概念。（2）大數(shù)據(jù)關(guān)鍵技術(shù)。（3）大數(shù)據(jù)采集與數(shù)據(jù)預(yù)處理技術(shù)。2.基本要求（1）了解大數(shù)據(jù)的整體架構(gòu)，了解大數(shù)據(jù)相關(guān)術(shù)語。（2）形成對(duì)大數(shù)據(jù)關(guān)鍵技術(shù)的總體認(rèn)識(shí)。3.思政元素通過對(duì)大數(shù)據(jù)概念以及關(guān)鍵技術(shù)的基本學(xué)習(xí)，理解數(shù)據(jù)的價(jià)值，收集處理有利用價(jià)值的信息，為我所用。（二）數(shù)據(jù)采集基礎(chǔ)1.教學(xué)內(nèi)容（1）傳統(tǒng)數(shù)據(jù)采集技術(shù)：數(shù)據(jù)采集系統(tǒng)架構(gòu)、數(shù)據(jù)采集關(guān)鍵技術(shù)。（2）大數(shù)據(jù)采集基礎(chǔ)：數(shù)據(jù)的發(fā)展、大數(shù)據(jù)來源、大數(shù)據(jù)采集技術(shù)。2.基本要求（1）了解傳統(tǒng)數(shù)據(jù)采集辦法，以及傳統(tǒng)數(shù)據(jù)采集技術(shù)的局限性。（2）了解并掌握現(xiàn)代大數(shù)據(jù)采集技術(shù)。3.思政元素科學(xué)技術(shù)的快速發(fā)展使得新老技術(shù)迭代加快，只有不斷學(xué)習(xí)，才能能有效地進(jìn)行科學(xué)研究。（三）大數(shù)據(jù)采集架構(gòu)1.教學(xué)內(nèi)容（1）Chukwa數(shù)據(jù)采集：chukwa數(shù)據(jù)收集系統(tǒng)。（2）Flume數(shù)據(jù)采集：Flume對(duì)數(shù)據(jù)的簡(jiǎn)單處理。（3）Scribe數(shù)據(jù)采集：Scribe數(shù)據(jù)存儲(chǔ)。（4）Kafka數(shù)據(jù)采集：消費(fèi)者數(shù)據(jù)采集。2.基本要求（1）掌握Chukwa、Flume、Scribe、Kafka數(shù)據(jù)采集系統(tǒng)。（2）掌握大數(shù)據(jù)采集架構(gòu)。（3）系統(tǒng)了解針對(duì)日志系統(tǒng)的采集方法3.思政元素不同對(duì)象采用不同處理辦法，沒有什么是萬能的，頭腦里要裝備各種技術(shù)，遇到不同問題才能逐個(gè)擊破。（四）大數(shù)據(jù)遷移技術(shù)1.教學(xué)內(nèi)容（1）數(shù)據(jù)遷移概念。（2）數(shù)據(jù)遷移相關(guān)技術(shù)：基于主機(jī)的遷移方式、基于存儲(chǔ)的遷移方式、基于主機(jī)邏輯卷的數(shù)據(jù)遷移、基于數(shù)據(jù)庫(kù)的遷移、服務(wù)器虛擬化的遷移、其他數(shù)據(jù)遷移技術(shù)。（3）數(shù)據(jù)遷移工具：ApacheSqoop、ETL2.基本要求（1）了解數(shù)據(jù)遷移基本概念。（2）了解數(shù)據(jù)遷移基本技術(shù)。（3）掌握并會(huì)用ApacheSqoop、ETL等數(shù)據(jù)遷移工具。3.思政元素?cái)?shù)據(jù)用0和1字符串表達(dá)，說明萬事萬物之間是相互關(guān)聯(lián)的，而不是非黑即白的完全對(duì)立與割裂。國(guó)與國(guó)之間的關(guān)系也應(yīng)如此，美國(guó)將中國(guó)至于完全對(duì)立面在各領(lǐng)域全面對(duì)抗，是思維簡(jiǎn)單邏輯幼稚行為粗暴道德淪陷的無知表現(xiàn)?；ヂ?lián)網(wǎng)數(shù)據(jù)抓取與處理技術(shù)1.教學(xué)內(nèi)容（1）網(wǎng)絡(luò)爬蟲概述：網(wǎng)絡(luò)爬蟲的概念、網(wǎng)絡(luò)爬蟲的抓取策略、網(wǎng)頁最新策略。（2）常用網(wǎng)絡(luò)爬蟲方法.2.基本要求（1）了解網(wǎng)絡(luò)爬蟲基本概念。（2）掌握互聯(lián)網(wǎng)數(shù)據(jù)抓取與處理技術(shù)。3.思政元素各種技術(shù)與算法，源至對(duì)人類、對(duì)自然、對(duì)社會(huì)的本質(zhì)和規(guī)律研究，理論來源于實(shí)踐，并且會(huì)指導(dǎo)和應(yīng)用于實(shí)踐。理論與實(shí)踐是硬幣的兩個(gè)面，是辯證對(duì)立和統(tǒng)一的。（六）數(shù)據(jù)預(yù)處理技術(shù)1.教學(xué)內(nèi)容（1）數(shù)據(jù)清洗：冗余信息，噪聲處理。（2）數(shù)據(jù)集成：數(shù)據(jù)分類、集合。（2）數(shù)據(jù)變換：數(shù)據(jù)類型轉(zhuǎn)換與統(tǒng)一。2.基本要求（1）系統(tǒng)了解數(shù)據(jù)預(yù)處理技術(shù)。（2）掌握數(shù)據(jù)的描述以及數(shù)據(jù)清洗、數(shù)據(jù)集成、數(shù)據(jù)變換等相關(guān)算法和技術(shù)。3.思政元素通過對(duì)數(shù)據(jù)預(yù)處理技術(shù)的基本學(xué)習(xí)，理解人類與機(jī)器的關(guān)系，即人類制定規(guī)則，機(jī)器執(zhí)行規(guī)則并在大量原始數(shù)據(jù)中選擇有價(jià)值的信息。各司其職，各盡其能，合作共贏。本課程安排在第5學(xué)期。教學(xué)內(nèi)容與課程目標(biāo)的對(duì)應(yīng)關(guān)系及建議時(shí)間分配如表所示。序號(hào)教學(xué)內(nèi)容支撐的課程目標(biāo)支撐的畢業(yè)要求指標(biāo)點(diǎn)講授學(xué)時(shí)實(shí)驗(yàn)學(xué)時(shí)1大數(shù)據(jù)概述目標(biāo)13-2202數(shù)據(jù)采集基礎(chǔ)目標(biāo)1、24-1423大數(shù)據(jù)采集架構(gòu)目標(biāo)1、35-3224大數(shù)據(jù)遷移技術(shù)目標(biāo)45-3425互聯(lián)網(wǎng)數(shù)據(jù)抓取與處理技術(shù)目標(biāo)55-3426數(shù)據(jù)預(yù)處理技術(shù)目標(biāo)1、65-344合計(jì)2012四、課程實(shí)施（一）把握主線，引導(dǎo)學(xué)生掌握大數(shù)據(jù)采集與預(yù)處理等相關(guān)概念、方法的實(shí)際意義，利用數(shù)據(jù)采集與預(yù)處理中的實(shí)際案例，幫助學(xué)生理解數(shù)據(jù)采集與預(yù)處理的方法和過程，使學(xué)生能用相關(guān)原理和技術(shù)處理實(shí)際問題。（二）采用多媒體教學(xué)手段，配合例題的講解及適當(dāng)?shù)乃伎碱}，保證講課進(jìn)度的同時(shí)，注意學(xué)生的掌握程度和課堂的氣氛。（三）采用案例式教學(xué)，引進(jìn)大數(shù)據(jù)采集與預(yù)處理的實(shí)際案例，讓學(xué)生真正了解并掌握大數(shù)據(jù)采集與預(yù)處理過程及結(jié)果的分析方法，從而具備相關(guān)知識(shí)和方法的實(shí)際應(yīng)用能力。（四）主要教學(xué)環(huán)節(jié)的質(zhì)量要求如表所示。主要教學(xué)環(huán)節(jié)質(zhì)量要求1備課（1）掌握本課程教學(xué)大綱內(nèi)容，嚴(yán)格按照教學(xué)大綱要求進(jìn)行課程教學(xué)內(nèi)容的組織。（2）熟悉教材各章節(jié)，借助專業(yè)書籍資料，并依據(jù)教學(xué)大綱編寫授課計(jì)劃，編寫每次授課的教案。教案內(nèi)容包括章節(jié)標(biāo)題、教學(xué)目的、教法設(shè)計(jì)、課堂類型、時(shí)間分配、授課內(nèi)容、課后作業(yè)、教學(xué)效果分析等方面。（3）根據(jù)各部分教學(xué)內(nèi)容，構(gòu)思授課思路、技巧，選擇合適的教學(xué)方法。2講授（1）要點(diǎn)準(zhǔn)確、推理正確、條理清晰、重點(diǎn)突出，能夠理論聯(lián)系實(shí)際，熟練地解答和講解例題。（2）采用多種教學(xué)方式（如啟發(fā)式教學(xué)、案例分析教學(xué)、討論式教學(xué)、多媒體示范教學(xué)等），注重培養(yǎng)學(xué)生發(fā)現(xiàn)、分析和解決問題的能力。（3）能夠采用現(xiàn)代信息技術(shù)輔助教學(xué)。（4）表達(dá)方式應(yīng)能便于學(xué)生理解、接受，力求形象生動(dòng)，使學(xué)生在掌握知識(shí)的過程中，保持較為濃厚的學(xué)習(xí)興趣。3作業(yè)布置與批改學(xué)生必須完成規(guī)定數(shù)量的作業(yè)，作業(yè)必須達(dá)到以下基本要求：（1）按時(shí)按量完成作業(yè)，不缺交，不抄襲。（2）書寫規(guī)范、清晰。（3）解題方法和步驟正確。教師批改和講評(píng)作業(yè)要求如下：（1）學(xué)生的作業(yè)要按時(shí)全部批改，并及時(shí)進(jìn)行講評(píng)。（2）教師批改和講評(píng)作業(yè)要認(rèn)真、細(xì)致，按百分制評(píng)定成績(jī)并寫明日期。（3）