基于學(xué)習(xí)者需求視角下的MOOC評(píng)價(jià)指標(biāo)體系研究---以《計(jì)算機(jī)應(yīng)用》MOOC課程為例摘要：從學(xué)習(xí)者需求視角出發(fā)，結(jié)合計(jì)量學(xué)和評(píng)價(jià)學(xué)知識(shí)，使用層次分析法構(gòu)建MOOC評(píng)價(jià)指標(biāo)體系權(quán)重，利用模糊綜合評(píng)價(jià)法構(gòu)建MOOC評(píng)價(jià)模型并用此模型來測(cè)評(píng)筆者所在學(xué)院開設(shè)的《計(jì)算機(jī)應(yīng)用》課程質(zhì)量以提高課程質(zhì)量和學(xué)習(xí)者的學(xué)習(xí)效率。關(guān)鍵詞：慕課學(xué)習(xí)者課程評(píng)價(jià)指標(biāo)體系層次分析法模糊綜合評(píng)價(jià)法Abstract:Fromtheperspectiveoflearners'needs,combinedwiththeknowledgeofMetrologyandevaluation,thispaperusesAHPtoconstructtheweightofMOOCevaluationindexsystem,andusesfuzzycomprehensiveevaluationmethodtobuildMOOCevaluationmodel,andusesthismodeltoevaluatethequalityofcomputerapplicationcourseofferedbytheauthor'scollege,soastoimprovethecoursequalityandlearningefficiencyoflearners.Keywords:MOOCLearnerCurriculumevaluationindexsystemAnalytichierarchyprocessFuzzycomprehensiveevaluationmethod近年來，MOOC（大規(guī)模在線開放課程）簡(jiǎn)稱慕課在世界范圍迅速興起，滿足了高校師生和社會(huì)學(xué)習(xí)者的全方位或個(gè)性化需求，激發(fā)了學(xué)習(xí)者的學(xué)習(xí)積極性和自主性，也促進(jìn)課程教學(xué)方式和評(píng)價(jià)機(jī)制發(fā)生變革，為此教育部在2015年出臺(tái)了《關(guān)于加強(qiáng)高等學(xué)校在線開放課程建設(shè)應(yīng)用與管理的意見》，意見明確指出要鼓勵(lì)高校間通過協(xié)同創(chuàng)新和集成創(chuàng)新的方式建設(shè)滿足不同教學(xué)需要、不同學(xué)習(xí)需求的在線開放課程或課程群，并制訂在線課程的教學(xué)評(píng)價(jià)辦法，通過使用評(píng)價(jià)等方式對(duì)在線開放課程的在線運(yùn)行、實(shí)際應(yīng)用、教學(xué)效果等進(jìn)行跟蹤監(jiān)測(cè)和綜合評(píng)價(jià)，加強(qiáng)對(duì)在線課程建設(shè)的監(jiān)管。隨著國(guó)家對(duì)MOOC課程要求的不斷提高，要求MOOC課程更加突出“三教”改革理念，體現(xiàn)課程思政精神，注重校企聯(lián)合開發(fā)等等，原來的評(píng)價(jià)指標(biāo)體系已經(jīng)不符合新時(shí)代的要求，急需一個(gè)更合理的MOOC評(píng)價(jià)指標(biāo)體系。本文從課程團(tuán)隊(duì)、課程設(shè)計(jì)、課程資源、教學(xué)應(yīng)用四個(gè)方面10個(gè)指標(biāo)首次從學(xué)習(xí)者需求的視角構(gòu)建了新時(shí)期MOOC評(píng)價(jià)指標(biāo)體系，對(duì)湖南省某所高校的MOOC進(jìn)行問卷調(diào)查，運(yùn)用AHP層次分析法確定權(quán)重，運(yùn)用模糊綜合評(píng)價(jià)法對(duì)該校的MOOC進(jìn)行測(cè)試評(píng)價(jià)，以促進(jìn)該校MOOC課程建設(shè)和診斷提供理論依據(jù)。0.引言要建設(shè)好一門MOOC,首先需要了解學(xué)習(xí)者的需求，根據(jù)學(xué)習(xí)者的需求針對(duì)性的建設(shè)，這樣才能更好的滿足學(xué)習(xí)者的學(xué)習(xí)欲望，提高學(xué)習(xí)者的學(xué)習(xí)興趣。李湊在《基于用戶體驗(yàn)的我國(guó)MOOC學(xué)習(xí)者需求調(diào)查研究》[1]文章中從MOOC的平臺(tái)界面設(shè)計(jì)、課程結(jié)構(gòu)、課程內(nèi)容、學(xué)習(xí)評(píng)價(jià)、學(xué)習(xí)交互以及技術(shù)支持六個(gè)維度對(duì)學(xué)習(xí)者的MOOC需求做了具體的闡述；陳志華在《基于用戶體驗(yàn)的網(wǎng)絡(luò)課程有用性評(píng)價(jià)指標(biāo)體系設(shè)計(jì)與應(yīng)用》[2]從網(wǎng)絡(luò)產(chǎn)品用戶體驗(yàn)的角度出發(fā),研究了用戶體驗(yàn)方面的相關(guān)理論,提出了基于用戶體驗(yàn)的網(wǎng)絡(luò)課程有用性評(píng)價(jià)指標(biāo),并對(duì)每一項(xiàng)評(píng)價(jià)指標(biāo)項(xiàng)做了分析以及確定權(quán)重,最終得出網(wǎng)絡(luò)課程用戶體驗(yàn)方面的評(píng)價(jià)指標(biāo)體系。還有其他研究人員對(duì)MOOC的學(xué)習(xí)者需求進(jìn)行了具體的闡述，這里就不一一列舉了。1.MOOC課程評(píng)價(jià)指標(biāo)體系的構(gòu)建目前各個(gè)學(xué)校、各地教育行政部門評(píng)價(jià)MOOC課程的標(biāo)準(zhǔn)不一，評(píng)價(jià)專家往往都依靠自己的經(jīng)驗(yàn)來評(píng)價(jià)，主觀性比較大，不能很客觀的評(píng)價(jià)MOOC課程的教學(xué)質(zhì)量。理論研究上，目前對(duì)MOOC課程評(píng)價(jià)指標(biāo)體系理論研究并不多，武漢大學(xué)的邱均平在《慕課質(zhì)量評(píng)價(jià)指標(biāo)體系構(gòu)建及應(yīng)用研究》[3]以先進(jìn)性、獨(dú)立性、全面性、代表性、可操作性以及可比性為指導(dǎo)原則，按照慕課教學(xué)隊(duì)伍、教學(xué)內(nèi)容、教學(xué)效果、教學(xué)資源以及教學(xué)技術(shù)五個(gè)一級(jí)指標(biāo)，慕課提供組織、慕課主講人、慕課團(tuán)隊(duì)組成等十四個(gè)二級(jí)指標(biāo)的慕課質(zhì)量評(píng)價(jià)指標(biāo)體系。使用層次分析法軟件計(jì)算指標(biāo)體系的權(quán)重，使用模糊綜合評(píng)價(jià)法構(gòu)建慕課質(zhì)量評(píng)價(jià)模型，并以并用此模型測(cè)試《信息檢索》課程的質(zhì)量情況。本文結(jié)合國(guó)家對(duì)MOOC課程建設(shè)的最新要求，從教育學(xué)和人的需求理論出發(fā)，遵循系統(tǒng)性、代表性、可比性、可量化等原則，從課程團(tuán)隊(duì)（B1）、課程設(shè)計(jì)（B2）、課程資源（B3）、教學(xué)應(yīng)用（B4）四個(gè)方面(準(zhǔn)則層)選擇了10個(gè)指標(biāo)，構(gòu)建了MOOC課程評(píng)價(jià)指標(biāo)體系，如表1所示：表1MOOC評(píng)價(jià)指標(biāo)體系一級(jí)指標(biāo)二級(jí)指標(biāo)評(píng)價(jià)指標(biāo)觀測(cè)點(diǎn)概要課程團(tuán)隊(duì)B1主講教師B11(1)主講教師師德師風(fēng)，教學(xué)能力和經(jīng)驗(yàn)。(2)課程團(tuán)隊(duì)結(jié)構(gòu)和人數(shù)。團(tuán)隊(duì)結(jié)構(gòu)B12課程設(shè)計(jì)B2總體設(shè)計(jì)B21(1)是否融入課程思政思想。(2)是否以學(xué)生為中心的課程教學(xué)改革方向。(3)是否突出“三教”改革理念，注重校企聯(lián)合開發(fā)。教學(xué)設(shè)計(jì)B22(1)教學(xué)設(shè)計(jì)及實(shí)施計(jì)劃可操作，教學(xué)活動(dòng)完整、有效。課程資源B3內(nèi)容要求B31(1)課程內(nèi)容為人才培養(yǎng)方案中規(guī)定內(nèi)容。(2)按照產(chǎn)業(yè)發(fā)展水平和職業(yè)標(biāo)準(zhǔn)設(shè)計(jì)課程結(jié)構(gòu)和內(nèi)容。視頻資源B32(1)課程視頻覆蓋課程教學(xué)中的重點(diǎn)和難點(diǎn)，內(nèi)容準(zhǔn)確、完整。(2)視頻采用顆?；姆绞浇M織，錄制圍繞知識(shí)點(diǎn)展開，能夠清晰表達(dá)知識(shí)框架。(4)課程視頻為課程團(tuán)隊(duì)原創(chuàng)，視頻圖像清晰，播放流暢，聲音與視頻圖像同步。圖文資源B33(1)圖文資源編寫科學(xué)規(guī)范、風(fēng)格統(tǒng)一。(2)圖文資源類型豐富，與課程內(nèi)容密切相關(guān)，無版權(quán)問題。教學(xué)應(yīng)用B4開課情況B41(1)課程教學(xué)實(shí)際運(yùn)行一個(gè)周期以上，每輪選課學(xué)習(xí)人數(shù)在1000人以上。教學(xué)過程B42(1)能為學(xué)習(xí)者提供測(cè)驗(yàn)、作業(yè)、考試、答疑、討論等教學(xué)活動(dòng)。(2)師生互動(dòng)充分，能有效促進(jìn)師生之間、學(xué)生之間進(jìn)行資源共享、互動(dòng)交流和自主式與協(xié)作式學(xué)習(xí)。應(yīng)用效果B43(1)共享范圍廣，應(yīng)用效果好，社會(huì)影響大，反饋評(píng)價(jià)高。其中，課程團(tuán)隊(duì)包含了主講教師和團(tuán)隊(duì)結(jié)構(gòu)兩個(gè)指標(biāo)；課程設(shè)計(jì)包括總體設(shè)計(jì)和教學(xué)設(shè)計(jì)兩個(gè)指標(biāo)；課程資源包含了內(nèi)容要求、視頻資源、圖文資源三個(gè)指標(biāo)；教學(xué)應(yīng)用包含了開課情況、教學(xué)過程、應(yīng)用效果三個(gè)指標(biāo)。課程團(tuán)隊(duì)指標(biāo)的觀察點(diǎn)主要包括主講教師師德師風(fēng)、教學(xué)能力和經(jīng)驗(yàn)、以及團(tuán)隊(duì)成員的結(jié)構(gòu)和人數(shù)。課程設(shè)計(jì)指標(biāo)的觀察點(diǎn)主要包括課程是否融入課程思政思想、是否以學(xué)生為中心的課程教學(xué)改革方向、是否突出“三教”改革理念和注重校企聯(lián)合開發(fā)。課程資源指標(biāo)的觀察點(diǎn)主要包括是否為人才培養(yǎng)方案中規(guī)定內(nèi)容且體現(xiàn)產(chǎn)業(yè)發(fā)展水平和職業(yè)標(biāo)準(zhǔn)、視頻資源是否以顆?；姆绞絹斫M織知識(shí)點(diǎn)并且是否清晰流暢、圖文資源是否類型豐富且風(fēng)格統(tǒng)一。教學(xué)應(yīng)用的觀察點(diǎn)主要包括運(yùn)行周期和學(xué)習(xí)人數(shù)、提供的教學(xué)活動(dòng)種類和互動(dòng)情況、應(yīng)用效果和影響力。2.基于學(xué)習(xí)者需求的MOOC評(píng)價(jià)指標(biāo)體系權(quán)重的確定2.1學(xué)習(xí)者需求問卷調(diào)查采用問卷調(diào)查的方式對(duì)湖南某所高校在校生進(jìn)行MOOC需求問卷調(diào)查，該校開設(shè)了很多門MOOC課程，參與的學(xué)習(xí)人數(shù)較多，應(yīng)該來說問卷調(diào)查具有代表性和推廣性。問卷調(diào)查的內(nèi)容包括上述10個(gè)指標(biāo)，學(xué)習(xí)者根據(jù)實(shí)際情況對(duì)以上指標(biāo)進(jìn)行評(píng)價(jià)，評(píng)價(jià)等級(jí)為4級(jí)，分別為優(yōu)秀、良好、合格、不合格，其中優(yōu)秀代表非常符合學(xué)生的需求，良好表示比較符合學(xué)生的需求，合格表示基本符合學(xué)生的需求，不合格表示不符合學(xué)生的需求。本次發(fā)放500份問卷，其中有效問卷490份。統(tǒng)計(jì)有效問卷，得到10個(gè)指標(biāo)相對(duì)于每個(gè)等級(jí)的隸屬度，如表2所示：表2MOOC課程評(píng)價(jià)各指標(biāo)隸屬度一級(jí)指標(biāo)二級(jí)指標(biāo)優(yōu)秀良好合格不合格B1B110.210.460.330.00B120.330.520.150.00B2B210.220.430.350.00B220.250.470.280.00B31B310.340.400.260.00B320.380.420.200.00B330.360.410.230.00B4B410.200.530.270.00B420.410.400.190.00B430.220.460.320.002.2評(píng)價(jià)指標(biāo)體系權(quán)重的確定層次分析法是一種定量和定性分析的決策方法，它的步驟如下：首先由專家對(duì)指標(biāo)一一打分，構(gòu)建判斷矩陣，通過判斷矩陣確定一級(jí)指標(biāo)的權(quán)重，如果該判斷矩陣通過了一致性檢驗(yàn)，則繼續(xù)確定二級(jí)指標(biāo)的權(quán)重，再進(jìn)行一致性檢驗(yàn)，最終得到所有指標(biāo)的權(quán)重。邀請(qǐng)10位慕課專家對(duì)課程團(tuán)隊(duì)、課程設(shè)計(jì)、課程資源、教學(xué)應(yīng)用四個(gè)一級(jí)指標(biāo)進(jìn)行兩兩打分，構(gòu)成判斷矩陣，再利用Yaaho10軟件的計(jì)算出四個(gè)一級(jí)指標(biāo)的權(quán)重分別為(0.102,02980.326,0.274)；從權(quán)重系數(shù)可以看出，課程資源>課程設(shè)計(jì)>教學(xué)應(yīng)用>課程團(tuán)隊(duì)?？梢缘贸?，課程資源的完善、課程設(shè)計(jì)理念、教學(xué)應(yīng)用效果對(duì)于一門MOOC課程來說，權(quán)重系數(shù)較大，課程建設(shè)者需要多加重視。類似地，利用Yaaho10軟件計(jì)算出各二級(jí)指標(biāo)的系數(shù)：B1的二級(jí)指標(biāo)權(quán)重分別為0.423、0.577，B2的二級(jí)指標(biāo)權(quán)重分別為0.561、0.439，B3的二級(jí)指標(biāo)權(quán)重分別為0.302、0.358、0.334，B4的二級(jí)指標(biāo)權(quán)重分別為0.362、0.324、0.314。2.3評(píng)價(jià)結(jié)果使用模糊綜合評(píng)價(jià)法對(duì)MOOC課程進(jìn)行評(píng)價(jià)，它的步驟如下：首先根據(jù)表2每個(gè)指標(biāo)的隸屬度形成模糊矩陣，然后將二級(jí)指標(biāo)的權(quán)重系數(shù)乘以與其對(duì)應(yīng)的模糊矩陣，最后得到評(píng)價(jià)結(jié)果。使用上述評(píng)價(jià)體系來評(píng)價(jià)《計(jì)算機(jī)應(yīng)用》MOOC課程的質(zhì)量，《計(jì)算機(jī)應(yīng)用》MOOC總課時(shí)32，主講教師副高職稱，有多年的教學(xué)經(jīng)驗(yàn)，多次獲得教學(xué)比賽獎(jiǎng)勵(lì)，課程教師團(tuán)隊(duì)由5名教師組成。教學(xué)團(tuán)隊(duì)制定了詳細(xì)的教學(xué)實(shí)施方案，根據(jù)教學(xué)內(nèi)容的需要，自主開發(fā)微課視頻、習(xí)題、作業(yè)、單元測(cè)試、PPT課件等資源，讓學(xué)生了解信息素養(yǎng)知識(shí)，具備利用計(jì)算機(jī)進(jìn)行信息的獲取、處理、傳遞及應(yīng)用的基本技能，提高學(xué)生解決問題，動(dòng)手實(shí)踐應(yīng)用的能力。同樣利用Yaaho10軟件的計(jì)算《計(jì)算機(jī)應(yīng)用》MOOC課程的評(píng)價(jià)結(jié)果，得到評(píng)價(jià)結(jié)果為良好等級(jí)。此門課程教學(xué)設(shè)計(jì)上需要更加完整，尤其要加強(qiáng)校企合作開發(fā)和課程思政元素的融入。3.結(jié)論目前，中共中央、國(guó)務(wù)院印發(fā)了《深化新時(shí)代教育評(píng)價(jià)改革總體方案》，教育評(píng)價(jià)事關(guān)教育發(fā)展方向，有什么樣的評(píng)價(jià)指揮棒，就有什么樣的辦學(xué)導(dǎo)向。構(gòu)建一個(gè)符合新時(shí)代要求的MOOC課程評(píng)價(jià)指標(biāo)體系，具有重大的理論和實(shí)踐意義，這也是落實(shí)國(guó)家“金課”建設(shè)要求、打造高教“金課”，提高M(jìn)OOC質(zhì)量，促進(jìn)學(xué)習(xí)者學(xué)習(xí)效率，提高教學(xué)效果的有效途徑。參考文獻(xiàn)：[1].李湊.基于用戶體驗(yàn)的我國(guó)mooc學(xué)習(xí)者需求調(diào)查研究[D