分類編號： 單位代碼： 10065 密 級： 學(xué) 號： 04206006 研究生學(xué)位論文 論文題目： 基于 在線考試新型方案 的 設(shè)計(jì)與 研究 學(xué) 生 姓 名： 謝 延 紅 申請 學(xué)位級別： 碩士 申請專業(yè)名稱： 教 育 技 術(shù) 學(xué) 研 究 方 向： 遠(yuǎn)程教育及其網(wǎng)絡(luò)技術(shù)研究 指導(dǎo)教師姓名： 王 志 軍 專業(yè)技術(shù)職稱： 教 授 提交論文日期： 2007 年 3 月 中 文摘要 要 在線考試系統(tǒng)可以幫助考試主管部門實(shí)現(xiàn)考試信息和考試流程的系統(tǒng)化、科學(xué)化和自動化管理，提高工作效率，減輕命題、組卷、閱卷、統(tǒng)計(jì)分析等繁重的工作量。本研究 隸屬于 天津市十一五教育科學(xué)規(guī)劃 重點(diǎn) 課題“ 網(wǎng)絡(luò)環(huán)境下教師教育績效管理模式及智能化支撐平臺開發(fā)研究” ， 所做的工作是基于 在線考試新型方案的研究、設(shè)計(jì)與開發(fā)。 論文共分七章。第一章介紹了本研究的課題背景及意義，通過分析國內(nèi)外的研究現(xiàn)狀，總結(jié)出目前在線考試系統(tǒng)普遍存在的問題；第二章對題庫建設(shè)理論、教育測量理論以及相關(guān)的規(guī)范和標(biāo)準(zhǔn)做了研究和分析，作為本研究的重要理論依據(jù)；第三章介紹了系統(tǒng)實(shí)現(xiàn)的一些關(guān)鍵性技術(shù) 及其在本研究中的應(yīng)用 ；第四章論述了在線考試系統(tǒng)的總體設(shè)計(jì)與構(gòu)想，在確定總體設(shè)計(jì)思想的基礎(chǔ)上對系統(tǒng)總體特征進(jìn)行了設(shè)計(jì)與分析，提出了在線考試系統(tǒng)的體系 結(jié)構(gòu)模型，并從功能模型、數(shù)據(jù)庫、系統(tǒng)安全性三個方面描述了系統(tǒng)總體設(shè)計(jì)。第五章詳細(xì)闡述了在線考試系統(tǒng)實(shí)現(xiàn)過程中的幾個關(guān)鍵問題及解決方案的設(shè)計(jì)與實(shí)現(xiàn)；這兩章是論文研究的核心內(nèi)容；第六章介紹了在線考試系統(tǒng)的測試過程及調(diào)試步驟；最后總結(jié)了 本研究 的創(chuàng)新點(diǎn)，提出了今后的研究內(nèi)容與方向。 本研究所實(shí)現(xiàn)的在線考試系統(tǒng) 提供了系統(tǒng)功能模塊拆裝組合功能 ,使得系統(tǒng)可以作為一個考試系統(tǒng)獨(dú)立運(yùn)行 ,也可以適用于網(wǎng)絡(luò)課程生成系統(tǒng) ； 自動組卷、手工組卷、自測組卷三種試卷策略創(chuàng)建模式 交相輝映，可 滿足不同用戶的不同需求；利用 便的實(shí)現(xiàn)了多媒體試題的制作，并引入“命題雙向細(xì)目表”編制試卷藍(lán)圖，克服了命題的主觀隨意性；完備的試卷分析功能，使教師能夠全面獲取教與學(xué)的反饋信息，為新型教學(xué)提供依據(jù) ； 系統(tǒng)采用 最新 術(shù)， 減輕 了 服務(wù)器的負(fù)擔(dān)， 改善 了用戶體驗(yàn)。 這是本研究的創(chuàng)新點(diǎn)。 關(guān)鍵詞： 在線考試，測量理論，雙向細(xì)目表，組卷 英文摘要 in a of is a 1 It to a to on of of of at in is of of in in of of in on A of is is in in In of to to it be of of of to in By of of 文摘要 IV of of 錄 錄 第一章 緒論 . 1 題背景及意義 . 1 內(nèi)外研究現(xiàn)狀和存在的問題 . 2 者所做的主要工作 . 3 第二章 在線考試系統(tǒng)理論依據(jù)分析 . 5 庫建設(shè)理論 . 5 庫的定義與特征 . 5 庫建設(shè)實(shí)踐程序 . 6 庫建設(shè)理論對本研究的指導(dǎo) . 7 育測量理論 . 9 典測量理論 . 9 化理論 . 11 目反應(yīng)理論 . 12 典測量理論在本研究中的應(yīng)用 . 15 線考試系統(tǒng)的相關(guān)標(biāo)準(zhǔn)與規(guī)范 . 15 外 資源建設(shè)標(biāo)準(zhǔn)代表 型 . 15 代遠(yuǎn)程教育資源建設(shè)技術(shù)規(guī)范 . 16 試互操作：信息模型規(guī)范 . 17 關(guān)標(biāo)準(zhǔn)與規(guī)范是本研究系統(tǒng)設(shè)計(jì)的參照目標(biāo) . 18 第三章 系統(tǒng)實(shí)現(xiàn)的關(guān)鍵性技術(shù)分析 . 19 技術(shù) . 19 務(wù)器控件 . 19 面框架 . 20 務(wù)與 . 21 本研究的技術(shù)主體 . 22 技術(shù) . 22 術(shù)簡介 . 22 術(shù)工作原理與優(yōu)勢 . 23 的一種簡便實(shí)現(xiàn)方式 . 23 本研究中的應(yīng)用 . 24 據(jù)庫技術(shù) . 25 據(jù)庫技術(shù)基本概念 . 25 005 . 26 據(jù)庫技術(shù)在本研究中的應(yīng)用 . 27 第四章 在線考試系統(tǒng)總體設(shè)計(jì)與分析 . 28 線考試系統(tǒng)總體設(shè)計(jì)思想 . 28 線考試系統(tǒng)特征設(shè)計(jì)分析 . 29 統(tǒng)軟件體系結(jié)構(gòu)模型設(shè)計(jì) . 30 統(tǒng)功能模型設(shè)計(jì) . 31 統(tǒng)數(shù)據(jù)庫設(shè) 計(jì) . 33 目錄 V 統(tǒng)安全性設(shè)計(jì) . 38 務(wù)器安全策略設(shè)計(jì) . 38 據(jù)庫安全設(shè)計(jì) . 39 用程序安全設(shè)計(jì) . 40 第五章 系統(tǒng)關(guān)鍵問題及解決方案設(shè)計(jì)與實(shí)現(xiàn) . 41 媒體試題的制作 . 41 題的編制原則 . 41 媒體試題的制作 . 42 使用方法簡析 . 43 于雙向細(xì)目表的自動組卷策略 . 44 題雙向細(xì)目表 . 44 卷參數(shù)介紹 . 45 動組卷的設(shè)計(jì)與實(shí)現(xiàn) . 46 生在線測試功能 . 48 線考試流程設(shè)計(jì) . 48 試界面的設(shè)計(jì) . 49 鍵功能設(shè)計(jì)簡析 . 49 生評價功能 . 50 生相對評價 . 50 生絕對評價 . 51 生個體內(nèi)差異評價 . 51 卷分析功能 . 52 卷分?jǐn)?shù)集中量分析 . 52 卷分?jǐn)?shù)差異量分析 . 53 卷分?jǐn)?shù)分布情況分析 . 54 卷質(zhì)量分析 . 55 第六章 系統(tǒng)測試與調(diào)試 . 58 元測試 . 58 裝測試 . 59 統(tǒng)測試 . 59 試 . 60 第七章 結(jié)束語 . 61 研究的創(chuàng)新點(diǎn) . 61 望 . 62 參考文獻(xiàn) . 63 致謝 . 65 攻讀碩士學(xué)位期間發(fā)表學(xué)術(shù)論文情況 . 66 攻讀碩士學(xué)位期間科研情況 . 67 攻讀碩士學(xué)位期間其他獎勵情況 . 67 附錄 1 數(shù)據(jù)操作層事務(wù)應(yīng)用實(shí)例 . 68 第一章 緒論 1 第一章 緒論 題背景及意義 本研究隸屬于 天津市十一五教育科學(xué)規(guī)劃 重點(diǎn) 課題“網(wǎng)絡(luò)環(huán)境下教師教育績效管理模式及智能化支撐平臺開 發(fā)研究” 。 作者作為此課題負(fù)責(zé)人王志軍教授的學(xué)生有幸參加 “ 智能化支撐平臺 網(wǎng)絡(luò)課程生成系統(tǒng) ” 子課題 組 ， 并 承擔(dān) 網(wǎng)絡(luò)課程生成系統(tǒng) 下 的 在線考試系統(tǒng)和離線作業(yè)系統(tǒng)的 研發(fā) 工作。 網(wǎng)絡(luò)課程的開發(fā)和設(shè)計(jì)是課程設(shè)計(jì) 中的 新領(lǐng)域、新概念，也是現(xiàn)代遠(yuǎn)程教育工程建設(shè)的核心和重點(diǎn)。 所謂網(wǎng)絡(luò)課程就是通過網(wǎng)絡(luò)表現(xiàn)的某門學(xué)科的教學(xué)內(nèi)容及實(shí)施的教學(xué)活動的綜合，它包括兩個組成部分：按一定的教學(xué)目標(biāo)、教學(xué)策略組織起來的教學(xué)內(nèi)容和網(wǎng)絡(luò)教學(xué)支撐環(huán)境，其中網(wǎng)絡(luò)教學(xué)支撐環(huán)境特指支持網(wǎng)絡(luò)教學(xué)的軟件工具、教學(xué)資源以及在網(wǎng)絡(luò)教學(xué)平臺上實(shí)施的教學(xué)活動 1。 顯然， 在線考試作為網(wǎng)絡(luò)課程的一種重要組成子系統(tǒng)，對良好網(wǎng)絡(luò)教育支持環(huán)境的搭建具有 及其 重要 的意義。 現(xiàn)階段雖然遠(yuǎn)程教育已經(jīng)蓬勃地發(fā)展起來，但學(xué)校與社會上的各種考試基本還是采用傳統(tǒng)的考試方式，在這種方式下，通常組織一次考試至少需要經(jīng)過五個步驟：人工出卷、考生考試、人工閱卷、成績統(tǒng)計(jì)和試卷分析。隨著各種考試類型的不斷增加和考生數(shù)量的不斷膨脹，傳統(tǒng)考試方式暴露了許多弊端 2： （ 1） 出現(xiàn)不必要的重復(fù)勞動，造成人力、物力、財(cái)力的浪費(fèi)；（ 2）人工出卷和閱卷錯誤率高，難以保證成績的公平性；（ 3）存在著考前壓題、漏題等不良 現(xiàn)象；（ 4）考試時間難以控制；（ 5）試卷印刷容易出錯，造成不必要的麻煩 。顯然，傳統(tǒng)的考試方式已經(jīng)不能適應(yīng)現(xiàn)代遠(yuǎn)程教育和知識更新的需求，因此開發(fā)一套在線考試系統(tǒng)具有重要 現(xiàn)實(shí) 意義 ： 1. 在線考試突破了時空限制。在線考試系統(tǒng)突破了傳統(tǒng)考試模式的時間、空間限制，有利于組織大規(guī)模異地實(shí)時考試，可以滿足任何授權(quán)的考生在規(guī)定的時間段內(nèi)在任意時間和 可用 地點(diǎn)參加考試，大大提高了教學(xué)內(nèi)容和考核方式的靈活性。 2. 在線考試提高了工作效率。在線考試系統(tǒng)減輕了考試主管部門人員尤其是教師在命題、組卷、閱卷、統(tǒng)計(jì)分析等方面繁重的工作量，提高 了工作效率。 第一章 緒論 2 3. 在線考試節(jié)省財(cái)政開支。在線考試真正實(shí)現(xiàn)了無紙化辦公，節(jié)省了紙張、印刷等考核費(fèi)用。 4. 在線考試更能體現(xiàn)了考核的 客觀 公正性。在線考試采用試題庫方式提供試卷來源，考前無任何成套試卷，考試時各考生試卷不完全相同，避免了互相參看導(dǎo)致的不公平成績。自動閱卷等功能增加了考核的透明度，降低了錯誤出現(xiàn)的概率和教師主觀因素的干擾，更能體現(xiàn)考核的 客觀 公正性。 5. 在線考試為考生營造了一個個性化的學(xué)習(xí)環(huán)境。在線考試系統(tǒng)為考生提供了豐富的信息資源，除教師制定的試卷外，考生還可以進(jìn)行自測練習(xí)，根據(jù)個人的特點(diǎn)和需求制定自測 試卷，為提高自身綜合素質(zhì)打下堅(jiān)實(shí)的基礎(chǔ)。 6. 在線考試考核形式多種多樣。在線考試中添加了傳統(tǒng) 紙質(zhì) 試卷中極少 、甚至無法 應(yīng)用 的 圖片、聲音、動畫 等 多媒體形式，能將文字難以描述的東西以多媒體的形式直觀的表現(xiàn)出來，有利于考核的準(zhǔn)確性和靈活性，減弱考生對考試的抵觸情緒。 積極適應(yīng)信息網(wǎng)絡(luò)化的發(fā)展趨勢，利用先進(jìn)的網(wǎng)絡(luò)技術(shù)、數(shù)據(jù)庫技術(shù)和人工智能技術(shù)，結(jié)合當(dāng)前網(wǎng)絡(luò)普及化的大好時機(jī)，開發(fā)一套基于 B/S 模式的在線考試系統(tǒng)具有深遠(yuǎn)的意義。 內(nèi)外研究現(xiàn)狀和存在的問題 我國的一些考試機(jī)構(gòu)和學(xué)校非常重視在線考試的建設(shè)。 1990 年 由國家教委考試中心牽頭，召開了國內(nèi)第一次教育考試題庫理論研討會，探索建立符合我國教育考試實(shí)際情況的題庫理論和方法 3。目前，基于網(wǎng)絡(luò)的考試主要 是 面向社會上的培訓(xùn)認(rèn)證考試和遠(yuǎn)程教育的考試，開發(fā)主流為基于 考試系統(tǒng)。以下介紹幾個典型的在線考試系統(tǒng)，以說明國內(nèi)外的研究現(xiàn)狀 45。 北京師范大學(xué)研究開發(fā)的基于 通用題庫系統(tǒng)的兩大特點(diǎn)是：（ 1）集中管理，由統(tǒng)一權(quán)威機(jī)構(gòu)進(jìn)行維護(hù)和管理，任課教師沒有自主修訂權(quán)；（ 2）開放使用，通過網(wǎng)絡(luò)征集試題和組織測試。 全美測評軟件系統(tǒng)（北京）有限公司（ 一 家提供考試技術(shù)和考試內(nèi)容服務(wù)的專業(yè)公司， 對中小學(xué)信息技術(shù)課程定制的校園智能化測試平臺 E 考通，支持廣域網(wǎng)和局域網(wǎng)操作，考生可以進(jìn)行網(wǎng)上的互動練習(xí)、課外作業(yè)和提問；第一章 緒論 3 教師可以進(jìn)行網(wǎng)上指導(dǎo)、網(wǎng)上批改作業(yè) 7。 鵬博士在線考試系統(tǒng)及題庫錄入系統(tǒng)是一套基于瀏覽器的易學(xué)易用的產(chǎn)品，該系統(tǒng)包括用戶管理、試題管理、智能組卷、網(wǎng)上考試、成績分析等功能，主要缺點(diǎn)是對試卷、試題的分析不夠深入，對題庫沒有維護(hù)功能，不利于標(biāo)準(zhǔn)化考試。 科教 2000 網(wǎng)絡(luò)考試系統(tǒng)是成都北斗星信息技術(shù)發(fā)展有限公司推出的多功能輔助教學(xué)系統(tǒng)，是一個 練習(xí)、測試自動化全面解決方案。具有教學(xué)題庫管理、自動試卷生成、網(wǎng)上測驗(yàn)、網(wǎng)上練習(xí)、自動成績統(tǒng)計(jì)等多項(xiàng)功能。但該系統(tǒng)雖對題庫進(jìn)行了擴(kuò)充，但仍沒有淘汰更新機(jī)制，也沒有將考生從題海戰(zhàn)術(shù)中解放出來，且分析統(tǒng)計(jì)功能較弱 8。 一些高校及科研單位也開發(fā)了各類基于 在線考試系統(tǒng)投入實(shí)際應(yīng)用。一些大規(guī)模高校的部分計(jì)算機(jī)學(xué)科，特別 是 計(jì)算機(jī)基礎(chǔ)學(xué)科也在制作和試用在線考試系統(tǒng)進(jìn)行無紙化考試，如華中科技大學(xué)、上海同濟(jì)大學(xué)等 5。 除研究以上實(shí)例以外，作者還采用文獻(xiàn)法對在線考試系統(tǒng)的功能設(shè)計(jì)信息進(jìn)行調(diào)查研究。檢索的具體方式 是選擇中國期刊網(wǎng)中的中國學(xué)術(shù)期刊全文數(shù)據(jù)庫和中國優(yōu)秀博碩士學(xué)位論文全文數(shù)據(jù)庫，采用關(guān)鍵字“在線考試”共命中 146 篇， 其中 期刊 124 篇，學(xué)位論文 22 篇 ； 采用關(guān)鍵字“在線測評”共命中 4 篇， 其中 期刊 3 篇，學(xué)位論文 1 篇 ； 采用關(guān)鍵字 “網(wǎng)絡(luò)測評”共命中文章 5 篇， 其中 期刊 4 篇，學(xué)位論文 1 篇。對文章逐一進(jìn)行查看，共確定文章 52 篇作為研究對比對象。通過分析案例和研究文獻(xiàn)發(fā)現(xiàn)目前在線考試已經(jīng)取得了較大發(fā)展 ,但是還存在著很多不完善的方面 ,使得在線考試在短時間內(nèi)難以取代 傳統(tǒng) 的 考試 方式 ?，F(xiàn)有在線考試系統(tǒng)主要存在著以下問題： （ 1）題 目類型固定，不具備可修改、可擴(kuò)充性；（ 2）試題形式單一，缺乏音頻、視頻、動畫等多媒體試題形式；（ 3）組卷方式形式單一，且科學(xué)依據(jù)不足；（ 4）重視考生的考，而忽略考生對試卷的復(fù)習(xí)與分析；（ 5）試卷分析功能不足。 本研究針對上述問題，在借鑒其它系統(tǒng)優(yōu)點(diǎn)的基礎(chǔ)上并結(jié)合教學(xué)過程和教學(xué)管理中的一些實(shí)際情況，提出了基于 在線考試新型方案。 者所做的主要工作 經(jīng)過近兩年的調(diào)研、設(shè)計(jì)、編程以及測試， 課題 組共同合作完成了整個網(wǎng)絡(luò)課第一章 緒論 4 程 生成 系統(tǒng)的研制工作，作者也如期完成了預(yù)定目標(biāo) 成 系統(tǒng)中在線考試和在線作業(yè)子系統(tǒng)的研發(fā)工作。在整個系統(tǒng)開發(fā)過程中，作者做的主要工作有： 1. 系統(tǒng)開發(fā)準(zhǔn)備階段： 與課題組成員一起， 通過 專家訪談、教師用戶訪談、網(wǎng)絡(luò) 和文獻(xiàn)研究等形式調(diào)研國內(nèi)外網(wǎng)絡(luò)課程功能模塊和網(wǎng)絡(luò)課程開發(fā)現(xiàn)狀， 制定系統(tǒng)開發(fā)計(jì)劃。 2. 系統(tǒng)分析階段：深入研究考試系統(tǒng)相關(guān)的題庫和教育測量理論，調(diào)查現(xiàn)有各種模式的考試系統(tǒng)，借鑒其優(yōu)點(diǎn)，彌補(bǔ)其缺點(diǎn)，制定需求計(jì)劃；然后根據(jù)需求計(jì)劃分析考試系統(tǒng)需實(shí)現(xiàn)的功能模塊和各種可能的制約因素，從而保證系統(tǒng)的完整性、先進(jìn)性和可擴(kuò)展性。 3. 系統(tǒng)設(shè)計(jì)階段：確定系統(tǒng)的總體設(shè)計(jì)方案、劃分各子系統(tǒng) 功能模型，綜合考慮各種制約因素，利用有效的技術(shù)手段和方法進(jìn)行各種具體環(huán)節(jié)設(shè)計(jì)，包括系統(tǒng)體系結(jié)構(gòu)設(shè)計(jì)、功能模塊設(shè)計(jì)、界面導(dǎo)航設(shè)計(jì)、數(shù)據(jù)庫設(shè)計(jì)、系統(tǒng)安全性設(shè)計(jì)以及系統(tǒng)關(guān)鍵問題及解決方案的設(shè)計(jì)等。其中充分考慮考試系統(tǒng) 功能 模塊與網(wǎng)絡(luò)課程 生成 系統(tǒng)以及其它 子 功能模塊的數(shù)據(jù)共享與協(xié)調(diào)通信等問題。 4. 系統(tǒng)開發(fā)階段：依據(jù)前面的設(shè)計(jì)，搭建程序開發(fā)運(yùn)行環(huán)境，根據(jù)詳細(xì)設(shè)計(jì)方案進(jìn)行程序的編寫和調(diào)試。 5. 系統(tǒng)測試、完善階段：根據(jù)制定的測試計(jì)劃，依次進(jìn)行單元測試、集成測試和系統(tǒng)測試，在測試中發(fā)現(xiàn)問題，解決問題。同時聘請專家教師對系統(tǒng)進(jìn)行評價 ，并根據(jù)評價意見與建議不斷修改完善系統(tǒng)。 第二章 在線考試系統(tǒng)理論依據(jù)分析 5 第二章 在線考試系統(tǒng)理論 依據(jù)分析 理論和實(shí)踐是相輔相成、互相促進(jìn)的，理論指導(dǎo)了人們的實(shí)踐，而實(shí)踐又推動了理論的完善與發(fā)展?？荚囅到y(tǒng)是一項(xiàng)理論性強(qiáng)，實(shí)際意義重大的復(fù)雜工程，需要用更多、更實(shí)際的理論和方法來指導(dǎo)系統(tǒng)的設(shè)計(jì)。 庫建設(shè)理論 題庫可以存儲試題，又有輔助命題和記錄分析考試結(jié) 果 的功能。隨著題庫規(guī)模的不斷增大，對組卷的智能化、科學(xué)化要求越來越高，并需實(shí)時統(tǒng)計(jì)出考試結(jié)果分析數(shù)據(jù)，因此題庫建設(shè)理論顯 得 尤為重要，是在線考試諸多理論中的根本。 庫的 定義與特征 題庫是適應(yīng)考試事業(yè)大規(guī)模發(fā)展，考試過程的科學(xué)化、標(biāo)準(zhǔn)化的需要發(fā)展起來的，國內(nèi)外許多教育機(jī)構(gòu)、軟件公司都在傾心研究題庫。 題庫（ 按照一定的教育測量理論，在計(jì)算機(jī)系統(tǒng)中實(shí)現(xiàn)的某個學(xué)科題目的集合，是在數(shù)學(xué)模型基礎(chǔ)上建立起來 的 教育測量工具 8。題庫的任務(wù)是拼制不同測量目的的試卷，是考試系統(tǒng)的基礎(chǔ)與根本，因此題庫應(yīng)該滿足一定的要求 9。 1. 題庫中的試題技術(shù)參數(shù)應(yīng)當(dāng)齊備，試題質(zhì)量要有保證。題庫的基本組成單位是單個試題，試題的各項(xiàng)參考技術(shù)參數(shù)必須統(tǒng)一明確，試題質(zhì)量要有保證，這樣便于用戶按 照一定的科學(xué)程序，根據(jù)試題的技術(shù)參數(shù)挑選試題，優(yōu)化組合成符合一定內(nèi)容、性質(zhì)、難度等不同要求的優(yōu)質(zhì)試卷，使試卷符合預(yù)定的各項(xiàng)質(zhì)量指標(biāo)，保證考試的可信性和有效性。 2. 題庫中題目數(shù)量充足，比例結(jié)構(gòu)合理。題量小就難以生成滿足特定要求的試卷，也不能滿足多次考試的需要。同時題目的比例結(jié)構(gòu)要科學(xué)合理，主要指內(nèi)容范圍、能力層次、難 易 比例、題目類型等方面。否則，題庫編 制 試卷的各種優(yōu)越性就難以發(fā)揮。 3. 題庫中試題必須按科學(xué)原則分類、存儲，形成有機(jī)整體。試題存儲的目的在于使用，只有按科學(xué)原則把試題系統(tǒng)的組織起來，才能準(zhǔn)確、方便、靈活 地檢索和第二章 在線考試系統(tǒng)理論依據(jù)分析 6 調(diào)用。為使信息使用時充分發(fā)揮在管理學(xué)上的優(yōu)越性，還應(yīng)使存儲的試題有完備的信息，一般，除試題內(nèi)容、參考答案、評分標(biāo)準(zhǔn)外，還應(yīng)包括考核的知識點(diǎn)與目標(biāo)層次，試題技術(shù)參數(shù)，使用記錄等。 4. 題庫必須是動態(tài)的。首先，各門學(xué)科都在不斷地發(fā)展變化，因此各學(xué)科題庫內(nèi)容也應(yīng)不斷的更新，需及時添加、修改、刪除試題。其次，考生水平也在不斷提高，這樣試題參數(shù)和考核能力層次也會有所變化。所以，題庫的動態(tài)性不但表現(xiàn)在測試內(nèi)容的更新上，而且還表現(xiàn)在試題統(tǒng)計(jì)特征的變化上。題庫內(nèi)容的動態(tài)性保證了它能及時靈活的去為社會需要服務(wù)，使考試機(jī)構(gòu) 不斷積累和擴(kuò)大命題研究成果。 庫建設(shè)實(shí)踐程序 題庫建設(shè)是一項(xiàng)相當(dāng)復(fù)雜艱巨的系統(tǒng)工程，需要各學(xué)科專業(yè)人員消耗大量的人力物力協(xié)同努力才能完成，不經(jīng)過充分的認(rèn)證和缺乏理論指導(dǎo)就進(jìn)行題庫建設(shè)的行為是盲目的，勢必會造成人力物力財(cái)力的浪費(fèi)。題庫建設(shè)不僅需要教育測量學(xué)理論的指導(dǎo)，還要用系統(tǒng)工程的觀念去建設(shè)和管理，才能保證題庫系統(tǒng)的質(zhì)量。題庫建設(shè)一般包括以下幾個工作階段 91011。 1. 試題的編制與匯集 試題編制之前首先要有一個成熟穩(wěn)定的考試大綱，這個大綱規(guī)定的考試性質(zhì)、內(nèi)容、目標(biāo)能力層次、難度、題型 、分量、權(quán)重、考試時間等內(nèi)容要符合考試的對象和用途?？荚嚧缶V是命題的依據(jù)，題庫中的題目必須根據(jù)考試大綱進(jìn)行征集和編寫，題目在學(xué)科知識方面無可挑剔。審題是保證試題質(zhì)量的關(guān)鍵，因此一般要組織專人審查、專家組會審后才能入庫。題目的編制和匯集是題庫建設(shè)的關(guān)鍵，關(guān)系到整個題庫的質(zhì)量、試卷的質(zhì)量以及統(tǒng)計(jì)評價的準(zhǔn)確程度。此階段應(yīng)由學(xué)科教學(xué)人員和心理與教育測量人員共同協(xié)作完成，但主要責(zé)任應(yīng)由學(xué)科教學(xué)人員負(fù)責(zé) ， 由組織人員進(jìn)行協(xié)調(diào)。 2. 試題統(tǒng)計(jì)分析 為保證試題的科學(xué)性和有效性，所有的試題在有可能的情況下都需經(jīng)過測試。測試就是把寫 好的試題拿到與將來考生相一致的樣本中試驗(yàn)以獲取題目的技術(shù)參數(shù)，即對每一道試題都有技術(shù)分析，并取得統(tǒng)計(jì)參數(shù)。試題分析可以了解題目是否達(dá)到大綱的要求，作為試題篩選的依據(jù)。試題分析還可以確定試題難度、區(qū)分度等第二章 在線考試系統(tǒng)理論依據(jù)分析 7 技術(shù)參數(shù)，這些參數(shù)在組卷、試題、試卷的統(tǒng)計(jì)評價中有重要的意義。試題的分析還要把試題參數(shù)進(jìn)行等值處理，因?yàn)椴煌瑴y驗(yàn)試卷的題目的各項(xiàng)技術(shù)參數(shù)是與考生團(tuán)體有關(guān)的。同樣的題目，在不同的考生團(tuán)體中會求得不同的題目參數(shù)，即它們在不同的量表之中。題目參數(shù)的等值處理就是將所有的試題參數(shù)統(tǒng)一到同一個坐標(biāo)系中，以確保試題參數(shù)的可 比較性，這樣十分有利于題庫建設(shè)。此階段應(yīng)由學(xué)科教學(xué)人員、心理與教育測量人員以及計(jì)算機(jī)專業(yè)人員協(xié)作完成，心理與教育測量人員應(yīng)居主導(dǎo)地位，由組織人員進(jìn)行協(xié)調(diào)。 3. 存儲建庫 一般題庫的規(guī)模都比較大，這就 需要 采用緊湊、安全、高效的存儲方式，設(shè)計(jì)一個靈活方便的題庫生成以及檢索修訂程序，以便能方便的管理題庫。題庫中的試題存儲時要有“序”，這個“序”既取決于學(xué)科體系結(jié)構(gòu)本身 又 取決于考試性質(zhì)目的對題庫統(tǒng)計(jì)特征的要求。題庫要采用恰當(dāng)?shù)臉?biāo)引語言，按照科學(xué)的原則與順序，把試題和應(yīng)有的信息資料有機(jī)地組織起來 12。此階段應(yīng)由計(jì)算機(jī) 專業(yè)人員承擔(dān)，但仍需心理與教育測量人員的配合，組織人員的協(xié)調(diào)。 4. 動態(tài)維護(hù) 題庫具有動態(tài)性，應(yīng)隨著學(xué)科內(nèi)容和考生水平的不斷發(fā)展變化而變化，決不是一成不變的。動態(tài)的維護(hù)，就是要經(jīng)常檢查試題的思想性、科學(xué)性，根據(jù)學(xué)科內(nèi)容和考生水平的發(fā)展不斷的對題庫中的試題做相應(yīng)的補(bǔ)充、修改和刪除工作，及時修正試題的各項(xiàng)技術(shù)參數(shù)。題庫的修訂要精心規(guī)劃，嚴(yán)格執(zhí)行，考試系統(tǒng)在設(shè)計(jì)題庫的結(jié)構(gòu)時就要考慮到以后的修改和擴(kuò)充需求，使系統(tǒng)在整體框架不變、能保持系統(tǒng)相對穩(wěn)定的前提下，具有一定的擴(kuò)展能力。此階段更需依賴管理人員的組織協(xié)調(diào)，并在 學(xué)科教 學(xué)人員和心理、教育測量人員、計(jì)算機(jī)專業(yè)人員和管理人員 這四種人員的共同努力協(xié)作下完成。 庫建設(shè)理論 對本研究的指導(dǎo) 題庫建設(shè)是個艱巨的系統(tǒng)工程，整個工作過程必須要有堅(jiān)實(shí)、科學(xué)的理論基礎(chǔ)。從題庫的功能和題庫建設(shè)的理論依據(jù)來看，建立題庫不僅涉及教育測量理論，還涉及到多方面的教育教學(xué)理論 912，對本研究有重要指導(dǎo)意義的 理論有： 1. 學(xué)科體系與教育目標(biāo)層次分類理論 第二章 在線考試系統(tǒng)理論依據(jù)分析 8 如何劃分試題學(xué)科體系與目標(biāo)層次以及如何描述題庫中試題考核內(nèi)容，即題庫中的試題是用來測量什么，以及試題之間是如何分類和分層的，是命題與征題規(guī) 劃的基本依據(jù)。 本研究中，試題認(rèn)知度技術(shù)參數(shù)采用布盧姆關(guān)于認(rèn)知領(lǐng)域的教育目標(biāo)分類 ， 即分為知道、領(lǐng)會、運(yùn)用、分析、綜合 和 評價六個等級。 2. 題型功能與命題技術(shù) 題型功能與命題技術(shù)理論提供了編制試題的原則和方法，也提供了評價題庫結(jié)構(gòu)的根本標(biāo)準(zhǔn)，是題庫建設(shè)理論的一個重要方面。 本研究中， 一張?jiān)嚲硎怯啥喾N題型搭配組成的，如何確定題型及各題型所占比例，如何有效的使用各種題型都是需要考慮的。由于考生解答選擇、填空題所需的時間相對較少，即使對于同一內(nèi)容的試題，也可按照知識和能力的不同側(cè)重點(diǎn)選編不同的試題，變化余地較大。因此 本研究 利用雙向細(xì)目表規(guī)劃試卷藍(lán)圖，在一定程度上克服了教師 的 主觀隨意性，同時本研究 推薦 ， 在試卷中增加客觀試題的比重 以 增加知識和能力的考察面，避免閱卷教師主觀因素所造成的評分標(biāo)準(zhǔn)不一致。 3. 題目統(tǒng)計(jì)分析技術(shù) 題目分析技術(shù)是科學(xué)地修訂、篩選和調(diào)取使用試題的重要理論基礎(chǔ)。測驗(yàn)題目是否優(yōu)良，必須有技術(shù)參數(shù)來說明， 否則 就不能科學(xué)地進(jìn)行試題篩選、修訂和調(diào)取使用工作。 因此，本研究中各項(xiàng)技術(shù)參數(shù)均以 列表 形式 呈現(xiàn) 給用戶，保證技術(shù)參數(shù)的全面性。 同時根據(jù)試題的通過率及時調(diào)整試題參數(shù)，保證技術(shù)參數(shù)的科學(xué)有效性。 4. 測驗(yàn)等值 測驗(yàn)等值化的目的是 尋找不同測驗(yàn)形式之間的分?jǐn)?shù)轉(zhuǎn)換關(guān)系，把不同測驗(yàn)形式上的分?jǐn)?shù)都轉(zhuǎn)換到同一度量系統(tǒng)上。測驗(yàn)等值本身包括兩個方面：考生測驗(yàn)分?jǐn)?shù)的等值和試題參數(shù) 的 等值。前者解決考生在不同測驗(yàn)中總分的轉(zhuǎn)換問題，后者解決不同測驗(yàn)上的試題的難度、區(qū)分度的對應(yīng)關(guān)系問題。 本研究中考生試卷分?jǐn)?shù)采用原始分?jǐn)?shù)和標(biāo)準(zhǔn)分?jǐn)?shù)兩種 表示 方式，使同一試卷內(nèi)部分?jǐn)?shù)可做相對和絕對評價分析，也使得不同試卷間的分?jǐn)?shù)具有可比性。 5. 試題和試卷的拼合及質(zhì)量評價。 本研究中， 每次測驗(yàn)后都會 自動對 測驗(yàn)后的分?jǐn)?shù)進(jìn)行統(tǒng)計(jì)分析，獲得符合特定考核目的的統(tǒng)計(jì)數(shù)據(jù)如平均分、標(biāo)準(zhǔn)差、分?jǐn)?shù)分 布狀態(tài)（包括及格率等），以及測量標(biāo)準(zhǔn)誤（信度）等。通過 這些 分析 數(shù)據(jù) 來了解考生對教材、教法的適應(yīng)情況以及第二章 在線考試系統(tǒng)理論依據(jù)分析 9 由此來診斷教學(xué)過程中存在的問題，以便調(diào)整教學(xué)策略。 題庫建設(shè)與教育理論的聯(lián)系，還有其他一些方面，即題庫建設(shè)是學(xué)科的綜合性應(yīng)用，當(dāng)然仍以教育測量、教育統(tǒng)計(jì)理論作為主導(dǎo)。 育測量理論 教育測量是根據(jù)教育目標(biāo)的要求，按照一定的規(guī)則對教育活動的效果加以數(shù)量化測定的過程，主要用于對考生精神特征的測定。教育測量根據(jù)測驗(yàn)?zāi)繕?biāo)的不同可以分為學(xué)業(yè)成就測驗(yàn)、智力測驗(yàn)、能力傾向測驗(yàn)與人格測驗(yàn)。學(xué)業(yè)成就測驗(yàn)即考生學(xué)習(xí)效果 的測驗(yàn)，是關(guān)于教學(xué)目標(biāo)的考試 13。本研究把“考試”界定為學(xué)業(yè)成就測驗(yàn)，因此，測量理論完全適用于“考試”這一特殊教育形式。 教育測量理論的發(fā)展大體經(jīng)歷了兩個階段， 20 世紀(jì) 50 年代以前是經(jīng)典測量理論階段； 50 年代以后至今是多種理論并存階段。除了經(jīng)典測量理論外，概化理論和項(xiàng)目反應(yīng)也被廣泛接受并運(yùn)用到測量的實(shí)踐活動中。 典測量理論 20 世紀(jì) 20 年代開始以真分?jǐn)?shù)理論（ 代表的經(jīng)典測量理論（ 稱 漸發(fā)展起來，并傳入 我國。 20 世紀(jì) 50 年代初期，格里克森出版的心理測驗(yàn)理論標(biāo)志著經(jīng)典的心理計(jì)量學(xué)理論的成熟，后來洛德與諾維克合編的心理測驗(yàn)分?jǐn)?shù)的統(tǒng)計(jì)理論將經(jīng)典測量理論推至頂峰。 1. 經(jīng)典測量理論的基本內(nèi)容 911 經(jīng)典測量理論的特點(diǎn)之一就是各種測驗(yàn)的參數(shù)須從考生樣本中求得，經(jīng)典測量理論的基礎(chǔ)是真分?jǐn)?shù)模型。所謂的“真分?jǐn)?shù)”其數(shù)學(xué)上的定義為：測量上被試的真分?jǐn)?shù)是觀測分?jǐn)?shù)（或說測量實(shí)得分?jǐn)?shù)）的期望值?？梢杂孟率奖硎荆?T X （ 2 1） 其中： X 為被試在測驗(yàn)上的實(shí)得分?jǐn)?shù)， X 代表 X 的數(shù)學(xué)期望， T 即被試的真分?jǐn)?shù)。 顯然，在此意義上的真分?jǐn)?shù)是不能直接測量得到的，因?yàn)閾?jù)式（ 2 1），可將 ： 第二章 在線考試系統(tǒng)理論依據(jù)分析 10 1 （ 2 2） 從信息論觀點(diǎn)出發(fā)，可對真分?jǐn)?shù)作出定性的解釋：任何一組信息都包含有真正的信息信號和無關(guān)的信息（噪音）。心理與教育測量的目的在于獲得被試的真正信息，排除無關(guān)信息。測量上，真正的信息稱為真分?jǐn)?shù)，無 關(guān)信息稱為誤差。因?yàn)檎`差，直接測量而得的觀測分?jǐn)?shù)便會在一定范圍內(nèi)波動。經(jīng)典測量理論的真分?jǐn)?shù)模型對此進(jìn)行了簡單而有效的描述，提出了一系列基本定義和推導(dǎo)。 （ 1） X T E （ 2 3） 其中， X 是被試在測驗(yàn)上的觀測分?jǐn)?shù)， T 是被試的真分?jǐn)?shù)， E 為測量誤差。此式定義：觀測分?jǐn)?shù)是真分?jǐn)?shù)與誤差分?jǐn)?shù)之和。 （ 2） （ 2 4） 此式定義：真分?jǐn)?shù)與觀測分?jǐn)?shù)的各自平均數(shù)相等。 （ 3） E 0 （ 2 5） 此式定義：誤差分?jǐn)?shù)的期望值為 0。 （ 4） 0 （ 2 6） 此式定義：真分?jǐn)?shù)與誤差分?jǐn)?shù)的相關(guān)為 0。 （ 5） 021 （ 2 7） 此式定義：不同測驗(yàn)誤差之間的相關(guān)為 0。 依據(jù)上述的定義，所有有關(guān)經(jīng)典測量理論及方法，所應(yīng)用的各種公式及定義，均是依據(jù)真分?jǐn)?shù)理論的模型推導(dǎo)而來。 基本假設(shè)、信度和效度被稱為經(jīng)典測驗(yàn)理論的三大支柱，題目分析和標(biāo)準(zhǔn)化是它的方法體系。在上述理論的基礎(chǔ)上，經(jīng)典測量理論建立了一整套質(zhì)量指標(biāo)的計(jì)算公式，完善了測驗(yàn)的標(biāo)準(zhǔn)化程序，具有很 大 的使用價值。 2. 經(jīng)典測量理論的優(yōu)點(diǎn)與缺點(diǎn) 經(jīng)典測量理論的優(yōu)點(diǎn)在于： （ 1） 以弱假設(shè)為基礎(chǔ)，這些弱假設(shè)條件容易被絕大多數(shù)測驗(yàn)數(shù)據(jù)資料所滿足。 （ 2） 具有完善的測驗(yàn)理論以及簡明的題目和測驗(yàn)統(tǒng)計(jì)分析方法，易于掌握和理解。 第二章 在線考試系統(tǒng)理論依據(jù)分析 11 （ 3） 我國的教育工作者在實(shí)踐中加深了對經(jīng)典測量理論的認(rèn)識，形成和完善了一套適合我國國情的具體應(yīng)用方法和應(yīng)用原則。 經(jīng)典測量理論的不足主要表現(xiàn)在以下幾個方面： （ 1） 經(jīng)典測量理論的題目參數(shù)（ 如題目難度、區(qū)分度）是通過該題的人數(shù)的平均得分率和題分與試卷分的相關(guān)計(jì)算求得的，所以會受到不同考生樣本組能力水平的影響。 （ 2） 在經(jīng)典測驗(yàn)理論的條件下，題目參數(shù)與考生得分是在不同的基礎(chǔ)上分別求得的，所以考生能力的估計(jì)會由于測驗(yàn)的改變而改變。 （ 3） 經(jīng)典測量理論中的嚴(yán)格平行測驗(yàn)假設(shè)和誤差與真分?jǐn)?shù)不相關(guān)，在 現(xiàn)實(shí) 中不可能實(shí)現(xiàn)。 化理論 概化理論的基本觀點(diǎn)形成于 20世紀(jì) 60年代末、 70年代初。以克龍巴赫 (人的系列論文和論著的問世為標(biāo)志 ，但正式提出這一理論的是 人在1972 年出版的行為測量的可