1、測(cè)驗(yàn)的項(xiàng)目分析,項(xiàng)目的難度 項(xiàng)目的鑒別力 （區(qū)分度） 項(xiàng)目難度和區(qū)分度的關(guān)系 項(xiàng)目分析的特殊問(wèn)題,項(xiàng)目分析的定義： 指根據(jù)被試的反應(yīng)，對(duì)組成測(cè)驗(yàn)的各個(gè)題目（項(xiàng)目）進(jìn)行分析，包括定性分析和定量分析，幫助篩選和修訂項(xiàng)目。 定性分析：涉及項(xiàng)目編寫的恰當(dāng)性、有效性以及表達(dá)是否清楚。 定量分析：主要指對(duì)項(xiàng)目的難度和區(qū)分度的分析。,研究生入學(xué)考試,一、項(xiàng)目的難度,（一）定義 （二）估計(jì)難度的方法,1、以答對(duì)百分比（或比率）來(lái)估計(jì)難度 2、多項(xiàng)選擇項(xiàng)目的校正計(jì)算法 3、使用項(xiàng)目難度等距量表,一、項(xiàng)目的難度,（一）定義,難度是表示題目難易程度的指標(biāo)。這一概念在能力測(cè)驗(yàn)里稱為項(xiàng)目的難度水平，而在非能力測(cè)驗(yàn)里，稱

2、為“通俗性”或“流行性”水平(指一總體中被試在答案范圍里回答項(xiàng)目的程度),難度的計(jì)算,以答對(duì)百分比（或比率）來(lái)估計(jì)難度 二分法計(jì)分的測(cè)題 PR/N（P:試題的難度 R：答對(duì)該題的人數(shù)；N：參加測(cè)驗(yàn)者的總數(shù)） 非二分法計(jì)分項(xiàng)目的難度計(jì)算：,X：全體考生在該試題上所得的平均分?jǐn)?shù)；Xmax：該題的滿分分?jǐn)?shù)。,難度的計(jì)算,以答對(duì)百分比（或比率）來(lái)估計(jì)難度 分組法 P=(PH+PL)/2 PH ：高分組答對(duì)該題目的百分比 ；PL ：低分組答對(duì)該題目的百分比 例如：設(shè)有370名被試，取其中成績(jī)最高的27（100人）人定高分組，成績(jī)最低的27（100人）定為低分組，對(duì)于某一道試題，若高分組有60人答對(duì)，低分

3、組有30人答對(duì)。,多項(xiàng)選擇項(xiàng)目的校正計(jì)算法,矯正公式為： CP=(KP1)/(K1) CP：矯正后的難度；P：未矯正的難度；K：選項(xiàng)的數(shù)目,舉例：一個(gè)五擇一的測(cè)題難度指數(shù)為0.50，一個(gè) 四擇一的測(cè)題難度指數(shù)為0.53，哪一題的難度大？,使用項(xiàng)目難度等距量表,使用項(xiàng)目難度等距量表的理由 第一：測(cè)題的難度一般用答對(duì)某題的人數(shù)比率或百分比表示。百分量表是等級(jí)量表，不是等距量表 第二，難度量表時(shí)反序而行的，P值越大，項(xiàng)目越容易,例如：三個(gè)項(xiàng)目的難度指數(shù)分別為0.50，0.60，0.70,轉(zhuǎn)換難度等距量表的方法,當(dāng)樣本容量很大時(shí)，測(cè)驗(yàn)分?jǐn)?shù)接近正態(tài)分布，如果把測(cè)題的難度指數(shù)P作為正態(tài)曲線下的面積，查標(biāo)準(zhǔn)

4、正態(tài)分布表，就可以將以等級(jí)量表表示的P值轉(zhuǎn)換成具有相等單位的等距量表Z值。,注意：P作為正態(tài)曲線下面積時(shí)，要從右向左而行,例如：三個(gè)項(xiàng)目的難度指數(shù)分別為0.50，0.60，0.70,P0.5，對(duì)應(yīng)Z0；P0.6，對(duì)應(yīng)Z0.25；P0.7，對(duì)應(yīng)Z0.52。前面兩者相差0.25，后兩者相差0.27，顯然差距不相等的,難度與測(cè)驗(yàn)分?jǐn)?shù)的分布,一個(gè)測(cè)驗(yàn)的難度取決于組成這個(gè)測(cè)驗(yàn)的各個(gè)試題的難度，從測(cè)驗(yàn)總分的分布情形，可以大致知道整個(gè)測(cè)驗(yàn)的難度。,注：a是正偏態(tài)分布；b是負(fù)偏態(tài)分布,難度水平的確定,根據(jù)測(cè)驗(yàn)的目的、項(xiàng)目的形式和測(cè)驗(yàn)的性質(zhì)來(lái)確定 1、學(xué)業(yè)考試： 目的是教學(xué)內(nèi)容掌握的情況，所以只要認(rèn)為內(nèi)容是重要

5、的，就可以選擇，而不論難度。,2、人員選擇： 采用難度值接近錄取率的項(xiàng)目。錄取率為40，則理想的難度在0.40左右。 0.50左右難度的題目，可以對(duì)全體被試作最大程度的區(qū)分。 3、對(duì)于選擇題 難度值要大于概率。 如難度值等于或小于概率，如鑒別力好，通過(guò)者都是水平最高的，也可保留。,4、對(duì)于人格測(cè)驗(yàn) 人格測(cè)驗(yàn)的項(xiàng)目不存在難度問(wèn)題，與此相應(yīng)的指標(biāo)叫通俗性，即同一類人在答案方向上回答 的人數(shù)，計(jì)算方法同難度計(jì)算方法。,項(xiàng)目的鑒別力（區(qū)分度）,定義 估計(jì)方法 區(qū)分度的相對(duì)性 難度與區(qū)分度的關(guān)系 項(xiàng)目分析的特殊問(wèn)題,鑒別力,定義：項(xiàng)目的鑒別力又稱為區(qū)分度。它是指項(xiàng)目對(duì)不同水平的被試反應(yīng)的區(qū)分程度和鑒別能

6、力。 確定區(qū)分度的方法包括鑒別指數(shù)法、方差法和相關(guān)法。,（一）鑒別指數(shù)法 當(dāng)測(cè)量分?jǐn)?shù)是一個(gè)連續(xù)變量時(shí)，可從分布的兩端選出高分組（H）和低分組（L），然后將高分組和低分組通過(guò)每個(gè)項(xiàng)目的人數(shù)用百分比來(lái)表示，這兩個(gè)百分?jǐn)?shù)之間的差異就提供了題目區(qū)分度的指標(biāo)。 D=PHPL D為鑒別指數(shù) PH為高分組某項(xiàng)目通過(guò)人數(shù)百分比 PL低分組某項(xiàng)目通過(guò)人數(shù)百分比。 D值越大，項(xiàng)目區(qū)分度越高，項(xiàng)目越有效。,例：某高中物理測(cè)驗(yàn)，被試共18人，高分組和低分組若各取總?cè)藬?shù)的27，則兩組各為5人，第5題高分組5人全部答對(duì)，低分組5人中有1人答對(duì) 。則該題的區(qū)分度是多少？,鑒別指數(shù)標(biāo)準(zhǔn),（二）方差法,方差表示一組數(shù)據(jù)離散程度

7、。方差大，數(shù)據(jù)分散。被試在某一試題上的得分越分散，則該試題鑒別力越大。,當(dāng)n30時(shí)，屬統(tǒng)計(jì)上的小樣本，改用：,項(xiàng)目與總分相關(guān),點(diǎn)二列相關(guān)rpbi系數(shù) 二列相關(guān)系數(shù) 對(duì)非二值記分的項(xiàng)目的估計(jì) 項(xiàng)目的組間相關(guān),點(diǎn)二列相關(guān)rpbi系數(shù),（1）適用性：適用于一個(gè)變量是連續(xù)變量，另一個(gè)是二分變量的資料。 例如，某項(xiàng)目答對(duì)記1分，答錯(cuò)記0分，則此項(xiàng)目為二分變量，而總分為連續(xù)變量。 （2）計(jì)算公式：,某學(xué)校的15名學(xué)生總分和某項(xiàng)目的解答情況,二列相關(guān)系數(shù),適用于兩個(gè)連續(xù)測(cè)量的變量，但其中有一個(gè)由于某種原因被分成兩個(gè)類別。 計(jì)算公式： Y：正態(tài)分布下答對(duì)百分比p所在位置的曲線高度。 其余字母的意義與點(diǎn)二列相關(guān)

8、公式相同,對(duì)非二值記分的項(xiàng)目的估計(jì),項(xiàng)目與總分均為連續(xù)變量，采用積距相關(guān)公式,例：設(shè)有A、B、C、D、E5個(gè)被試，在測(cè)驗(yàn)的某個(gè)題目上的得分X和Y總分如下表：,項(xiàng)目的組間相關(guān),(1)定義 項(xiàng)目的組間相關(guān)又稱為項(xiàng)目間的相互相關(guān)，它是指整個(gè)測(cè)驗(yàn)中各個(gè)測(cè)題之間的相互關(guān)系。 (2)估計(jì)方法： 四項(xiàng)相關(guān)和相關(guān) 積距相關(guān),四項(xiàng)相關(guān)和相關(guān),使用條件：二值記分的項(xiàng)目的組間相關(guān),舉例：某測(cè)驗(yàn)中的4道題的回答情況如下表,非二值記分項(xiàng)目組間相關(guān)的估計(jì)法,區(qū)分度的相對(duì)性,第一，采用不同的計(jì)算方法，區(qū)分度的值不同 第二，用相關(guān)法計(jì)算的區(qū)分度值受樣本大小影響。 第三，用兩個(gè)極端組通過(guò)率的差異作為區(qū)分度的指標(biāo)，其值受分組標(biāo)準(zhǔn)

9、的影響。 第四，區(qū)分度值的大小與樣本的同質(zhì)性有關(guān)。,難度與區(qū)分度的關(guān)系,區(qū)分度與難度密切相關(guān)。難度越接近0.5，項(xiàng)目的潛在區(qū)分度越大，難度越接近1.00或0，項(xiàng)目的潛在區(qū)分度越小。 項(xiàng)目的組間相關(guān)與難度的關(guān)系 若所有的項(xiàng)目都完全相關(guān)(r1)，并且都是0.50的難度水平，則測(cè)驗(yàn)結(jié)果呈U型分別 難度的分布廣一些、梯度多一些， 才能取得良好的區(qū)分度 并非要全部項(xiàng)目難度都是.50，實(shí)際需要測(cè)驗(yàn)的平均難度在.50就最好。,項(xiàng)目分析的特殊問(wèn)題,（一）備選答案的反應(yīng)模式 多重選擇題依然需要分析被試對(duì)各個(gè)備選答案的反應(yīng)模式。 1、正確的備選答案被所有受試選擇，說(shuō)明題目太容易或題目可能提供了某種暗示。 2、錯(cuò)誤

10、答案沒(méi)有一個(gè)被試選擇，說(shuō)明該選項(xiàng)不具迷惑性，錯(cuò)得過(guò)于明顯。最少要有2以上的人選擇，否則這個(gè)備選答案要去掉。 3、如果被試都選擇了同一錯(cuò)誤答案，可能是編著測(cè)驗(yàn)時(shí)把正確答案定錯(cuò)了,4、高分組被試的選擇集中在兩個(gè)答案上，二者選擇率相近，說(shuō)明該題可能有兩個(gè)正確答案或在某種意義上另一個(gè)選擇也有一定的意義。 5、高分組對(duì)正確答案的選擇與低分組相等或低于后者，說(shuō)明該題所考察的東西與被試水平無(wú)關(guān)，即不具有辨別力。 6、一個(gè)題目被試未作答的人數(shù)多（速度測(cè)驗(yàn)除外）或選擇各個(gè)備選答案的人數(shù)幾乎相等，說(shuō)明該題可能過(guò)難或題意不清。,(二)標(biāo)準(zhǔn)參照測(cè)驗(yàn)的項(xiàng)目分析 以上介紹的是常模參照測(cè)驗(yàn)的項(xiàng)目分析方法，不完全適用標(biāo)準(zhǔn)參照

11、測(cè)驗(yàn)，需要注意以下方面。 1、難度分析 標(biāo)準(zhǔn)參照測(cè)驗(yàn)可以采用常模參照測(cè)驗(yàn)的方法計(jì)算難度，但對(duì)難度水平的要求不同，只要認(rèn)為項(xiàng)目重要，就可包括在測(cè)驗(yàn)中，而不管其通過(guò)率和鑒別力如何。 2、區(qū)分度分析 標(biāo)準(zhǔn)參照測(cè)驗(yàn)不適合用相關(guān)法計(jì)算區(qū)分度，但可以采用類似鑒別指數(shù)的方法計(jì)算，即比較兩組通過(guò)率。,(三)速度測(cè)驗(yàn)的項(xiàng)目分析 1、項(xiàng)目特點(diǎn)： 項(xiàng)目容易，多數(shù)人都可以通過(guò)。 項(xiàng)目多，有時(shí)限，很少有人做完全部項(xiàng)。 2、通過(guò)率和區(qū)分度的特征 測(cè)驗(yàn)前部項(xiàng)目通過(guò)率高，后部低。 前部區(qū)分度低，后部區(qū)分度被高估。 從速度測(cè)驗(yàn)得到的項(xiàng)目分析的指標(biāo)，主要反映了項(xiàng)目的位置，而不反映項(xiàng)目的難度和區(qū)分度。 3、前面介紹的分析方法不適用