喬恩·米勒公民科學(xué)素養(yǎng)測(cè)量的評(píng)論

科學(xué)素養(yǎng)（SL）成為科學(xué)教育和科學(xué)傳播的研究焦點(diǎn)已經(jīng)四十余年了。20世紀(jì)70年代，喬恩·米勒提出了一組核心基本科學(xué)詞匯作為閱讀和理解當(dāng)代科學(xué)問(wèn)題的知識(shí)基礎(chǔ)，同時(shí)，他提出概率的應(yīng)用、可控實(shí)驗(yàn)和占星術(shù)可作為對(duì)科學(xué)研究認(rèn)識(shí)的理解基礎(chǔ)。米勒使用開(kāi)放式、封閉式（即是-非題）兩部分的問(wèn)題來(lái)評(píng)估人們對(duì)上述核心科學(xué)詞匯和科學(xué)研究的認(rèn)識(shí)與理解，評(píng)估的實(shí)施采取面對(duì)面或電話(huà)方式進(jìn)行。以上思想和方法通常被稱(chēng)為米勒式公民科學(xué)素養(yǎng)（CSL）測(cè)量。自20世紀(jì)70年代末以來(lái)，在NSF的資助下，米勒應(yīng)用上述方法在美國(guó)定期進(jìn)行CSL測(cè)量；中國(guó)在內(nèi)的許多國(guó)家也逐漸采用了這種方法[1]，鑒于它在公眾科學(xué)技術(shù)知識(shí)研究領(lǐng)域的聲譽(yù)及持續(xù)的影響，對(duì)它的效度和信度進(jìn)行評(píng)價(jià)是非常必要的。本評(píng)述采用公認(rèn)的效度和信度框架[2]。效度是指對(duì)測(cè)量過(guò)程和結(jié)果的適度要求；建立有效性證據(jù)的過(guò)程稱(chēng)為效度驗(yàn)證。第一種類(lèi)型的效度驗(yàn)證可以是預(yù)定內(nèi)容與實(shí)際測(cè)量?jī)?nèi)容的匹配度，即內(nèi)容效度。第二種類(lèi)型的效度驗(yàn)證是基于標(biāo)準(zhǔn)的，即效標(biāo)效度，為了建立效標(biāo)效度，必須確定一個(gè)標(biāo)準(zhǔn)變量，該標(biāo)準(zhǔn)變量還必須是可用且有效的。第三種類(lèi)型的效度被稱(chēng)為構(gòu)想效度，其核心是關(guān)于實(shí)際測(cè)量的預(yù)期心理結(jié)構(gòu)的適度要求。第四類(lèi)型的效度驗(yàn)證是結(jié)論效度，其側(cè)重于利用測(cè)量分?jǐn)?shù)對(duì)目標(biāo)人群所產(chǎn)生的正面和負(fù)面的影響。一構(gòu)想效度1983年，米勒開(kāi)始準(zhǔn)備測(cè)量SL[3]。他提出SL由三個(gè)維度組成：理解科學(xué)研究（他后來(lái)稱(chēng)為科學(xué)探究的本質(zhì)）；理解科學(xué)的構(gòu)造或者術(shù)語(yǔ)；有一定的科學(xué)態(tài)度且能夠理解當(dāng)代政治問(wèn)題涉及的科學(xué)和技術(shù)[4]及某種程度上理解科學(xué)技術(shù)對(duì)個(gè)人及社會(huì)的影響。盡管有上述三個(gè)維度，米勒的SL測(cè)量還是一直有意發(fā)展為“單一維度的SL”[3]。然而，早年他對(duì)“單一維度的SL”概念并不明確[3][5]。從1998年開(kāi)始[6]，米勒不再使用SL的術(shù)語(yǔ)，而是明確地提到他的測(cè)量?jī)A向于本杰明·沈[7]的公民SL（CSL）理論。本杰明·沈提出了三種類(lèi)型的SL，包括：實(shí)踐、公民和文化。在前期工作基礎(chǔ)上，米勒[8]將“公民的科學(xué)素養(yǎng)”（CSL）定義為人們理解科學(xué)術(shù)語(yǔ)和科學(xué)概念的水平，并足以閱讀日?qǐng)?bào)或雜志，足以理解某種辯論或爭(zhēng)議中相互對(duì)立的論點(diǎn)的本質(zhì)。延續(xù)他早期的SL三維度理論，米勒認(rèn)為只有三維度中的每個(gè)維度都能達(dá)到一個(gè)合理程度時(shí)，綜合起來(lái)才反映了一個(gè)人的CSL水平。然而，后來(lái)他發(fā)現(xiàn)，第三維度在不同國(guó)家缺乏一定的穩(wěn)定性[8]，因此米勒建議在跨國(guó)分析中只使用前兩個(gè)維度指標(biāo)。1995年，在美國(guó)進(jìn)行的調(diào)查中使用了9條關(guān)于理解科學(xué)知識(shí)概念的詞語(yǔ)和3條關(guān)于理解科學(xué)探究本質(zhì)的詞語(yǔ)。米勒對(duì)結(jié)果進(jìn)行了驗(yàn)證性因素分析并發(fā)現(xiàn)存在兩個(gè)不同的因素，兩個(gè)因素間的相關(guān)系數(shù)為0.8（n=2，006）[9]，上述結(jié)果同樣出現(xiàn)在1992年歐洲公民素養(yǎng)晴雨表的調(diào)研中。此結(jié)果提供了米勒CSL構(gòu)想效度的實(shí)證。米勒認(rèn)為CSL測(cè)量方法的持久穩(wěn)定很重要。只有當(dāng)CSL在多次測(cè)量中不隨時(shí)間發(fā)生改變，建立長(zhǎng)期CSL趨勢(shì)才具有實(shí)際意義。1988年美國(guó)與英國(guó)合作進(jìn)行CSL測(cè)量，得到了一組包括封閉式和開(kāi)放式問(wèn)題的核心試題[10]，并以這些核心試題作為科學(xué)概念的持久測(cè)量標(biāo)準(zhǔn)。來(lái)自美國(guó)和英國(guó)的數(shù)據(jù)再次證明了CSL中前兩個(gè)維度的存在[10]。盡管有證據(jù)證明這種結(jié)構(gòu)的存在，結(jié)構(gòu)中包括科學(xué)詞匯知識(shí)和科學(xué)過(guò)程方法知識(shí)，很長(zhǎng)一段時(shí)間內(nèi)，米勒的CSL在業(yè)內(nèi)被批評(píng)為有缺陷取向[11][12][13][14]，即米勒的CSL測(cè)量假設(shè)具有一些確定的科學(xué)知識(shí)是必要的，缺乏這樣的知識(shí)就是有缺陷并需要進(jìn)行修正[15]。但這種缺陷模式忽視了一個(gè)事實(shí)，即公眾具有廣泛的關(guān)于日?？茖W(xué)和技術(shù)問(wèn)題的非正式的知識(shí)和技能。研究表明，公眾對(duì)科學(xué)的理解和態(tài)度依賴(lài)于所處環(huán)境，并且有選擇地感知其用途和價(jià)值[15][16][17]，在日常生活中存在“模糊的科學(xué)”與“實(shí)用的科學(xué)”的區(qū)別[16]。除了上面的缺陷模型，柳秀峰[18]指出米勒的CSL測(cè)量是假定CSL為靜態(tài)的稀有商品，因?yàn)镃SL在米勒的測(cè)量里被減少到有限的幾個(gè)科學(xué)術(shù)語(yǔ)，并存在一個(gè)具備CSL的閾值。CSL觀念忽視了一個(gè)簡(jiǎn)單事實(shí)，即科學(xué)是不斷變化的，甚至于某一領(lǐng)域的專(zhuān)家也可能在其他科學(xué)領(lǐng)域顯得無(wú)知，因此學(xué)習(xí)科學(xué)是一個(gè)終生的過(guò)程，并非是一次性完成的工作。米勒CSL測(cè)量的商品模型與本杰明·沈[19]最初對(duì)CSL的定義不符。本杰明·沈認(rèn)為CSL的出發(fā)點(diǎn)是為了使公眾充分理解科學(xué)和與科學(xué)有關(guān)的問(wèn)題，參與技術(shù)社會(huì)中的民主程序，這些參與才是CSL的標(biāo)志。然而，這不是米勒的CSL的內(nèi)容。米勒[20]認(rèn)為，公民的SL是以人們理解科學(xué)術(shù)語(yǔ)和科學(xué)概念為水準(zhǔn)，足以閱讀某種日?qǐng)?bào)或雜志。對(duì)個(gè)體而言，無(wú)論具有多么淵博的知識(shí)，沒(méi)有參與民主社會(huì)的進(jìn)程，知識(shí)的作用仍然是有限的?？茖W(xué)傳播、科學(xué)教育、科學(xué)技術(shù)研究等領(lǐng)域的學(xué)者均呼吁脫離這種缺陷模式和商品模式，進(jìn)而轉(zhuǎn)向關(guān)注公眾參與的CSL[21][22][23][24][25][26]。正如美國(guó)《科學(xué)與工程指標(biāo)》第7章報(bào)道對(duì)公眾科學(xué)理解和態(tài)度的調(diào)查，美國(guó)NSF資助的二次研討會(huì)已建議國(guó)家科學(xué)委員會(huì)擴(kuò)展米勒CSL并采用一個(gè)更加全面的科學(xué)框架，即科學(xué)服務(wù)于公民和消費(fèi)者（SSCC）的框架。相比之下，米勒的CSL假設(shè)一般公眾應(yīng)該具備一定數(shù)量的知識(shí)和相應(yīng)的態(tài)度[27]，SSCC[28][29]提倡公民和消費(fèi)者應(yīng)該了解某些特定的科學(xué)和技術(shù)問(wèn)題以便實(shí)現(xiàn)個(gè)人的興趣和好奇心，做出明智的決策，并參與公民的民主進(jìn)程。SSCC認(rèn)為公民追求科學(xué)和技術(shù)擁有不同的動(dòng)機(jī)和目的，并沒(méi)有普適的CSL。SSCC建議擴(kuò)展米勒CSL的關(guān)于公眾知識(shí)的第三維度。二內(nèi)容效度如上所述，米勒的CSL由三個(gè)維度組成。在1979年進(jìn)行的調(diào)究[30]中，他針對(duì)關(guān)于科學(xué)詞匯的基本維度，提出了涉及三個(gè)術(shù)語(yǔ)（重力、DNA和GNP）的三個(gè)問(wèn)題，被訪(fǎng)者都被問(wèn)到對(duì)三個(gè)問(wèn)題是否有“清楚地理解”，還是“一般地理解”及“不理解”。如果回答為“清楚地理解”，進(jìn)一步要求被訪(fǎng)者對(duì)此進(jìn)行準(zhǔn)確定義。第二個(gè)維度，被訪(fǎng)者被問(wèn)到對(duì)科學(xué)研究是否有“清楚地理解”，還是“一般地理解”及“不理解”，如果回答為“清楚地理解”，進(jìn)一步要求被訪(fǎng)者對(duì)此進(jìn)行準(zhǔn)確定義[30]。第三個(gè)維度——理解科學(xué)政策問(wèn)題，包括三個(gè)問(wèn)題，這三個(gè)問(wèn)題涉及有爭(zhēng)議的化學(xué)添加劑在食品中的應(yīng)用、核能和太空探索，對(duì)每個(gè)問(wèn)題被訪(fǎng)者被要求說(shuō)出兩個(gè)潛在的好處和兩個(gè)潛在危害[31]。在隨后的研究中，測(cè)試題的數(shù)量和形式多樣，雖然但整體測(cè)量方法保持一致。例如，在1985年的調(diào)研中，第三維度中的三個(gè)問(wèn)題并沒(méi)有被采用，相反每個(gè)被訪(fǎng)者被要求說(shuō)出在過(guò)去10年中最重要的和第二重要的科技成果。另外，被訪(fǎng)者被要求回答“同意”或“不同意”一組關(guān)于科學(xué)與社會(huì)關(guān)系的5個(gè)問(wèn)題，包括“吸煙會(huì)導(dǎo)致嚴(yán)重的健康問(wèn)題”、“宇宙中可能會(huì)有成千上萬(wàn)的行星像地球一樣已經(jīng)得到了開(kāi)發(fā)”、“人類(lèi)發(fā)展于早期的動(dòng)物”、“火箭發(fā)射改變了我們的氣候”、“據(jù)報(bào)道，一些不明飛行物已經(jīng)從其他文明太空降臨地球”[32]。1988年，英美合作測(cè)量了CSL，并采用了一組包括封閉式和開(kāi)放式問(wèn)題的擴(kuò)展試題，試題涉及12個(gè)科學(xué)術(shù)語(yǔ)，這些術(shù)語(yǔ)被認(rèn)為是閱讀和理解當(dāng)代問(wèn)題的基礎(chǔ)知識(shí)，并且在一定時(shí)間內(nèi)不會(huì)發(fā)生改變。在這些術(shù)語(yǔ)中，有9個(gè)試題測(cè)量了科學(xué)詞匯維度，有3個(gè)試題測(cè)量了第二個(gè)維度——科學(xué)過(guò)程[33]。這些科學(xué)詞匯涉及了以下想法：DNA和分子的定義，光比聲音傳播速度快，地球繞著太陽(yáng)轉(zhuǎn)，激光不是聲波的聚焦，放射性不是人造的，電子小于原子，最早的人類(lèi)并沒(méi)有與恐龍?zhí)幱谕粫r(shí)期，大陸已經(jīng)漂移了數(shù)百萬(wàn)年，煮沸不能使被放射污染的牛奶更安全，地球的中心很熱，抗生素只能殺死細(xì)菌而不是病毒。科學(xué)過(guò)程維度包括以下三個(gè)認(rèn)識(shí)：治愈遺傳疾病的可能，占星術(shù)不是科學(xué)，可控性實(shí)驗(yàn)。1995年在美國(guó)進(jìn)行的調(diào)研只采納了其中的9項(xiàng)內(nèi)容。無(wú)論在實(shí)際測(cè)量中采用多少試題以及是否采用選擇性回答，這些試題都被視為“一個(gè)重要的關(guān)于CSL內(nèi)容的樣本”[34]，因此，涉及內(nèi)容效度的問(wèn)題是這些試題的內(nèi)容是否能夠代表CSL的內(nèi)容。盡管沒(méi)有人確切地知道有多少詞匯可用于描述科學(xué)概念、理論和過(guò)程，早期高中課本中關(guān)于科學(xué)詞匯的研究可以幫助我們了解科學(xué)詞匯的龐大數(shù)量。格羅夫斯[35]分析了在中學(xué)科學(xué)教科書(shū)中的詞匯，發(fā)現(xiàn)《現(xiàn)代化學(xué)》（MC）含有2950個(gè)詞條，《生物科學(xué)課程研究》（BSCS）含有1899個(gè)詞條，《物理科學(xué)研究》（PSSC）含有1538個(gè)詞條，《地球科學(xué)》（ES）含有992個(gè)詞條。米勒建議美國(guó)2016項(xiàng)目Benchmarks文本[36]可以“提供一個(gè)所有科學(xué)概念的總體的一個(gè)近似”[37]。Benchmarks文本基于前期出版物《為全體美國(guó)人的科學(xué)》[38]，該出版物有18頁(yè)主題索引。每個(gè)主題索引估計(jì)有100個(gè)詞條，也即整個(gè)文本包含大約1800個(gè)詞條。雖然CSL只是SL的一個(gè)子集，我們?nèi)匀豢梢哉J(rèn)為與CSL相關(guān)的科學(xué)詞匯的數(shù)量巨大。與這種潛在的大量的科學(xué)詞匯相比，包含在米勒CSL測(cè)量中的科學(xué)詞匯就顯得數(shù)量有限，通常小于15個(gè)，這就極有可能降低米勒CSL測(cè)量的內(nèi)容效度。隨著科學(xué)技術(shù)的迅猛發(fā)展，新的術(shù)語(yǔ)被不斷地創(chuàng)造，在21世紀(jì)就需要有更多的理論和實(shí)證研究來(lái)找出那些有代表性的科學(xué)術(shù)語(yǔ)。此外，內(nèi)容效度問(wèn)題還是區(qū)別科學(xué)知識(shí)與個(gè)人或宗教信仰的關(guān)系問(wèn)題。一個(gè)很好的例子就是米勒CSL測(cè)量中與進(jìn)化和“大爆炸”理論相關(guān)的試題。NSF資助的研究會(huì)建議應(yīng)該在CSL測(cè)量中刪除進(jìn)化與地球起源的試題，因?yàn)樗鼈兣c宗教信仰相關(guān)[39]。這個(gè)例子反映了出米勒測(cè)量的一個(gè)更大問(wèn)題，即評(píng)估試題的去語(yǔ)境化。在實(shí)際的CSL中，如閱讀《紐約時(shí)報(bào)》科技專(zhuān)欄文章或討論公共政策在資助干細(xì)胞研究方面的報(bào)道，新聞報(bào)道的背景在公民對(duì)科學(xué)知識(shí)的理解和公眾參與中扮演了重要角色。在特定的環(huán)境中（例如在高科技公司工作或擁有患有癌癥的家庭成員），公民對(duì)特定的科學(xué)技術(shù)問(wèn)題能顯示出獨(dú)特的認(rèn)識(shí)和態(tài)度。理解科學(xué)技術(shù)總是與個(gè)人的背景和經(jīng)驗(yàn)相關(guān)的。在米勒CSL測(cè)量中去語(yǔ)境化的問(wèn)題不能充分反映CSL的實(shí)際情況。上述問(wèn)題的語(yǔ)境化涉及知識(shí)和理解之間的區(qū)別。知識(shí)是簡(jiǎn)單的定義或事實(shí)回顧；而理解包括解釋、翻譯、應(yīng)用、感知、同理和自我認(rèn)知[40]，今天，CSL中涉及的科學(xué)技術(shù)內(nèi)容主要是理解而不是知識(shí)，因?yàn)閷ふ乙粋€(gè)陌生的科學(xué)術(shù)語(yǔ)只需要一部手機(jī)或一臺(tái)電腦就隨時(shí)可以查詢(xún)。米勒的CSL測(cè)量主要涉及的是知識(shí)而不是理解，這點(diǎn)不符合CSL的科學(xué)內(nèi)容的本質(zhì)。三效標(biāo)效度在1979年的研究中，米勒采用特殊的標(biāo)準(zhǔn)來(lái)決定被訪(fǎng)者是否具有CSL，從科學(xué)方法維度看，當(dāng)被訪(fǎng)者對(duì)科學(xué)研究和認(rèn)識(shí)能夠提供一個(gè)合理的定義或認(rèn)為占星術(shù)不是科學(xué)即達(dá)到了合格的成績(jī)；第二個(gè)維度即理解科學(xué)構(gòu)造，當(dāng)被訪(fǎng)者能夠清楚地理解三個(gè)問(wèn)題中的一個(gè)或至少一般理解其中的兩個(gè)問(wèn)題即達(dá)到了合格的成績(jī)；第三個(gè)維度即理解科學(xué)政策問(wèn)題，當(dāng)被訪(fǎng)者至少能夠說(shuō)出12個(gè)中的6個(gè)利弊即達(dá)到了合格的成績(jī)。一個(gè)被訪(fǎng)者只有達(dá)到了所有上述三個(gè)維度的合格成績(jī)即被認(rèn)為具有CSL。1985年的研究中使用了類(lèi)似的標(biāo)準(zhǔn)。在1995年美國(guó)進(jìn)行的研究中，米勒采用了三參數(shù)項(xiàng)目反應(yīng)理論（IRT）。受訪(fǎng)者的得分范圍被設(shè)置為0～100，平均值為50，標(biāo)準(zhǔn)偏差為20[41]，之后他設(shè)置了一個(gè)67分的分界點(diǎn)，以區(qū)分是否具有CSL，這個(gè)分值相當(dāng)于受訪(fǎng)者總分的2/3。特別是米勒建議那些能夠在兩個(gè)維度獲得合格成績(jī)的被訪(fǎng)者被認(rèn)為具有“公民科學(xué)素養(yǎng)”，而那些在一個(gè)維度獲得合格成績(jī)的被訪(fǎng)者被認(rèn)為具有“部分公民科學(xué)素養(yǎng)”。不過(guò)米勒[42]建議“繼續(xù)使用每個(gè)維度理解閾值水平并對(duì)每個(gè)維度水平對(duì)后續(xù)態(tài)度和行為的影響進(jìn)行研究是非常重要的”。上述的分類(lèi)是否有效，這個(gè)問(wèn)題到目前為止還沒(méi)有有力的證據(jù)能夠證明。例如，在米勒[43]的報(bào)告中，根據(jù)米勒的分類(lèi)標(biāo)準(zhǔn)，有5%的美國(guó)成人具備CSL，并擁有用來(lái)閱讀和書(shū)寫(xiě)的相關(guān)科學(xué)技術(shù)，能夠理解與科學(xué)技術(shù)政策相關(guān)的爭(zhēng)論議題，但另外95%的美國(guó)成人真的就不具備這些能力嗎？讀和寫(xiě)的標(biāo)準(zhǔn)是什么？這5%的人是否真正參與了與科學(xué)技術(shù)有關(guān)的公眾討論和政策制定？這種參與度是如何進(jìn)行測(cè)量的？上面的問(wèn)題，涉及了米勒科學(xué)素養(yǎng)測(cè)量的效標(biāo)效度，并且目前仍沒(méi)有答案。前面提到的NSF資助的研究會(huì)建議建立另一種米勒CSL測(cè)量的效標(biāo)效度[44][45]。因?yàn)镹AEP，TIMSS和PISA的效度和信度均具有高度的評(píng)價(jià)，有可能通過(guò)詢(xún)問(wèn)被訪(fǎng)者而能同時(shí)回答米勒CSL測(cè)量的問(wèn)題和一個(gè)NAEP，并利用TIMSS和PISA測(cè)量進(jìn)行效度研究，兩者成績(jī)統(tǒng)計(jì)上顯著的相關(guān)性將能夠證明米勒CSL測(cè)量的效標(biāo)效度。米勒也認(rèn)為效標(biāo)效度需要進(jìn)行持續(xù)性研究，即“研究應(yīng)該聚焦于特殊的政治歷程，公民選擇科學(xué)技術(shù)論題的興趣范圍以及在決定是否或如何參與公眾辯論中CSL在期間充當(dāng)?shù)慕巧确矫?。雖然在公眾參與外交政策的爭(zhēng)議中做過(guò)一些創(chuàng)新研究，但在過(guò)程中幾乎沒(méi)有關(guān)注到CSL的作用和測(cè)量”[46]。四結(jié)論效度美國(guó)和其他相關(guān)國(guó)家應(yīng)用米勒的CSL測(cè)量的時(shí)間已有30多年了，雖然這些國(guó)家對(duì)使用米勒測(cè)量所得到的結(jié)果沒(méi)有系統(tǒng)的評(píng)價(jià)，但米勒測(cè)量對(duì)提高公眾意識(shí)的影響是明顯的。當(dāng)新聞標(biāo)題指出只有5%的美國(guó)人具備公民科學(xué)素養(yǎng)時(shí)，不可避免地引起了政府和公眾的注意。這種注意可以從美國(guó)自1979年以來(lái)兩年一次的《科學(xué)和工程指標(biāo)》報(bào)道米勒CSL測(cè)量結(jié)果看出。這種測(cè)量也同樣在中國(guó)、印度、日本和歐洲在內(nèi)的其他國(guó)家和地區(qū)定期進(jìn)行[47]。關(guān)注CSL在政府和公眾方面均可以導(dǎo)致正面和負(fù)面的結(jié)果。雖然米勒測(cè)量促使政府和非政府組織努力提高CSL的做法被認(rèn)為是積極的影響，但我們也必須意識(shí)到在公共政策的制定和誤導(dǎo)性的資源分配方面可能產(chǎn)生潛在的負(fù)面影響。如何定義和測(cè)量CSL，會(huì)不可避免地影響到正式和非正式科學(xué)教育政策的制定，進(jìn)而影響到公共資源的分配。因此，必須加以嚴(yán)格地監(jiān)控以避免任何意想不到的負(fù)面影響出現(xiàn)。由于米勒測(cè)量的潛在影響，國(guó)家科學(xué)委員會(huì)決定從2010年《科學(xué)和工程指標(biāo)》中去除米勒測(cè)量中關(guān)于進(jìn)化與地球起源的試題。這個(gè)決定引起了關(guān)于科學(xué)與宗教之間的關(guān)系和國(guó)家科學(xué)委員會(huì)定位的激烈辯論[48]，這個(gè)案例表明，CSL測(cè)量?jī)?nèi)容和手段可以直接影響公眾對(duì)科學(xué)的定義，影響人們對(duì)科學(xué)在人類(lèi)生活中作用的認(rèn)識(shí)。五信度信度是測(cè)量有效性的必要屬性之一，因此米勒一直在努力地提高測(cè)量的信度，1979年進(jìn)行的第一次研究中[49]，米勒聲稱(chēng)問(wèn)題的回答由兩個(gè)獨(dú)立評(píng)審員進(jìn)行評(píng)分，但評(píng)審員之間的評(píng)價(jià)者間信度并沒(méi)有進(jìn)行報(bào)道；在1985年的研究中[50]，米勒聲稱(chēng)由