盡管人類(lèi)的評(píng)判有時(shí)會(huì)讓我們陷入困境，但它畢竟是一種有顯著效用的工具。基于評(píng)判的測(cè)驗(yàn)完善模式可以使我們十分系統(tǒng)化地或非正式化地完成任務(wù)。評(píng)判性評(píng)價(jià)完善策略因其評(píng)價(jià)主體而有很大的不同。您必須了解三種類(lèi)型的評(píng)判，它們分別由您自己、您的同事和您的學(xué)生作出。我們將分別對(duì)這些潛在的評(píng)判來(lái)源進(jìn)行分析。

讓我們假設(shè)您在“美國(guó)政府課（government class）”上設(shè)計(jì)了70道簡(jiǎn)答和多項(xiàng)選擇題，并且已經(jīng)實(shí)施了，為了下一年的課程，您希望進(jìn)一步完善測(cè)驗(yàn)。我們假設(shè)在開(kāi)發(fā)這些題目的過(guò)程中，您已經(jīng)付出了非常多的努力和智慧，并且達(dá)到了您的最高水平。然而，現(xiàn)在您仍需要再檢查一下，看看這70道題目是否適宜。這是一件值得去做的事。

讓我們考慮一下另一種評(píng)價(jià)方式。假設(shè)在學(xué)生建立檔案袋或回答表現(xiàn)性測(cè)試任務(wù)時(shí)，您為他們?cè)O(shè)計(jì)了相當(dāng)合適的指導(dǎo)語(yǔ)。即使您認(rèn)為那些指導(dǎo)語(yǔ)已經(jīng)相當(dāng)合適，但是在一段時(shí)間后對(duì)那些材料進(jìn)行檢查，看看能否發(fā)現(xiàn)一些您起初在設(shè)計(jì)時(shí)沒(méi)有注意到的缺點(diǎn)也是很有必要的。

在寫(xiě)作中也經(jīng)常發(fā)現(xiàn)這樣的情況，當(dāng)您冷靜下來(lái)再去檢查您寫(xiě)的東西時(shí)，您會(huì)發(fā)現(xiàn)一些漏洞，因?yàn)閯傞_(kāi)始的激情寫(xiě)作掩蓋了那些漏洞，這也是常常會(huì)出現(xiàn)的事情。然而，超越那種隨意性的反觀，您能夠更好地完善您的評(píng)價(jià)方法，甚至使測(cè)試完善任務(wù)（test improvement task）更加系統(tǒng)化。當(dāng)您在對(duì)自己早期的評(píng)價(jià)努力進(jìn)行評(píng)判時(shí)，為了加以說(shuō)明，您可以使用特定的評(píng)判標(biāo)準(zhǔn)。如果一道測(cè)試題或者一系列教學(xué)沒(méi)有達(dá)到標(biāo)準(zhǔn)，您就應(yīng)該作一些較大的修改。如果您想系統(tǒng)地完善您的課堂評(píng)價(jià)方法的話，那么下面將要展示希望您考慮的五條檢查標(biāo)準(zhǔn)：

■ 遵循特定題目編寫(xiě)指南和一般性題目編寫(xiě)要求。當(dāng)您在對(duì)自己的評(píng)價(jià)方法進(jìn)行估價(jià)時(shí)，簡(jiǎn)單地檢查一下一般性題目編寫(xiě)要求（第6章）和為特定題目準(zhǔn)備的特定題目編寫(xiě)指南是很有用的。如果您發(fā)現(xiàn)有題目違背了上述兩種標(biāo)準(zhǔn)，那么您就必須彌補(bǔ)缺陷。

■ 對(duì)分?jǐn)?shù)推論有所貢獻(xiàn)?；貞浺幌陆處煂?duì)學(xué)生進(jìn)行評(píng)價(jià)的真正原因是為了得出關(guān)于學(xué)生狀況的分?jǐn)?shù)結(jié)論。因此，重新考慮一下已設(shè)計(jì)開(kāi)發(fā)的評(píng)價(jià)方法，看看它是否真的是為了達(dá)到上述目的、為得出那種類(lèi)型的結(jié)論而服務(wù)的。這種方法將對(duì)您很有幫助。

■ 內(nèi)容要準(zhǔn)確。以前的精確內(nèi)容被新近內(nèi)容所取代，或與新近內(nèi)容發(fā)生矛盾的情況是可能存在的。因此，您要確定評(píng)價(jià)工具所包含的內(nèi)容是否仍然是精確的，以及您的答案是否仍然正確。

■ 內(nèi)容沒(méi)有遺漏。這種檢查標(biāo)準(zhǔn)為我提供了一個(gè)機(jī)會(huì)，使我可以使用自己最喜歡的一個(gè)單詞，即遺漏，意思是指缺隙。在某種意義上，缺隙就是遺漏的意思。盡管使用缺隙一詞看起來(lái)要簡(jiǎn)單一些，但您必須承認(rèn)與遺漏一詞比起來(lái)，缺隙一詞總顯得有些華而不實(shí)。（當(dāng)然，這只是一種常模參照性質(zhì)的比較。）

事后的聰明是一種極好的形式。因此，當(dāng)您檢查評(píng)價(jià)工具內(nèi)容的覆蓋范圍時(shí)，您可能發(fā)現(xiàn)以前忽視了一些重要的內(nèi)容。這種檢查標(biāo)準(zhǔn)是與前面的第二條標(biāo)準(zhǔn)聯(lián)系在一起的。一些有意義的內(nèi)容的缺失會(huì)明顯地降低結(jié)論的精確性。

■ 公正。當(dāng)您最初在設(shè)計(jì)評(píng)價(jià)工具時(shí)，盡管您清楚地想要完全排除偏差，但還是常常會(huì)忽視一些東西。在進(jìn)行偏差檢查時(shí)，一定要確保您已經(jīng)盡了最大的努力去注意排除偏見(jiàn)。

我可以舉一個(gè)關(guān)于偏見(jiàn)的個(gè)人案例，這件事發(fā)生在20世紀(jì)70年代，我編寫(xiě)了一本教育評(píng)價(jià)的教材。那時(shí)，很多婦女對(duì)作者針對(duì)一些沒(méi)有指名的個(gè)人使用男性代詞（如使用“學(xué)生沒(méi)吃他的早餐”這樣的話語(yǔ)）的行為進(jìn)行了挑戰(zhàn)。認(rèn)識(shí)到這一點(diǎn)后，我在專(zhuān)心致志的寫(xiě)作過(guò)程中盡量用復(fù)數(shù)形式的人稱(chēng)代詞。我再不用他或她，而是用他們。當(dāng)我艱苦地寫(xiě)完最后一章之后，我為自己使用復(fù)數(shù)形式的高超技能而頗感自豪。然而，我仍發(fā)現(xiàn)一些話語(yǔ)問(wèn)題可能對(duì)婦女造成傷害。我曾經(jīng)漫不經(jīng)心地在書(shū)中加了一幅卡通插圖，這幅圖畫(huà)顯示的是在學(xué)校董事會(huì)上，女性成員在男性成員面前跳來(lái)跳去。真是十分丟人！如果在這本書(shū)成為新聞之前，我再認(rèn)真地檢查一遍，我就會(huì)發(fā)現(xiàn)差錯(cuò)。由于在第1版（不是第2版！）的所有書(shū)上都出現(xiàn)了那幅插圖，所以我遭到了應(yīng)得的包括男性讀者和女性讀者在內(nèi)的憤怒投訴。

我并不是建議您分別為上述每條檢查標(biāo)準(zhǔn)編制一個(gè)詳細(xì)的評(píng)估表。在一定程度上，我建議您在應(yīng)對(duì)已開(kāi)發(fā)的評(píng)價(jià)工具的評(píng)判檢查之前，認(rèn)真考慮一下上述五條標(biāo)準(zhǔn)。

如果您相信同事的評(píng)判，那么請(qǐng)他幫忙檢查您的評(píng)價(jià)方法往往是有用的。為了能取得最好的效果，您有必要向同事提供至少關(guān)于檢查標(biāo)準(zhǔn)的描述，就像前面提到的五條標(biāo)準(zhǔn)那樣——它們是①遵循特定題目編寫(xiě)指南和一般性題目編寫(xiě)要求，②對(duì)分?jǐn)?shù)推論有所貢獻(xiàn)，③內(nèi)容要準(zhǔn)確，④內(nèi)容沒(méi)有遺漏，⑤公正。您需要向同事描述您打算通過(guò)評(píng)價(jià)方法獲得的關(guān)鍵性結(jié)論。對(duì)您的同事，您最好能讓他認(rèn)識(shí)到自己關(guān)于學(xué)生的結(jié)論會(huì)影響到后續(xù)的決策，這是很必要的。

我發(fā)現(xiàn)同事的評(píng)判對(duì)于那些需要進(jìn)行大量表現(xiàn)性測(cè)試或使用檔案袋評(píng)價(jià)的教師而言，是有特定幫助的。在后面的章節(jié)中，您將學(xué)到的大多數(shù)經(jīng)驗(yàn)性的以完善為基礎(chǔ)的方法，都將與像多項(xiàng)選擇測(cè)試那樣的傳統(tǒng)類(lèi)題目一起被使用。評(píng)判可以使檔案袋評(píng)價(jià)和表現(xiàn)性測(cè)試得到更好的改善。

記住，如果您是檔案袋評(píng)價(jià)的設(shè)計(jì)者或者您是正著手完善表現(xiàn)性測(cè)試的設(shè)計(jì)者，您會(huì)偏向于自己所喜愛(ài)的東西。畢竟，父母通常是喜歡他們的孩子的。您所需要的是良好的、冷酷無(wú)情的、客觀（nonpartisan）的檢查，只有這樣才能夠勝任評(píng)價(jià)工作。

當(dāng)然，要想幫助您做好這一工作，您的同事需要花一些時(shí)間。為公正起見(jiàn)，您要有往有來(lái)，也幫助他改進(jìn)他的評(píng)價(jià)工具（或者通過(guò)解決您同事自身的關(guān)鍵性個(gè)人問(wèn)題）。如果您所在的學(xué)區(qū)夠大的話，您可以與中心辦公處懂得評(píng)價(jià)的專(zhuān)業(yè)人士接觸一下。這里有一個(gè)使他們獲得薪水的簡(jiǎn)便的途徑——讓他們檢查您的評(píng)價(jià)方法。一般說(shuō)來(lái)，另一雙眼睛可以幫助改善幾乎所有的書(shū)寫(xiě)文件。這并不意味著其他人能夠看得更精確，而是說(shuō)為您提供了一個(gè)參照。您應(yīng)該傾聽(tīng)別的檢查者說(shuō)了些什么，但是最后還是需要您自己去評(píng)判他們建議的優(yōu)點(diǎn)所在。

當(dāng)教師著手完善評(píng)價(jià)方法時(shí)，一個(gè)數(shù)據(jù)的豐富來(lái)源往往被忽視，因?yàn)榻處熞话悴粫?huì)想到從學(xué)生那里獲得信息。然而，由于學(xué)生在一個(gè)有意義的語(yǔ)境中經(jīng)驗(yàn)了測(cè)試題目，作為一個(gè)被測(cè)試者，或多或少有了不少見(jiàn)解，學(xué)生的評(píng)判能夠提供有用的見(jiàn)識(shí)。學(xué)生的反應(yīng)能夠幫助您認(rèn)識(shí)特定題目的缺點(diǎn)和諸如測(cè)試說(shuō)明或者您所規(guī)定的完成測(cè)試的時(shí)間的不足。

從學(xué)生那里獲得的數(shù)據(jù)將會(huì)發(fā)生變化，這是由所應(yīng)用的評(píng)價(jià)方法的類(lèi)型造成的。但是圖11.1題目完善問(wèn)卷中的問(wèn)題，在學(xué)生完成評(píng)價(jià)過(guò)程之后，提供給他們是非常有益的。盡管圖11.1的解說(shuō)性問(wèn)卷是為使用選擇性反應(yīng)測(cè)試而準(zhǔn)備的，但是僅僅需要作較小的修改就可以使其適用于建構(gòu)性反應(yīng)測(cè)試，表現(xiàn)性測(cè)試或者檔案袋評(píng)價(jià)系統(tǒng)。

圖11.1　學(xué)生用題目完善問(wèn)卷示例

讓學(xué)生在進(jìn)行評(píng)判練習(xí)之前完成測(cè)試是很重要的。（請(qǐng)?jiān)僖淮巫⒁?，修改?dòng)名詞engaging的話語(yǔ)所有權(quán)。很明顯，您現(xiàn)在讀到的是一些語(yǔ)法材料。）如果讓學(xué)生同時(shí)扮演測(cè)試者和測(cè)試完善者的角色，他們將可能弄糟這兩個(gè)任務(wù)。至少在同一時(shí)間里，沒(méi)有學(xué)生能夠?yàn)檫@兩個(gè)任務(wù)負(fù)責(zé)。

讓學(xué)生在一般情況下進(jìn)行測(cè)試，收集他們的答題紙或測(cè)試冊(cè)，并給他們提供新的、空白的紙張。然后給他們分配像前面那樣的問(wèn)卷。換句話說(shuō)，就是讓學(xué)生連續(xù)扮演被測(cè)試者和題目檢查者的角色，而不是同時(shí)扮演。

現(xiàn)在，您如何對(duì)待學(xué)生對(duì)測(cè)試題目的反應(yīng)呢？假設(shè)您是一位教師，少數(shù)學(xué)生對(duì)一道您最喜歡的題目提出了強(qiáng)烈的苛責(zé)。您是否就因?yàn)椴粷M或?qū)︻}目的抱怨而自動(dòng)軟下去呢？當(dāng)然不是，教師應(yīng)該是剛性的。可能學(xué)生會(huì)因?yàn)椴恢涝趺椿卮痤}目而感到憤怒。對(duì)學(xué)生來(lái)說(shuō)，逃避令人憂郁的測(cè)試，最佳的途徑便是猛烈批判測(cè)試本身。教師應(yīng)預(yù)見(jiàn)一定數(shù)額的吹毛求疵的低分?jǐn)?shù)學(xué)生。

然而，經(jīng)過(guò)允許的合理程度的抱怨，學(xué)生的反應(yīng)有時(shí)能為教師提供有用的見(jiàn)解。事實(shí)上，學(xué)生斥責(zé)太多的題目很有可能就該批評(píng)。忽視學(xué)生作為評(píng)判測(cè)試工具的信息來(lái)源，對(duì)于選擇性反應(yīng)或建構(gòu)性反應(yīng)題目來(lái)說(shuō)，都是明顯的錯(cuò)誤。

根據(jù)測(cè)試完善方法進(jìn)行評(píng)判性檢查，可以依靠您自己、您的同事、您的學(xué)生所提供的判決。歸根結(jié)底，您將是是否修改您的評(píng)價(jià)工具的決策者。雖然如此，對(duì)您的測(cè)試來(lái)說(shuō)，別人的反應(yīng)是很有用的。