CET寫作評(píng)分員對(duì)評(píng)分結(jié)果影響因素研究

鹿軍紅

(西安理工大學(xué) 陜西 西安 710043)

英語(yǔ)寫作是學(xué)生的重要能力之一，是各類英語(yǔ)考試的重要組成部分。目前，在全國(guó)各類英語(yǔ)考試中，英語(yǔ)作文的評(píng)閱通常采用在線評(píng)分的方式?？忌魑谋粧呙瑁瑘D像傳輸?shù)礁鞲木睃c(diǎn)的服務(wù)器，由評(píng)分員在屏幕上對(duì)作文進(jìn)行打分。由于評(píng)分員寬松與嚴(yán)厲程度不同，對(duì)評(píng)分標(biāo)準(zhǔn)把握不同，導(dǎo)致評(píng)分結(jié)果產(chǎn)生差異。另外，欣賞習(xí)慣、語(yǔ)言能力以及心態(tài)情緒等主觀因素也會(huì)影響閱卷員對(duì)分?jǐn)?shù)的評(píng)定。一些評(píng)分員評(píng)卷經(jīng)驗(yàn)不足，一些評(píng)分員主觀隨意性過大或者評(píng)卷態(tài)度不認(rèn)真，都會(huì)造成準(zhǔn)確性不高，評(píng)卷質(zhì)量差。所有這些因素都會(huì)影響寫作考試的成績(jī)，從而降低語(yǔ)言測(cè)試的信度和效度。

本文通過對(duì)大學(xué)英語(yǔ)四、六級(jí)考試(CET)評(píng)分的研究，找出影響評(píng)分員改卷判斷的潛在因素，從而提高閱卷員英語(yǔ)作文評(píng)卷質(zhì)量，這對(duì)于保證考試的公正性和準(zhǔn)確性，提高考試的信度至關(guān)重要。另外，老師也可將考試評(píng)卷情況反饋給學(xué)生，用以指導(dǎo)學(xué)生寫作，從而提高學(xué)生的寫作能力。

1．評(píng)分標(biāo)準(zhǔn)

閱卷點(diǎn)在正式改卷前先對(duì)閱卷員進(jìn)行為期半天的培訓(xùn)，幫助的評(píng)分員了解評(píng)分標(biāo)準(zhǔn)以縮小與標(biāo)準(zhǔn)及樣卷間的差距。評(píng)分量表分別為1-3、4-6、7-9、10-12、13-15分，共五檔。評(píng)分員通過將學(xué)生作文與樣卷的比對(duì)來評(píng)定考生的考試成績(jī)。評(píng)分員評(píng)定作文的關(guān)鍵是要將作文進(jìn)行分檔，要對(duì)評(píng)分樣卷(Range-finders)認(rèn)真學(xué)習(xí)領(lǐng)會(huì)，了解掌握每個(gè)檔次作文的基本特征。

在培訓(xùn)的過程中，通常會(huì)發(fā)現(xiàn)，對(duì)同一篇作文不同的老師給出了不同的分?jǐn)?shù)，有時(shí)分?jǐn)?shù)相差很大，專家分為9分的作文，有的老師給了12分而有的老師只打了7分，為什么出現(xiàn)如此大的差異？

看到一篇作文，我們通常會(huì)從這樣幾個(gè)方面進(jìn)行考量：(1)詞匯短語(yǔ)；(2)句子結(jié)構(gòu)；(3)流暢程度；(4)語(yǔ)法正確；(5)思想內(nèi)容。評(píng)分員采用整體式評(píng)分法(Global Scoring)對(duì)英語(yǔ)作文進(jìn)行評(píng)閱，分?jǐn)?shù)的高低源于他們的“整體印象”或“第一印象”。評(píng)卷員應(yīng)該從這些方面進(jìn)行綜合判斷，給出一個(gè)總體印象分。一些評(píng)分員對(duì)一些低級(jí)語(yǔ)言錯(cuò)誤十分敏感，一見到嚴(yán)重的錯(cuò)誤就給了低分，因?yàn)椤斑@么簡(jiǎn)單的問題都搞錯(cuò)了”。評(píng)分員對(duì)語(yǔ)法和詞匯方面也進(jìn)行不同的處理，有些采用“錯(cuò)誤扣分”的方法；另一些則“為好詞匯加分”?？偟膩碚f，評(píng)分員采用了不同的方法評(píng)分。一些人相信他們的整體印象，有些人喜歡分析的方式，有些人嚴(yán)格遵守規(guī)定的評(píng)分標(biāo)準(zhǔn)，有些人則形成了自己的尺度和判斷標(biāo)準(zhǔn)。經(jīng)驗(yàn)豐富的評(píng)分員往往使用一項(xiàng)以上的標(biāo)準(zhǔn)作為打分依據(jù)，而新評(píng)分員往往對(duì)其中某一項(xiàng)給予突出的重視，對(duì)作文的水平做出片面的判斷，出現(xiàn)打分的偏差。以上因素就是出現(xiàn)同一作文不同分?jǐn)?shù)的原因。

2.評(píng)分判斷的依據(jù)

有些閱卷員更多地關(guān)注負(fù)面證據(jù)而不是正面證據(jù)。這些評(píng)分員對(duì)語(yǔ)言錯(cuò)誤非常敏感，尤其是當(dāng)一些低級(jí)語(yǔ)言錯(cuò)誤頻繁出現(xiàn)時(shí)，也許這些錯(cuò)誤非常突出，引起了他們的注意。這些評(píng)分員對(duì)語(yǔ)言表達(dá)非常挑剔，對(duì)錯(cuò)誤的容忍度不高，傾向于在語(yǔ)言上嚴(yán)格要求，對(duì)于學(xué)生在語(yǔ)法、詞匯和表達(dá)等方面十分看重。他們對(duì)學(xué)生往往持消極的看法，看到任何的錯(cuò)誤偏離標(biāo)準(zhǔn)，就相應(yīng)地降低學(xué)生的分?jǐn)?shù)。他們?cè)谒季S中對(duì)作文多采用減分計(jì)分法。

正面證據(jù)驅(qū)動(dòng)的評(píng)分員多注意作文中的優(yōu)點(diǎn)。他們注意尋找一些“值得獎(jiǎng)勵(lì)”的東西，比如在詞匯方面，考生作文中偶爾出現(xiàn)一些令人印象深刻的單詞，這“瞬間照亮了我的眼睛”，“不尋常”或“印象深刻”。此類評(píng)分者多使用相加計(jì)分法，更多地關(guān)注作文中積極的一面。

優(yōu)秀評(píng)分員在評(píng)估作文時(shí)往往同時(shí)考慮優(yōu)點(diǎn)和缺點(diǎn)，結(jié)合正面和負(fù)面證據(jù)進(jìn)行打分。他們對(duì)詞匯，語(yǔ)法，內(nèi)容相關(guān)性和連貫性進(jìn)行綜合的評(píng)價(jià)，也同時(shí)考慮內(nèi)容的充分性、新穎性和生動(dòng)性。

3．相關(guān)系數(shù)(R)

相關(guān)系數(shù)R這里是指客觀分與主觀作文分之間相關(guān)性。由于客觀成績(jī)已經(jīng)在改作文之前由機(jī)器改出，一般而言，學(xué)生的客觀成績(jī)高，作文得分也應(yīng)與之相應(yīng)，兩者呈相關(guān)關(guān)系。由于考生的各種語(yǔ)言能力間存在一定的相關(guān)性,因此作文分?jǐn)?shù)與客觀題得分間的相關(guān)系數(shù)R可作為評(píng)閱信度的一個(gè)重要參考指標(biāo)，相關(guān)系數(shù)高的閱卷員評(píng)卷的準(zhǔn)確性就高。R值是衡量評(píng)卷質(zhì)量的首要指標(biāo)，因此評(píng)分員在批改作文時(shí)要盡可能提高自己的相關(guān)系數(shù)。

4.套用

有些學(xué)生死記一些句子或范文進(jìn)行套用，這類考卷最容易讓閱卷員誤打高分。識(shí)別這類考卷的方法是看看是否與主題相關(guān)，是否是生搬硬套。學(xué)生套寫作文的現(xiàn)象非常普遍，閱卷員要敏銳地識(shí)別此類作文。批改這類作文的要點(diǎn)是：特別注意學(xué)生臨場(chǎng)所寫的句子，這些話往往反映出學(xué)生的真實(shí)水平。

5.書寫

見到書寫工整的作文很容易讓閱卷員誤給高分。有些作文書寫得工工整整，實(shí)際錯(cuò)誤較多，水平并不高，閱卷員很容易被書寫所迷惑。

相反，一些學(xué)生書寫太過潦草，難以識(shí)別，閱卷老師遇到這種試卷，往往失去耐心，打出低分。遇到此類試卷，不要太隨意，要有耐心去認(rèn)真辨識(shí)，看出其真實(shí)水平，說不定還是一份好卷。

6.評(píng)卷速度(Speed)

一般閱卷點(diǎn)對(duì)閱卷老師有時(shí)間上的要求，如每份試卷的閱卷時(shí)間平均不得低于60秒。有的老師評(píng)卷速度過慢，給分猶豫不決，搖擺不定，要知道評(píng)得慢不一定評(píng)得準(zhǔn)，掌握每個(gè)檔次作文的基本特征才能改得既快又準(zhǔn)。當(dāng)然一掃而過的不負(fù)責(zé)任的過快閱卷，也是不可取的。

目前,對(duì)于閱卷速度的研究不多,Charney(1984)指出了一系列與評(píng)分進(jìn)程有關(guān)的因素。

她認(rèn)為監(jiān)控與較快的評(píng)閱速度有助于提升評(píng)閱信度,整體評(píng)閱法(holistic scoring)應(yīng)當(dāng)快速,對(duì)文本的深入思考會(huì)降低評(píng)閱信度。

7.其他因素

評(píng)分者的身體狀況和情緒狀態(tài)也會(huì)對(duì)評(píng)卷的可靠性產(chǎn)生影響。評(píng)分工作的強(qiáng)度使評(píng)分員身體疲勞，大多數(shù)評(píng)分員找到了“減輕疲勞”的不同方法設(shè)法解決這個(gè)問題，例如午飯后偶爾站起來活動(dòng)身體或爬在桌上小睡。評(píng)分員有時(shí)也會(huì)不可避免地情緒化，樓道里的腳步聲或窗外的噪音可能使他們坐立不安。另外評(píng)分員自身的英語(yǔ)水平、對(duì)評(píng)分工作態(tài)度等因素也會(huì)影響評(píng)分質(zhì)量。

8.小結(jié)

本文分析了評(píng)分員對(duì)英語(yǔ)作文評(píng)分結(jié)果的影響因素，其中一些因素是非系統(tǒng)的和不可控的，如評(píng)分者的情緒狀態(tài)和身體狀況。一些因素的是可控的，比如評(píng)分標(biāo)準(zhǔn)和評(píng)分者培訓(xùn)。這些可控因素被識(shí)別出來后，我們就可以采取措施解決相應(yīng)問題，如修改和制定更詳細(xì)的評(píng)分標(biāo)準(zhǔn)，以縮小理解上的不一致。本研究也可以指導(dǎo)評(píng)分員的選拔，通過對(duì)評(píng)分員的培訓(xùn)，淘汰不合格的評(píng)分員。

詞匯、語(yǔ)法、內(nèi)容的連貫性和準(zhǔn)確性被認(rèn)為是寫作的主要組成部分，不同的評(píng)分員對(duì)其重要性進(jìn)行了不同程度的排序。他們對(duì)好作文的概念存在差異，強(qiáng)調(diào)寫作能力的不同成分可能導(dǎo)致形成不同的評(píng)判標(biāo)準(zhǔn)，并由此導(dǎo)致相同的作文不同的分?jǐn)?shù)的現(xiàn)象。因此，閱卷員應(yīng)本著為每位考生負(fù)責(zé)的態(tài)度認(rèn)真評(píng)閱好每篇作文，提高閱卷的準(zhǔn)確性，努力做到客觀公正。閱卷機(jī)構(gòu)也應(yīng)對(duì)閱卷員進(jìn)行監(jiān)督指導(dǎo)，及時(shí)糾正閱卷中的偏差，以充分保證評(píng)卷質(zhì)量，提高考試的公正性和準(zhǔn)確性。