淺析網(wǎng)絡(luò)閱卷中閱卷員對評分信度的影響

白玉潔+高淑玲

摘要：基于近年來網(wǎng)絡(luò)評卷的興起，本文以六級英語翻譯真題網(wǎng)評工作為例，以評分信度為主，分析影響閱卷評分信度的主要人為因素，并從中分析其利弊，尋求解決方案，以期能夠提升閱卷評分信度，降低人為因素造成的誤差。

關(guān)鍵詞：網(wǎng)絡(luò)閱卷 閱卷員 評分信度

信息時代網(wǎng)上閱卷系統(tǒng)已成為現(xiàn)階段主要閱卷方式。因為它不但可以實現(xiàn)傳統(tǒng)閱卷方式下的所有功能，而且還可方便進行包括各科考試知識點數(shù)據(jù)的全面分析。信度是檢驗語言測試質(zhì)量的最重要因素之一。包括試題信度，考試實施信度，評分信度，其中隨著考試特別是閱卷方式的改變，網(wǎng)絡(luò)閱卷中的閱卷評分信度日益引起學(xué)界關(guān)注。本文主要探討大學(xué)英語六級網(wǎng)上閱卷過程中閱卷員的信度。

一、網(wǎng)絡(luò)閱卷優(yōu)勢

網(wǎng)上閱卷具有嚴格的操作程序。首先要把掃描采集的主觀題部分按題切割，通過專用網(wǎng)絡(luò)將數(shù)據(jù)傳送到閱卷點?？忌拇痤}圖像會出現(xiàn)在閱卷員的電腦屏幕上，除此之外看不到與此無關(guān)的任何信息，管理工作相對規(guī)范。每位考生的答卷至少要由兩位老師在不同的電腦屏幕上各自獨立評閱一次。評分出現(xiàn)誤差時會進入三評甚至四評，或是由評卷系統(tǒng)自動“告知”評卷小組負責人，由其裁定。

可以說，與傳統(tǒng)閱卷方式相比，網(wǎng)上閱卷具有以下優(yōu)點：

1.可將評分誤差降低到最小程度；

2.取消了試卷流通的人工管理，計算機自動分發(fā)試卷，避免出現(xiàn)漏評現(xiàn)象；

3.大學(xué)英語六級網(wǎng)上閱卷采用深圳海云天科技公司的軟件，精準度高，科學(xué)性強，多年來在各類大型考試中備受歡迎。

總之，實行計算機網(wǎng)上評卷，從客觀角度以及數(shù)據(jù)分析來看，這一方式可以盡可能地保證考卷評分的公平公正和分數(shù)的精確。

二、影響評分信度的人為因素

在考試仍然是選拔人才重要手段的今天，對考試結(jié)果的評判是否客觀、公正將影響到人才選拔的質(zhì)量。評卷公正性事關(guān)各類考試的有效性。網(wǎng)上閱卷自動屏蔽考生信息，確保閱卷過程客觀公正的功能就可完全滿足這一需要。但其中不乏人為因素的影響。包括評卷教師個人的水平、狀態(tài)、情緒和評卷結(jié)果數(shù)據(jù)處理的手段等。本文主要以分析人為因素為主。

（一）專業(yè)文化背景影響評分信度

在本次英語六級翻譯閱卷工作中發(fā)現(xiàn)：翻譯專業(yè)學(xué)生對于試卷評閱工作理解程度較弱，分析其原因：一方面是可能是由于自身專業(yè)水平不到位；另一方面也有可能是具有專業(yè)水平，但對于試卷評閱工作中的分值把握或是定檔能力欠缺，從而導(dǎo)致綜合系數(shù)和各項指標距離大盤指數(shù)尚有差距，評卷曲線也會出現(xiàn)較大偏離，造成誤差。相比之下，學(xué)術(shù)型碩士雖沒有進行專業(yè)的翻譯實踐活動，對于分值的把握上卻要為準確。當然，這一情況主要為研究個例，并不能代表全部數(shù)據(jù)。但從中我們可以看出由于受到專業(yè)文化背景的限制，而導(dǎo)致閱卷過程中不利因素的出現(xiàn)，從而降低評分信度。

（二）個人自身條件影響評分信度

網(wǎng)上閱卷很大程度上減輕個人教師傳統(tǒng)閱卷工作的負擔，但這類工作仍然需要人為參與，并且占據(jù)一定時間，所以對于閱卷人員無論是身體還是心理素質(zhì)都有必然的要求。同時，個人的性格特點和評分傾向?qū)τ陂喚砉ぷ饕矔斐梢欢ㄓ绊憽?/p>

三、從大學(xué)英語六級翻譯試題網(wǎng)絡(luò)評閱中看閱卷員因素對評分信度的影響

（一）2016年6月翻譯測試試題分析

2016年6月英語六級考試中翻譯題試題主要涉及“創(chuàng)新”這一話題。針對這一題目，在本次閱卷過程中學(xué)生們常見錯誤有詞匯誤拼，詞語、語法誤用等問題。

（二）閱卷結(jié)果分析

閱卷采用總體評分法，閱卷員首先依據(jù)學(xué)生的譯文進行整體檔次評定，然后對考生翻譯中的語法語用錯誤進行量化，最終得出考生分數(shù)。根據(jù)閱卷數(shù)據(jù)統(tǒng)計報告可以得出如下結(jié)論：

第一：閱卷參與對象不同，結(jié)果不同。

在本次閱卷過程中，主要參與閱卷的人員可分為三類：英語專業(yè)背景下的專業(yè)碩士（以英語筆譯方向為主），學(xué)術(shù)碩士（以翻譯測試方向為主），以及在美國讀書的中國學(xué)生。鑒于專業(yè)背景不同，導(dǎo)致對閱卷工作的理解方式也大相徑庭，從而造成同一份試題，評分結(jié)果不同，最終影響評分信度。

第二：閱卷過程中常見問題。

1.專業(yè)碩士較之學(xué)術(shù)碩士評卷指數(shù)較低。總體而言對于閱卷標準把握不足，總體系數(shù)及各項指標偏低，往往出現(xiàn)脫檔現(xiàn)象，相較之學(xué)術(shù)型碩士表現(xiàn)尚佳。

2.在美國讀書的中國學(xué)生思維方式與理解能力有所偏差。對于中國所提倡的正確使用語法規(guī)范沒有很好的理解。

3.個人身體素質(zhì)較弱者無法長時間進行試卷評閱，導(dǎo)致前后出現(xiàn)誤差。心理素質(zhì)不強者一經(jīng)組長提醒偶爾會出現(xiàn)平均分過高或過低的情況，脫檔現(xiàn)象嚴重，離散指數(shù)較差。

第三：問題解析。

就整體情況而言，在閱卷過程中出現(xiàn)的最多問題即反映在評分曲線偏離標準較多，脫檔現(xiàn)象普遍，無法準確定位分值等，這些問題除了必要的人為因素以外，本身軟件設(shè)計上尚存有一定缺陷，對于評分無規(guī)律者無法分析數(shù)據(jù)，則會出現(xiàn)誤評現(xiàn)象。

綜合上述：人為因素對于閱卷結(jié)果會產(chǎn)生重要影響，尤其會影響到評分信度，最終涉及到閱卷質(zhì)量問題。

四、結(jié)語

在社會快速發(fā)展、科技日新月異的信息化時代，網(wǎng)上閱卷可以作為廣大教師閱卷工作的最佳助力，把教師從繁重的考試閱卷與統(tǒng)計分析工作中解脫出來，并有效確保閱卷質(zhì)量。因此，作為閱卷員本身，必須要確保評卷結(jié)果準確，盡可能避免不利于評卷質(zhì)量因素產(chǎn)生的機制。

參考文獻：

[1]趙海燕，芮楠.雙評作文題網(wǎng)上閱卷評卷教師[J].中國考試，2009，（02）.

[2]朱燕，古珍.口語測試中考官評分傾向性研究[J].教育探討，2015.

（作者簡介：[1]白玉潔，西北大學(xué)外語學(xué)院碩士生，從事英語筆譯研究；[2]高淑玲，博士，西北大學(xué)外國語學(xué)院教授，主要從事英語語言學(xué)，語言哲學(xué)，測試學(xué)研究。）