高職高專(zhuān)英語(yǔ)A級(jí)測(cè)試試卷的信度與效度探討

黎開(kāi)明

【摘要】高職高專(zhuān)英語(yǔ)A級(jí)測(cè)試試卷的信度與效度如何，在很大程度上體現(xiàn)出該測(cè)試試卷的設(shè)計(jì)水平，決定著在多大程度上該測(cè)試的可信程度以及該測(cè)試對(duì)教學(xué)的有效度。本文以英語(yǔ)教學(xué)的《基本要求》和《考試大綱》為參考依據(jù)，側(cè)重探討如何構(gòu)建與現(xiàn)代經(jīng)濟(jì)社會(huì)發(fā)展相適應(yīng)的新型高職高專(zhuān)英語(yǔ)A級(jí)測(cè)試評(píng)價(jià)體系，提升其信度與效度，從而促進(jìn)高職高專(zhuān)英語(yǔ)教學(xué)研究與改革。

【關(guān)鍵詞】高職高專(zhuān)英語(yǔ) ?A級(jí)測(cè)試 ?信度 ?效度 ?測(cè)試評(píng)價(jià)體系

一、A級(jí)測(cè)試評(píng)價(jià)模式需要改革

改革開(kāi)放幾十年來(lái)，社會(huì)經(jīng)濟(jì)快速發(fā)展，高職高專(zhuān)英語(yǔ)教學(xué)進(jìn)行了一系列的改革創(chuàng)新，但是相應(yīng)的高職高專(zhuān)英語(yǔ)測(cè)評(píng)模式的改革情況卻不盡人意。高等學(xué)校英語(yǔ)應(yīng)用能力考試（即通常所說(shuō)的A、B級(jí)考試） 是在我國(guó)高職院校中廣泛應(yīng)用的主要英語(yǔ)測(cè)試評(píng)價(jià)模式， 其全國(guó)統(tǒng)考模式與不同發(fā)展地區(qū)的高職英語(yǔ)教學(xué)水平差異以及個(gè)性化的需求本身就是不一致的，出現(xiàn)了許多急需解決的問(wèn)題。

（一）A級(jí)測(cè)試的信度不夠，即不能反映學(xué)生真實(shí)英語(yǔ)水平

信度（reliability）定義如何界定？所謂高職高專(zhuān)英語(yǔ)A、B級(jí)測(cè)試的信度，即指該測(cè)試的設(shè)計(jì)過(guò)程、測(cè)試過(guò)程、測(cè)試結(jié)果與考生真實(shí)英語(yǔ)水平的關(guān)聯(lián)程度究竟有多高，決定了該測(cè)試的可信程度。由于學(xué)生將來(lái)就業(yè)時(shí)對(duì)英語(yǔ)過(guò)級(jí)證書(shū)的現(xiàn)實(shí)需求，以及學(xué)校相關(guān)部門(mén)對(duì)提高英語(yǔ)過(guò)級(jí)率的期望值和硬性指標(biāo)要求， 教師將重點(diǎn)放到了提高考試成績(jī)，提高英語(yǔ)過(guò)級(jí)率之上，最后導(dǎo)致出現(xiàn)重信度而輕效度的結(jié)果。在這個(gè)期間，學(xué)生應(yīng)該學(xué)什么，教師應(yīng)該教什么，已經(jīng)變得不再重要。以A級(jí)（PRETCO）的測(cè)試項(xiàng)目及其題型為例，雖然客觀題型具有很多優(yōu)點(diǎn)，然而并不能考查出學(xué)生的聽(tīng)說(shuō)讀寫(xiě)的實(shí)際應(yīng)用能力，無(wú)法實(shí)現(xiàn)“著重考核學(xué)生實(shí)際運(yùn)用語(yǔ)言的能力”的教學(xué)初衷。

（二）A級(jí)測(cè)試的效度不夠，即考非所學(xué)，不能樹(shù)立正確的學(xué)習(xí)導(dǎo)向

效度（validity）定義如何界定？簡(jiǎn)單來(lái)說(shuō)，就是測(cè)試的有效性。

換句話講，所謂高職高專(zhuān)英語(yǔ)A、B級(jí)測(cè)試的效度，即指該測(cè)試能在多大程度上反映出考生所學(xué)與所考的關(guān)聯(lián)度 ，從而體現(xiàn)出該測(cè)試對(duì)教學(xué)的有效度。目前實(shí)行的A級(jí)測(cè)試對(duì)《高職高專(zhuān)教育英語(yǔ)課程教學(xué)基本要求》是有很大的促進(jìn)和推動(dòng)作用，標(biāo)準(zhǔn)化、規(guī)范化的考試操作流程簡(jiǎn)單，易操作。但由于教師將重點(diǎn)放到了提高考試成績(jī)，提高英語(yǔ)過(guò)級(jí)率之上，導(dǎo)致在現(xiàn)實(shí)中客觀存在重信度輕效度的現(xiàn)象，現(xiàn)實(shí)實(shí)踐過(guò)程中又不利于反向促進(jìn)高職高專(zhuān)英語(yǔ)教學(xué)。因此，就會(huì)出現(xiàn)考生所學(xué)與所考的關(guān)聯(lián)度偏低，導(dǎo)致教師把重心放到英語(yǔ)過(guò)級(jí)率之上的非正?，F(xiàn)象。

二、信度與效度具體問(wèn)題

（一）A級(jí)試卷設(shè)計(jì)者的相關(guān)測(cè)試體系理論水平偏低

目前我國(guó)大部分教師，尤其是高職院校的教師，主要是從原來(lái)的中等職業(yè)學(xué)校、中等專(zhuān)業(yè)學(xué)校、行業(yè)企業(yè)職業(yè)培訓(xùn)學(xué)校轉(zhuǎn)化而來(lái)，缺乏高職高專(zhuān)系統(tǒng)的A級(jí)測(cè)試學(xué)理論。因此，在A級(jí)試卷的設(shè)計(jì)過(guò)程中，測(cè)試的戰(zhàn)略方向和測(cè)試策略存在不系統(tǒng)、不科學(xué)的現(xiàn)象，結(jié)果導(dǎo)致一種錯(cuò)誤的社會(huì)引導(dǎo)，使很多人把考試成績(jī)的高低與學(xué)生的英語(yǔ)水平聯(lián)系起來(lái)。

（二）英語(yǔ)A級(jí)測(cè)試很難客觀、準(zhǔn)確地反映學(xué)生的真實(shí)英語(yǔ)水平

從技術(shù)上講，考試是對(duì)一個(gè)人全部學(xué)習(xí)行為的抽樣測(cè)驗(yàn)。因此，抽樣的代表性、典型性，直接影響測(cè)試的有效性和可信程度。① 因此常常會(huì)出現(xiàn)試題難易程度不穩(wěn)定，知識(shí)面難以客觀、穩(wěn)定等現(xiàn)象。

（三）英語(yǔ)測(cè)試題型的固化

目前我們的A級(jí)測(cè)試中，選擇題的比例過(guò)大，而選擇題有很多弊端。測(cè)試專(zhuān)家 Alderson 說(shuō)：“有證據(jù)表明，考生在答多項(xiàng)選擇題時(shí)可以通過(guò)一些應(yīng)試技巧將自己的分?jǐn)?shù)‘人為地提高許多?！?/p>

（四）閱卷評(píng)分質(zhì)量穩(wěn)定性差

每套試卷幾乎都有一定比例的主觀題（寫(xiě)作和翻譯），但在閱卷評(píng)分的過(guò)程中往往又失去了主觀題在考試中應(yīng)有的作用。一方面是因?yàn)橹饔^題缺乏詳細(xì)、科學(xué)的評(píng)分標(biāo)準(zhǔn)，另一方面是閱卷教師各自的側(cè)重點(diǎn)有所不同，打分的主觀性和隨意性很大。

三、對(duì)策與建議

（一）命題模式：集體命題人員專(zhuān)家?guī)旌皖}庫(kù)相結(jié)合的原則，教考分離原則

（1）命題人員的確定。建立集體命題和題庫(kù)相結(jié)合的制度，并逐漸制度化、規(guī)范化。建立命題人員專(zhuān)家?guī)熘贫?，靈活抽取命題人員。集體命題使命題人員可以集體討論相關(guān)的命題原則和細(xì)節(jié)，努力保證標(biāo)準(zhǔn)一致、質(zhì)量穩(wěn)定。設(shè)立隨機(jī)題庫(kù)可以避免命題的隨意性。同時(shí)，采取“教考分離”的制度，有效縮小命題者對(duì)自己學(xué)生的個(gè)人感情空間與個(gè)人利益輸送空間。

（2）命題制度化、規(guī)范化。第一，努力控制該試卷的題量。一份試卷必須具備一定的題量， 才能考查出考生真正的語(yǔ)言知識(shí)和能力水平。④第二，全局掌握試卷的題型結(jié)構(gòu)，其根本標(biāo)準(zhǔn)就是，是否“所考即所學(xué)”，這直接決定該項(xiàng)考試的效度。第三，試卷難易程度。難度太大或者過(guò)于簡(jiǎn)單，都不能保證考試的信度和效度。第四，注意試卷題型結(jié)構(gòu)順序的科學(xué)性、合理性。先易后難，順應(yīng)考試的心理學(xué)特點(diǎn)，幫助考生發(fā)揮出最好水平。

（二）測(cè)評(píng)過(guò)程：處理好信度和效度的平衡關(guān)系

考試策劃者應(yīng)從試卷設(shè)計(jì)和命題一開(kāi)始， 就把握好信度和效度關(guān)系這把評(píng)估考試質(zhì)量標(biāo)準(zhǔn)的尺， 而不應(yīng)把它們看作是事后的統(tǒng)計(jì)數(shù)據(jù)。⑤換句話講，既要保證盡可能反映出考生真實(shí)英語(yǔ)水平，從而體現(xiàn)出該測(cè)試的可信程度;也要盡可能反映出考生所學(xué)與所考的關(guān)聯(lián)度 ，從而體現(xiàn)出該測(cè)試對(duì)教學(xué)的有效度。

（三）評(píng)卷制度：公平公正公開(kāi)

（1）評(píng)分細(xì)則穩(wěn)定化、規(guī)范化、細(xì)化，包括客觀、主觀答案答案細(xì)化，并將每個(gè)大題的總分分解到每一道小題。

（2）評(píng)卷題目相對(duì)固定化。即每位評(píng)卷員只負(fù)責(zé)相對(duì)固定的某個(gè)題型的評(píng)卷，而不負(fù)責(zé)一份完整試卷，這樣就更專(zhuān)業(yè)，標(biāo)準(zhǔn)相對(duì)更穩(wěn)定。

（3）保證集體閱卷方式，這樣閱卷結(jié)果有更高的可信度，提高閱卷的信度。

參考文獻(xiàn)：

[1]謝穎梅.“教考分離”啟示下對(duì)高職高專(zhuān)英語(yǔ)測(cè)試的思考[J].科教文匯，2008.

[2]謝穎梅.對(duì)高職高專(zhuān)英語(yǔ)測(cè)試的思考[J].科教文匯，2008.