高等學(xué)校英語(yǔ)應(yīng)用能力B級(jí)閱讀理解內(nèi)容效度分析

于盛鵑

(阜陽(yáng)職業(yè)技術(shù)學(xué)院 外語(yǔ)系，安徽 阜陽(yáng) 236031)

高等學(xué)校英語(yǔ)應(yīng)用能力B級(jí)閱讀理解內(nèi)容效度分析

于盛鵑

(阜陽(yáng)職業(yè)技術(shù)學(xué)院 外語(yǔ)系，安徽 阜陽(yáng) 236031)

閱讀理解是高等學(xué)校英語(yǔ)應(yīng)用能力B級(jí)考試的主要組成部分，閱讀文本的內(nèi)容效度是衡量試題效度的重要指標(biāo)之一。本文以2009年12月至2011年12月的PRETCO B 真題為例進(jìn)行內(nèi)容效度分析，發(fā)現(xiàn)閱讀題總體上符合基本要求和考試大綱規(guī)定，但也存在單詞量不足、易讀度系數(shù)偏高、閱讀技能考核不均衡等問(wèn)題，命題人員可進(jìn)一步加大試題難度、擴(kuò)大題材多樣性、涵蓋更廣的閱讀技能考察等來(lái)提升文本的內(nèi)容效度。

PRETCO B；閱讀理解；內(nèi)容效度

高等學(xué)校英語(yǔ)應(yīng)用能力考試(PRETCO)作為檢測(cè)高等學(xué)校專(zhuān)科層次(高等專(zhuān)科教育、高等職業(yè)技術(shù)教育、成人高等教育)修完英語(yǔ)課程的在校生英語(yǔ)應(yīng)用能力標(biāo)準(zhǔn)化英語(yǔ)水平考試在全國(guó)推行。Hughes說(shuō)“只有測(cè)試能準(zhǔn)確地測(cè)試出它要測(cè)試的內(nèi)容，這個(gè)測(cè)試才是有效的”[1]。那么作為全國(guó)性考試，該考試是否測(cè)試了應(yīng)測(cè)的內(nèi)容呢？由于閱讀部分以35%的比例占據(jù)試卷最大比例，因此閱讀理解的效度極大地影響著整個(gè)測(cè)試的效度。本文根據(jù)Bachman 和 Palmer的考試任務(wù)特點(diǎn)框架，對(duì)2009年至2011年P(guān)RETCO (B)閱讀理解試題從語(yǔ)篇輸入和預(yù)期應(yīng)答兩大方面做內(nèi)容效度分析，以檢測(cè)閱讀理解的測(cè)試內(nèi)容是否符合基本要求和考試大綱。筆者期望能為高職院校英語(yǔ)教學(xué)改革找到一些啟發(fā)。

一、信度、內(nèi)容效度

信度和效度是語(yǔ)言測(cè)試的永恒主題。信度是指測(cè)試結(jié)果的可靠程度，效度表明測(cè)試與測(cè)試結(jié)果的關(guān)聯(lián)程度，即考試是否檢測(cè)了它要檢測(cè)的東西，是否達(dá)到了它所預(yù)定的目的。 一般認(rèn)為效度有五種，即表面效度、結(jié)構(gòu)效度、內(nèi)容效度、共時(shí)效度和預(yù)示效度。

內(nèi)容效度是測(cè)試內(nèi)容與測(cè)試之間的相關(guān)性，即測(cè)試中所涉及的內(nèi)容是否準(zhǔn)確、全面而充分地體現(xiàn)了要測(cè)試的內(nèi)容。“語(yǔ)言測(cè)試的效度，亦指有效性，指測(cè)試所考的是否就是所要考的，或者說(shuō)，在多大程度上，是考了目的所要考的”[2]。PRETCO是依據(jù)基本要求和考試大綱設(shè)計(jì)的考試，因此內(nèi)容效度分析自2009年至2011年五份試卷中閱讀理解試題是否符合基本要求和考試大綱。

二、內(nèi)容效度分析研究設(shè)計(jì)

本文以2009年12月真題到2011年12月真題共五份試卷中選取的20篇閱讀理解文章(共計(jì)100道試題)為研究對(duì)象，從語(yǔ)篇輸入和預(yù)期應(yīng)答兩大方面出發(fā)，將高教司頒布的基本要求和考試大綱與語(yǔ)篇輸入和預(yù)期應(yīng)答兩方面逐一比對(duì)分析，來(lái)探索PRETCO(B)閱讀理解試題是否符合基本要求和考試大綱。

三、研究發(fā)現(xiàn)與討論

1.語(yǔ)篇輸入：長(zhǎng)度

李筱菊教授認(rèn)為：不同的閱讀測(cè)試對(duì)于輸入材料的長(zhǎng)度有不同的要求[2]。這里的長(zhǎng)度是指文中出現(xiàn)的單詞數(shù)量，不包括文中對(duì)于生詞的中文夾注。借助Microsoft Office 2003，從2009年12月試題至2011年12 月試題中閱讀篇章單詞總量匯總來(lái)看，單詞總量從最少的680個(gè)單詞到最多的744個(gè)單詞不等，單詞總量變化不大。根據(jù)考試大綱，閱讀理解單詞總量要求達(dá)到800個(gè)左右，由此可見(jiàn)這五套試題閱讀理解單詞總量基本是符合大綱要求的。但是，由單詞總量最大值方達(dá)到744個(gè)來(lái)看，試題中閱讀理解部分單詞的總輸入量仍有提升空間。

2.語(yǔ)篇輸入：生詞量

B級(jí)考試大綱“詞匯表”包含2 500個(gè)單詞。不在詞匯表中的單詞均為生詞。一般來(lái)說(shuō)，生詞是考生閱讀理解解題的大障礙，但鑒于命題者要采用原版真實(shí)材料，不能隨意修改或簡(jiǎn)化，因此很難將試題中所有詞匯限定在詞匯表的范圍之內(nèi)。但是，生詞應(yīng)該被控制在一定的范圍。Nuttall認(rèn)為：閱讀材料中的生詞控制在3%是適當(dāng)?shù)碾y度[3]，而考試大綱亦規(guī)定閱讀理解部分生詞量不能超過(guò)3%。從2009年12月至2011年12月試題中閱讀篇章含生詞所占比例匯總來(lái)看，所含生詞量從9到11不等，占詞匯總量的比例從最高的1.56%到最低的1.21%,均遠(yuǎn)低于考試大綱中規(guī)定的3%。這表明這五套試題中閱讀理解試題生詞量不足，因此文章整體閱讀難度不夠。

3.語(yǔ)篇輸入：易讀度

根據(jù)《朗文語(yǔ)言教學(xué)及應(yīng)用語(yǔ)言學(xué)詞典》，文本易讀度是指書(shū)面材料的難易程度，是評(píng)估閱讀材料難度的標(biāo)尺。Richards認(rèn)為有很多因素與文本的易讀度有關(guān)，如句子長(zhǎng)度、生詞數(shù)量、語(yǔ)法的復(fù)雜程度等。目前學(xué)術(shù)界也有很多測(cè)量文本易讀度的方法，本研究采用的是Flesh 公式。借助Microsoft Office 2003，研究中涉及到的五套試題閱讀理解部分的文本(不含閱讀試題4)易讀度平均值經(jīng)統(tǒng)計(jì)分別為61.28,58.65,53.90,63.88和61.83。文本難易程度的判斷是將該平均值與Flesh易讀度參考量表進(jìn)行比對(duì)。Flesh易讀度參考量表最初是為母語(yǔ)為英語(yǔ)的本族語(yǔ)者設(shè)計(jì)，雖然不夠全面客觀，但仍不失是一個(gè)測(cè)量閱讀文本難易程度的很好的參考。分值越高，文本越容易。以上統(tǒng)計(jì)數(shù)據(jù)顯示閱讀文本難易程度的均值始終徘徊在50與70之間，對(duì)應(yīng)Flesh易讀度參考量表中的“相當(dāng)困難”和“標(biāo)準(zhǔn)”?；疽蠛涂荚嚧缶V的要求是要求學(xué)生能夠讀懂篇幅短小的文章和中等難度的閱讀材料,“中等難度”與50至70的區(qū)間恰好相符，因此可以推斷研究中涉及的五套試卷中閱讀理解的難易程度符合基本要求和考試大綱的要求。

4.語(yǔ)篇輸入：閱讀速度

基本要求規(guī)定考生的閱讀速度要達(dá)到每分鐘50詞以上，考試大綱亦為閱讀理解部分設(shè)定了40分鐘的閱讀時(shí)間?？忌鷳?yīng)試時(shí)不僅需要閱讀，還需要答題。根據(jù)楊惠中和 Weir的觀點(diǎn)，應(yīng)試者閱讀和答題時(shí)間的比例應(yīng)該為1∶0.75，閱讀理解部分被設(shè)定了40分鐘的應(yīng)試時(shí)間，根據(jù)這個(gè)比例，即考生需要花費(fèi)23分鐘閱讀，17分鐘答題。基于這種分析，研究中對(duì)所涉及的五套試題閱讀理解部分的閱讀速度進(jìn)行了測(cè)算，測(cè)算結(jié)果顯示五套試題中閱讀理解部分閱讀速度最高為32.25單詞量每分鐘，最低為29.57單詞量每分鐘?；疽笠?guī)定每分鐘的單詞閱讀量要達(dá)到50單詞。由此可見(jiàn)，研究中所涉及的試題的閱讀速度遠(yuǎn)低于要求?；蛟S命題者刻意選取篇幅短小的文章來(lái)迎合高職院校學(xué)生較薄弱的英語(yǔ)水平，抑或是應(yīng)試者在試題3和試題5中花費(fèi)了過(guò)多的時(shí)間來(lái)填寫(xiě)答案，從而影響了整體的閱讀速度。

5.語(yǔ)篇輸入：題材覆蓋率

Benchman認(rèn)為，一段論述的主題通常被理解為“關(guān)于什么”，它是話(huà)語(yǔ)的主題。面對(duì)有著不同的專(zhuān)業(yè)背景和知識(shí)的應(yīng)試者，試題中閱讀文本題材的選取應(yīng)該公正，因?yàn)閷?duì)文章背景知識(shí)的熟悉程度會(huì)直接影響答題正確率。考試大綱規(guī)定閱讀理解題材選取應(yīng)涉及科普、文化、社會(huì)、常識(shí)、經(jīng)貿(mào)、人物等。借鑒韋艷梅碩士論文《高等學(xué)校英語(yǔ)應(yīng)用能力考試B級(jí)閱讀理解內(nèi)容效度研究》中題材的分類(lèi)方法，經(jīng)對(duì)研究所涉及的五套試題中閱讀文本的題材分布統(tǒng)計(jì)得知，五套試卷中閱讀理解部分文本題材涵蓋范圍較廣。社會(huì)生活類(lèi)題材是學(xué)生最熟悉的題材，以35%的比例位居最高。常識(shí)類(lèi)題材緊隨其后。由于基本要求規(guī)定學(xué)生能讀懂經(jīng)濟(jì)貿(mào)易領(lǐng)域簡(jiǎn)單的書(shū)信，因此經(jīng)濟(jì)貿(mào)易類(lèi)題材也占據(jù)了一定的比例，但是比例偏小，或許此種控制是為避免給有經(jīng)濟(jì)學(xué)知識(shí)背景的考生帶來(lái)優(yōu)勢(shì)從而引發(fā)應(yīng)試不公。語(yǔ)言文化緊密相連，因此文化類(lèi)題材亦占15%的比例?？破疹?lèi)題材對(duì)于學(xué)生來(lái)說(shuō)最為困難，因此所占比例最小。總之，五套試題中閱讀理解部分文本題材分布與基本要求和考試大綱基本相符。

6.預(yù)期回答

預(yù)期回答主要指在閱讀理解中考核學(xué)生對(duì)于閱讀技能的掌握程度。根據(jù)基本要求和考試大綱，學(xué)生應(yīng)該掌握如下閱讀技巧和策略：(1)了解語(yǔ)篇和段落的主旨和大意；(2)掌握語(yǔ)篇中的事實(shí)和主要情節(jié)；(3)理解語(yǔ)篇上下文的邏輯關(guān)系；(4)了解作者的目的、態(tài)度和觀點(diǎn)；(5)根據(jù)上下文正確理解生詞的意思；(6)了解語(yǔ)篇的結(jié)論；(7)進(jìn)行信息轉(zhuǎn)換。筆者統(tǒng)計(jì)了五套試題中閱讀理解試題考核到的閱讀策略和技巧的分布，發(fā)現(xiàn)：除去“了解語(yǔ)篇結(jié)論”，試題基本涵蓋了基本要求和考試大綱中的閱讀技能，但各項(xiàng)技能所占比例不同。“事實(shí)和主要情節(jié)”的技能考察以46.4%的比例列于首位，顯示了命題者更多地考察學(xué)生基本技能的目的?！靶畔⑥D(zhuǎn)換”和“生詞詞意理解”是試題3和試題4的特點(diǎn)，分別位列第二、第三。而五套試題卻絲毫沒(méi)有涉及到“了解語(yǔ)篇結(jié)論”。由此可見(jiàn)，研究中所涉及的五套試題閱讀理解技能考核分布不均，命題者過(guò)度重視基本技能的考核，卻忽略了考核的全面性，在一定程度上破壞了試題的內(nèi)容效度。作為一項(xiàng)全國(guó)性考試，命題者應(yīng)該在基本要求和考試大綱規(guī)定的諸多閱讀技能考核中保持一定的平衡，提高試題考核的科學(xué)性、客觀性和全面性。

除了閱讀技能覆蓋度，預(yù)期回答還包括問(wèn)題類(lèi)型。研究中涉及的試題不僅有選擇題，而且有填空題、匹配題和回答問(wèn)題，題目形式多樣，主觀題與客觀題相互搭配，能多角度地考核學(xué)生的閱讀技能。

四、結(jié)論

基于Bachman 和Palmer的評(píng)價(jià)框架，本文從語(yǔ)篇輸入和預(yù)期應(yīng)答兩大方面，對(duì)2009年12月至2011年12月共五套高等學(xué)校英語(yǔ)應(yīng)用能力考試B級(jí)(PRETCO B)真題中閱讀理解部分做了內(nèi)容效度分析。通過(guò)分析，發(fā)現(xiàn)：(1)或許命題者過(guò)多關(guān)注高職院校學(xué)生較薄弱的英語(yǔ)語(yǔ)言能力，從而導(dǎo)致試題中詞匯輸入量及生詞比例和閱讀速度都遠(yuǎn)低于大綱要求。(2)文本易讀度和題材分布基本符合大綱要求。(3)在閱讀技能的覆蓋方面有一定的測(cè)試偏頗，這在一定程度上會(huì)給教與學(xué)帶來(lái)負(fù)面反駁作用。為此，針對(duì)研究中發(fā)現(xiàn)的不足之處，筆者建議，作為全國(guó)范圍的在高職院校廣泛推行的標(biāo)準(zhǔn)參照考試，命題者應(yīng)緊緊圍繞基本要求和考試大綱，以提高命題的科學(xué)性，打造系統(tǒng)規(guī)范的高職英語(yǔ)類(lèi)考試。

當(dāng)然，該研究亦存在很大的局限性，如所選研究對(duì)象過(guò)于狹窄，僅限于五套試題；數(shù)據(jù)分析僅簡(jiǎn)單借助于Microsoft Office 2003，而沒(méi)有使用SPSS，從而導(dǎo)致分析不夠科學(xué)準(zhǔn)確等。在以后的研究中，除內(nèi)容效度分析外，還可以從結(jié)構(gòu)效度、校標(biāo)效度等其他角度做更深入廣泛的研究，以為高職院校中的英語(yǔ)教、學(xué)及教學(xué)改革提供有益的幫助。

[1]Hughes，A.Testing for Language Teachers[M].Cambridge:Cambridge University Press,1989.13～26.

[2]李筱菊.語(yǔ)言測(cè)試與藝術(shù)[M]．長(zhǎng)沙：湖南教育出版社，2001.277.

[3]Nuttall，C.Teaching Reading Skills in a Foreign Language[M].Shanghai：Shanghai Foreign Language Education Press,2002.

2095-4654(2015)04-0134-03

2015-01-28

H310.4

A