TEM-8 閱讀測試內(nèi)容效度分析

劉 凌, 易莎莎

(湖北工業(yè)大學(xué)外國語學(xué)院， 湖北 武漢 430068)

?

TEM-8 閱讀測試內(nèi)容效度分析

劉 凌, 易莎莎

(湖北工業(yè)大學(xué)外國語學(xué)院， 湖北 武漢 430068)

選取2010年到2015年專八真題的閱讀理解試題進(jìn)行內(nèi)容效度分析，發(fā)現(xiàn)其內(nèi)容效度較高，能夠較科學(xué)衡量學(xué)生的學(xué)習(xí)水平，但在選材、閱讀速度以及閱讀能力考察上存在一些問題。結(jié)合2016年專八閱讀測試的改革對上述問題進(jìn)行分析，提出完善建議，進(jìn)一步提高閱讀測試的內(nèi)容效度。

專業(yè)英語八級； 閱讀理解； 內(nèi)容效度； 考試大綱

專業(yè)英語八級考試旨在全面檢查完成英語專業(yè)高年級階段課程的學(xué)生是否具備了《高等學(xué)校英語專業(yè)英語教學(xué)大綱》(以下簡稱《大綱》)所需要掌握的英語語言綜合運用能力標(biāo)準(zhǔn)及英語專業(yè)知識?！洞缶V》明確規(guī)定專業(yè)英語八級考試屬于標(biāo)準(zhǔn)型教學(xué)檢查類考試，即學(xué)業(yè)測試(achievement test)?？荚嚪秶依恕洞缶V》規(guī)定的聽、說、讀、寫、譯四個方面的能力以及英語專業(yè)知識。

學(xué)業(yè)測試是用于檢測學(xué)生某一課程學(xué)習(xí)情況的考試，即一項基于教學(xué)大綱的考試 ( syllabus- based)。效度是衡量測試的一個重要指標(biāo)，而內(nèi)容效度又是效度的重要組成部分。Kerlinger (1973)提出內(nèi)容效度(content validity)是“一測量工具內(nèi)容上(包括材料、題材、題目)的代表性或所選內(nèi)容樣本的充分性”。[1]

對專業(yè)英語八級測試中閱讀部分的內(nèi)容效度分析是衡量試題的閱讀理解部分是否與考試大綱預(yù)期測試意圖相一致。專業(yè)英語八級考試自1994年開展至今已有20余年，其考試大綱也一再修訂。2015年又在2004年新考綱的基礎(chǔ)上進(jìn)行了新的改革，并于2016年開始實施。在2004年至2015年期間，不少研究者對專八真題進(jìn)行分析，尤其是閱讀部分。陳云、李潔在系統(tǒng)功能語法中的語篇分析理論框架下，對專八閱讀理解的文本進(jìn)行分析，為專八考生備考提供參考；[2]胡曉丹，倪蓉通過分析專八試卷與考生的成績，為專八考試提出意見；[3]唐美華通過自建語料庫對專四專八的閱讀理解文本內(nèi)容的難度進(jìn)行了對比分析，為閱讀教和學(xué)提出建議；[4]此外還有不少的碩士畢業(yè)論文，研究主要集中于專八考試和大學(xué)英語四六級[5]和雅思、托福的對比研究[6]，以及對專八閱讀測試的內(nèi)容效度分析[7]。

綜上所述，專八閱讀測試的內(nèi)容效度分析研究比較豐富，本文在此基礎(chǔ)上進(jìn)一步研究2010-2015的專八真題閱讀理解測試的內(nèi)容效度，并結(jié)合2015年8月專八新改革考綱提出本文的完善建議。

1 選材是否符合大綱

新《考綱》要求專業(yè)英語八級閱讀理解的選材應(yīng)符合以下原則：1)題材廣泛，包括社會、科技、文化、經(jīng)濟、文學(xué)、語言學(xué)、人物傳記等；2)體裁多樣，包括記敘文、描寫文、說明文、議論文等；3)閱讀材料的語言難度中等偏上。

表1 2010-2015年TEM-8閱讀材料題材體裁一覽表

表1是對2010年至2015年專八閱讀理解文章在題材和體裁兩方面的統(tǒng)計。從表1中可看出，專八的閱讀理解文章在選材上符合大綱題材廣泛的原則，各類題材的文章都滲透在了閱讀理解的文章當(dāng)中，并且囊括了社會的熱點問題。就2015年的閱讀理解篇章而言，文章的題材包括了網(wǎng)絡(luò)購物、兒童教育問題中的榜樣，一場在西非的滑稽旅行，以及介紹科技的進(jìn)一步發(fā)展。這都說明了2015年的閱讀理解文章選題之廣和選題之細(xì)。廣泛的選題也符合《高級英語》教材的特點。

本研究首先統(tǒng)計了閱讀材料的體裁(見表1)，議論文和說明文占70%左右；記敘文描寫文僅占8.3%。周瑞英曾指出說明文和議論文在《高級英語》教材中所占比例為45%；文學(xué)作品的比例為35%。[8]羅長田也提出高級英語的教學(xué)原則中應(yīng)包含“培養(yǎng)文體意識，提高學(xué)生文體分析能力和文學(xué)鑒賞能力”。[9]相比之下，專八閱讀測試中關(guān)于文學(xué)作品的考查較少，筆者認(rèn)為，專八閱讀在選材上應(yīng)更加契合高級英語的教學(xué)原則。在文章的體裁上適當(dāng)增加對文學(xué)作品的考查，確保測試與高級英語教學(xué)目標(biāo)一致。

2 閱讀速度是否達(dá)到測試要求

《考綱》對考生閱讀速度的要求：閱讀材料共計3000個單詞左右；閱讀速度為每分鐘150個單詞；考試時間為30分鐘。

表2是對2010年至2015年專八閱讀材料字?jǐn)?shù)的統(tǒng)計。根據(jù)計算，從2010年到2015年平均閱讀字?jǐn)?shù)為2734，這與考綱的要求基本符合?？傮w而言，每年閱讀材料的字?jǐn)?shù)差距不大。但2015年的閱讀材料的字?jǐn)?shù)比2013、2014多出398個單詞，懸殊較大，對2015年的考生有失公平性。

表2 2010-2015年TEM-8閱讀材料字?jǐn)?shù)一覽表

3 閱讀能力的考察是否符合測試要求

《考綱》明確從主旨大意，事實和細(xì)節(jié)；字面意義和隱含意義；根據(jù)所給信息進(jìn)行判斷和推理；總結(jié)材料的思想觀點、語篇結(jié)構(gòu)、語言特點和修辭手法等方面來考察學(xué)生的閱讀理解能力。表3對2010年到2015年的閱讀理解的試題考點進(jìn)行統(tǒng)計。

表3 2010-2015年TEM-8閱讀理解試題考點一覽表

從表3的數(shù)據(jù)中可以看出試題的分布符合考綱的要求。各類考點均出現(xiàn)在試題當(dāng)中，但各類考點的比例卻不是很均衡。由圖中的數(shù)據(jù)中不難發(fā)現(xiàn)，每年考試試題中事實細(xì)節(jié)題目所占比重都超過了50%，但是關(guān)于篇章結(jié)構(gòu)的試題只有2010年和2012年的考試中有所涉及。羅長田概括總結(jié)了高級英語的教學(xué)原則包括：培養(yǎng)語篇意識，提高學(xué)生語篇分析能力；培養(yǎng)文體意識，提高學(xué)生文體分析能力和文學(xué)鑒賞能力；培養(yǎng)文化意識，提高學(xué)生跨跨文化交際能力。[9]根據(jù)這些原則，出題人在出題時應(yīng)該根據(jù)這些原則適當(dāng)增加對篇章結(jié)構(gòu)、文學(xué)鑒賞能力和跨文化交際能力的考查。

4 建議和總結(jié)

本文對2010年至2015年的專八閱讀測試進(jìn)行了內(nèi)容效度分析，近6年來專八閱讀理解測試內(nèi)容效度較高，命題科學(xué)、嚴(yán)謹(jǐn)、規(guī)范，達(dá)到考綱的測試要求。閱讀理解的難度選擇適當(dāng)，選題題材廣泛，涉及考綱中規(guī)定的各個方面。體裁豐富，各類主要體裁均出現(xiàn)在閱讀材料中。在題型設(shè)置方面也符合考綱的規(guī)定，從不同的角度考查考生的閱讀技能。

但專八的閱讀理解測試仍有完善的空間。從2010-2015年的閱讀材料的選題而言，可以以高級英語課程的特點和教學(xué)目標(biāo)為出發(fā)點進(jìn)行取舍，使專八閱讀篇章的題材和體裁更加貼合學(xué)生實際生活和學(xué)習(xí)中的閱讀篇章類型。從閱讀速度而言，盡可能保證每年的材料長度相當(dāng)。不能單一的要求考生達(dá)到每分鐘150詞，還應(yīng)當(dāng)考慮到考生做題和填涂答題卡的時間。從閱讀能力角度而言，考點的設(shè)置上還需要有所改進(jìn)，使教學(xué)中需要培養(yǎng)和提高的能力在閱讀理解的題目中都有所考查。

2016年專八《考綱》增加了閱讀理解的題型：簡答題。Arthur Hughes對于簡答題的優(yōu)勢與缺點也做了如下分析：簡答題的設(shè)置相較于選擇題的優(yōu)勢在于猜測因素和作弊因素對閱讀能力考查的影響減??；從一定程度上減少了干預(yù)信息對閱讀能力體現(xiàn)的減少；對于試題題干而言，更易于試題的編寫。但簡答題也有缺點，例如單位時間內(nèi)受試者能做出的題目數(shù)量少，并且需要受試者通過個人的理解回答問題；對于評分而言，評分的時間增加并且會降低分?jǐn)?shù)的效度和信度。[10]簡答題在國內(nèi)外語考試中的均被應(yīng)用，如CET4,CET6中偶有涉及，TOEFL中也有類似題型，此次在專八考試中第一次采用簡答題的形式，并且對于回答的字?jǐn)?shù)也限制在10個單詞以內(nèi)，這不僅對試卷的出題者和評閱者帶來了考驗，也給考生帶來了壓力。對于出題者而言，如何合理設(shè)置問題，如何合理編寫題干都是應(yīng)當(dāng)反復(fù)斟酌的問題，對此出題者可以借鑒TOEFL中的出題方法，并以此來編排專八的閱讀測試；對于評閱者，在對該部分評分時應(yīng)該采用何種給分方式給考生一個相對公平的分?jǐn)?shù)也是一個難點問題；測試對于教學(xué)具有反撥作用，要求教師在教學(xué)中應(yīng)當(dāng)更加注重考生在規(guī)定字?jǐn)?shù)內(nèi)回答問題的能力。

本文認(rèn)為2016年的專八改革彌補了2004年《新考綱》的不足之處，并在專八考試中首次采用了簡答題的形式來考試考生的閱讀理解能力實屬創(chuàng)新之舉。究其優(yōu)點和缺點，在簡答題的設(shè)置上應(yīng)該做到揚長避短，提高專八閱讀測試的內(nèi)容效度。

[1] 鄒申. 簡明英語測試教程[M]. 北京：高等教育出版社, 2013:30-31，43.

[2] 陳云,李潔. 功能語篇分析在TEM-8閱讀理解考試中的應(yīng)用[J]. 新余學(xué)院學(xué)報. 2012(8):74-76.

[3] 胡曉丹,倪蓉. 英語專業(yè)八級試卷分析[J]. 語文學(xué)刊·外語教育教學(xué). 2015(7):128-130.

[4] 唐美華. 英語專業(yè)等級考試中閱讀理解對比分析[J]. 吉林省教育學(xué)院學(xué)報. 2009(1):75-77 .

[5] 張書琦. 閱讀測試在CET、TOEFL、和IELTS中的對比研究[D].南京：東南大學(xué)，2006.

[6] 劉希. 專八和雅思考試中閱讀理解測試的對比研究[D]. 武漢：華中師范大學(xué)，2009.

[7] 陳詩霏. 英語專業(yè)八級閱讀理解內(nèi)容效度研究(2009-2013)[D]. 桂林：廣西師范大學(xué)，2014.

[8] 周瑞英.高級英語課程的要求特點及教學(xué)手段探討[J]. 武漢科技學(xué)院學(xué)報.2006(12):163-165.

[9] 羅長田. 論高級英語課程目標(biāo)及教學(xué)原則[J].四川外語學(xué)院學(xué)報.2004(5): 142-145.

[10] Arthur H. Testing for language teachers[M]. Beijing: Foreign Language Teaching and Research Press, 2013:79.

[責(zé)任編校： 張巖芳]

An Analysis of Content Validity in the Reading Part of TEM-8

LIU Ling, YI Shasha

(SchoolofForeignLanguages,HubeiUniv.ofTech.,Wuhan430068,China)

Test for English Major Band Eight (short for TEM-8) is an achievement test. This paper analyzes the content validity of the reading comprehension parts selected from 2010 to 2015 TEM-8. The results show that the test has a relatively high content validity and it can scientifically measure the students’ language competence. However, there are still problems in selecting materials and measuring reading speed and ability. In accordance with these problems and the reform of TEM-8 in 2016, the author provides some suggestions to improve the content validity of reading comprehension of TEM-8.

test for English Major Band Eight (TEM-8); reading comprehension; content validity; syllabus

1003-4684(2016)06-0093-03

H310.4

A

2015-03-05

湖北省教育廳項目(13Y039)

劉凌(1974- )，女，湖南邵陽人，文學(xué)碩士，湖北工業(yè)大學(xué)副教授，研究方向為外國語言學(xué)及應(yīng)用語言學(xué)

易莎莎(1992- )，女，湖北潛江人，湖北工業(yè)大學(xué)碩士研究生，外國語言學(xué)及應(yīng)用語言學(xué)