音頻和視頻模態(tài)對商務(wù)英語專業(yè)學(xué)生聽力理解的影響

肖好章+劉玉婷

〔摘要〕文章報(bào)道了一項(xiàng)實(shí)驗(yàn)研究，考察了無字幕視頻和純音頻兩種不同的電影輸入形式對商務(wù)英語專業(yè)學(xué)生聽力理解的影響。無字幕視頻和純音頻可以看作英語學(xué)習(xí)的不同模態(tài)。此外，還分析討論了高分組與低分組學(xué)生對英文電影的視頻畫面和音頻的依賴程度。研究結(jié)果顯示：1）以畫面、聲音和語言多模態(tài)播放為主的無字幕視頻形式對電影內(nèi)容的聽力理解具有輔助作用；無字幕視頻和純音頻兩種不同的輸入形式在提高英文電影的聽力理解方面具有顯著差異，這與音畫關(guān)聯(lián)度相關(guān)。2）與高分組的學(xué)生對比，低分組學(xué)生對于電影視頻畫面的依賴性更強(qiáng)。文章還討論了研究結(jié)果對多模態(tài)理論和應(yīng)用研究的啟示。

〔關(guān)鍵詞〕英文電影；音頻；視頻；聽力理解；多模態(tài)

〔中圖分類號〕H0〔文獻(xiàn)標(biāo)識碼〕A〔文章編號〕1008-2689（2017）06-0019-06

引 言

采用觀看英文電影的方式進(jìn)行英語教學(xué)是多媒體和互聯(lián)網(wǎng)背景下的普遍做法。如何觀看英文電影才能提高學(xué)生的聽力和聽力理解水平是當(dāng)下亟待解決的問題。要解決這個(gè)問題，就必須先明白觀影、聽力和聽力理解三者之間的關(guān)系。王初明[1]認(rèn)為“聽”是綱，說、讀、寫、譯是目，綱舉目張，他表示只要聽的能力提高了，其他的能力也會得到改善。然而，聽力理解水平不同于聽力水平。左煥琪[2]認(rèn)為聽力理解是人腦有意識地、積極主動地對新聽到的語言進(jìn)行加工的過程。在這個(gè)過程里，聽者通過一定情境中的信息提供的線索和已有的社會、文化和語言知識，利用多種策略以達(dá)到理解的目的。顯而易見，聽力可以是一個(gè)不帶任何解讀和回應(yīng)的聽的能力，而聽力理解卻涉及大腦對信息的選取和加工這個(gè)復(fù)雜過程。這個(gè)復(fù)雜的聽力理解過程中存在一些干擾或促進(jìn)聽力理解的外部因素，如音頻和視頻兩種不同輸入形式。

隨之而來的現(xiàn)實(shí)問題是，外語教學(xué)中，視頻與音頻對聽力理解作用是否不同？不同聽力水平組的學(xué)生聽力理解時(shí)對視頻或音頻的依賴程度是否一樣？如果對前一問題的回答是肯定的，那就意味著視頻中的音畫關(guān)聯(lián)緊密，學(xué)生認(rèn)知難度低，認(rèn)知加工效果更好。但若回答是否定的，則表明視頻畫面與語言不相關(guān)，對聽力理解有干擾作用，認(rèn)知加工難度大，音畫協(xié)同效果差。第二問的回答若是肯定的，說明視頻與音頻對聽力理解影響毫無差異，反之不然。無論如何，假定需要實(shí)驗(yàn)驗(yàn)證。

一、 理論及其應(yīng)用研究背景

多模態(tài)話語分析理論是指運(yùn)用聽覺、視覺、觸覺等多種人體感覺，通過語言、圖像、聲音、動作等多種手段和符號資源進(jìn)行交際的現(xiàn)象[3]。Van Leeuwen是早期研究多模態(tài)領(lǐng)域的學(xué)者之一，受系統(tǒng)功能語言學(xué)理論影響頗深。他借鑒系統(tǒng)功能語言學(xué)的三種元功能，把符號模態(tài)也同時(shí)分為三種元功能（圖像、文字和動作），而他主要關(guān)注不同的聲音資源以及有意義的闡釋[4]。多模態(tài)研究探討了圖像在表達(dá)意義上和語言的相互作用。顧曰國[5]認(rèn)為人類通過感官與外界互動，用單個(gè)感官叫做單模態(tài)，兩個(gè)就叫做雙模態(tài)，多個(gè)叫多模態(tài)。張德祿[3]表示，“運(yùn)用多模態(tài)的理由是：一種模態(tài)不足以充分表達(dá)交際者的意義，從而利用另一者來強(qiáng)化，補(bǔ)充，調(diào)節(jié)，協(xié)同，達(dá)到更充分或者盡量充分表達(dá)意義，讓聽話者理解話語的目的?！痹诙嗄B(tài)理論基礎(chǔ)上，學(xué)者們也紛紛通過實(shí)證研究試圖實(shí)現(xiàn)多模態(tài)在實(shí)際學(xué)習(xí)中的運(yùn)用。張征[6]研究發(fā)現(xiàn)多模態(tài)PPT演示教學(xué)模式對改變學(xué)生的學(xué)習(xí)態(tài)度具有積極作用。然而，多模態(tài)也是把雙刃劍，若處理不好會分散學(xué)習(xí)者的注意力，干擾對知識點(diǎn)的記憶，導(dǎo)致瞬間“熱鬧”而事后“空空”之感[5]。

多模態(tài)理論在英文電影中表現(xiàn)為圖像、聲音和語言。有學(xué)者認(rèn)為，相較于相同內(nèi)容的純音頻單模態(tài)材料，視聽結(jié)合的材料能夠降低聽的難度[7]。Ginther[8]也表明視頻能夠?qū)σ纛l信息進(jìn)行場景語境的補(bǔ)充。季月和石玲[9]則表明過量或不相關(guān)、不匹配的視聽信息可能會干擾視聽的理解過程。為了探究視頻（視聽結(jié)合）和純音頻對于聽力理解的作用，國內(nèi)一些學(xué)者通過實(shí)證研究有了進(jìn)一步的發(fā)現(xiàn)。胡永近和張德祿[10]通過實(shí)證研究發(fā)現(xiàn)音頻、視頻配英語字幕的多模態(tài)組合對學(xué)生聽力內(nèi)容理解的促進(jìn)作用最大，音頻、視頻配漢語字幕作用次之，音頻、視頻無字幕作用第三，而單獨(dú)音頻的作用最小。查強(qiáng)[11]通過實(shí)驗(yàn)研究表明視頻組和音頻組得分之間具有很大差異，視頻對聽力理解具有促進(jìn)作用。但歐陽素珍[12]從多模態(tài)理論的視角出發(fā)，通過實(shí)驗(yàn)研究發(fā)現(xiàn)：視頻配英文字幕的多模態(tài)組合對學(xué)生的聽力內(nèi)容理解促進(jìn)最大，純音頻次之，其次是視頻配中文字幕的多模態(tài)組合，而音頻配無字幕的視頻組合作用最小。雖然視頻在一定程度上會分散學(xué)生注意力造成“分裂”效應(yīng)，但在目標(biāo)語言的配合下，能在一定程度上抵制視頻的干擾，有利于學(xué)生的聽力理解。

綜上所述，視頻與音頻對聽力理解的作用研究結(jié)果尚未取得一致的實(shí)驗(yàn)結(jié)果。這是為什么？本文認(rèn)為，原因可能有：首先，實(shí)驗(yàn)設(shè)計(jì)不合理，可能忽略了相關(guān)變量，如視頻材料的音畫相關(guān)度；其次，擴(kuò)大了無關(guān)變量的作用，如視聽時(shí)邊聽邊讀字幕存在干擾負(fù)面效應(yīng)，且不說是行為主義的機(jī)械學(xué)習(xí)方法，但至少是閱讀理解發(fā)揮了一定的作用，而不是聽力理解。再者，可能與量程有關(guān)。查強(qiáng)的實(shí)證研究的測試題目僅是單項(xiàng)選擇題，因而測試范圍和效度存在局限。鑒于此，我們假設(shè)視頻這種多模態(tài)形式理應(yīng)比純音頻的單模態(tài)形式要更有助于英文電影的聽力理解，此假設(shè)能否得到數(shù)據(jù)的支撐呢？本文擬就英文電影無字幕的視頻（視聽結(jié)合）和純音頻對聽力理解的影響進(jìn)行交叉實(shí)驗(yàn)研究。

二、 實(shí)證研究

（一） 研究問題

本研究主要回答以下問題：

1. 英文電影多模態(tài)形式的無字幕視頻與單模態(tài)形式的純音頻這兩種不同的材料輸入形式對商務(wù)英語專業(yè)學(xué)生的聽力理解影響是否不同？ 如不同，是何因素導(dǎo)致的？

2. 視頻和純音頻對高分組學(xué)生和低分組學(xué)生的影響是否不同？若不同，不同之處和其出現(xiàn)的原因分別是什么？

（二） 實(shí)驗(yàn)研究設(shè)計(jì)

實(shí)驗(yàn)研究：自變量為材料的輸入形式（純音頻/視頻），因變量為聽力理解水平，研究的目的是研究英文電影的多模態(tài)（畫面+聲音+語言）和純音頻哪個(gè)更有利于英語專業(yè)學(xué)生的聽力理解，以及不同水平的學(xué)生是否對單/多模態(tài)有不同的依賴程度。endprint

實(shí)驗(yàn)材料均采取電影剪輯片段作為視頻或音頻的原材料。每次實(shí)驗(yàn)采用的實(shí)驗(yàn)素材均選自英文電影的精彩片段，每次實(shí)驗(yàn)中共有3個(gè)電影片段，三個(gè)片段不全是同一部影片的內(nèi)容。第一次實(shí)驗(yàn)的三個(gè)片段分別選自英文電影《天生一對》Annie和Hallie姐妹相認(rèn)的片段，《天生一對》Annie和Hallie談有關(guān)母親的事，《克萊默夫婦》夫婦二人在法庭上的發(fā)言。第二次實(shí)驗(yàn)的三個(gè)片段分別選自英文電影《公主日記》公主冒雨赴約片段，《穿條紋睡衣的男孩》仆人為受傷的小男孩包扎的片段，《穿條紋睡衣的男孩》飯桌上的聊天片段。實(shí)驗(yàn)中有關(guān)視頻的材料均為英文電影去字幕后的僅保留畫面和聲音的電影片段，有關(guān)純音頻的材料均為英文電影的純音頻片段。同一次實(shí)驗(yàn)中的影片內(nèi)容和測試題均一致，僅僅是視頻和音頻形式不同而已。被試均在觀看電影片段或聽取純音頻之后才統(tǒng)一進(jìn)行測試。測試統(tǒng)一采用測試題的方式。測試題包括選擇題，簡答題和判斷題，總分為100分，涉及的測試題目內(nèi)容主要包括基于電影內(nèi)容細(xì)節(jié)題和理解題。學(xué)生的聽力理解根據(jù)分?jǐn)?shù)進(jìn)行判定。

（三） 研究方法

1. 被試

本研究的被試是60名來自某大學(xué)商務(wù)英語專業(yè)二年級的學(xué)生，他們分別屬于兩個(gè)自然班級（分別用A， B班進(jìn)行標(biāo)記），每個(gè)班級30人，他們均有至少10年的英語學(xué)習(xí)經(jīng)歷。在實(shí)驗(yàn)開始前，所有被試都參加了一次英語水平測試。A班的平均分為672，B班的平均分為654，兩個(gè)班的成績無顯著差異（F=0686，p=0506）。

2. 實(shí)驗(yàn)步驟

被試者為A班和B班，兩個(gè)班的測試題相同，由兩套難易度相同的試題組成，在前后兩周做交叉實(shí)驗(yàn)。第一次實(shí)驗(yàn)，A班在教室觀看已經(jīng)剪輯好去字幕僅保留畫面和聲音的英文電影片段，標(biāo)記為A1，此時(shí)，B班則作為對照組在環(huán)境相同的教室進(jìn)行音頻的實(shí)驗(yàn)，標(biāo)記為B1；第二次實(shí)驗(yàn)，A班在教室進(jìn)行音頻實(shí)驗(yàn)，標(biāo)記為A2；B班則在環(huán)境相同的教室進(jìn)行視頻實(shí)驗(yàn)，標(biāo)記為B2。

每次實(shí)驗(yàn)開始前，給予兩個(gè)實(shí)驗(yàn)組相同的指導(dǎo)語。觀看電影片段的視頻或聽取音頻內(nèi)容之后，監(jiān)考人員才發(fā)放測試題。因此學(xué)生必須根據(jù)個(gè)人需要用筆記記下相關(guān)的內(nèi)容。連續(xù)播放2遍第一個(gè)片段之后，發(fā)放測試題中的選擇題部分試題，在規(guī)定時(shí)間答題后統(tǒng)一收回；播放2遍第二個(gè)片段之后，發(fā)放測試題中的簡答題部分，在規(guī)定時(shí)間答題后統(tǒng)一收回；播放2遍第三個(gè)片段之后發(fā)放測試題中的判斷題試題，在規(guī)定時(shí)間答題后統(tǒng)一回收；至此，第一次實(shí)驗(yàn)結(jié)束。一周后，進(jìn)行第二次實(shí)驗(yàn)。兩次的實(shí)驗(yàn)素材是內(nèi)容不同的英文電影片段，同為三個(gè)片段，測試題題型一樣，僅影片內(nèi)容和測試題內(nèi)容不同。根據(jù)第一次實(shí)驗(yàn)的步驟完成相應(yīng)的第二次實(shí)驗(yàn)測試。

（四） 結(jié)果與分析

針對本實(shí)驗(yàn)所要研究的問題，將實(shí)驗(yàn)的數(shù)據(jù)輸入SPSS 軟件分析得到實(shí)驗(yàn)結(jié)果。

1. 多模態(tài)視頻和單模態(tài)音頻的測試結(jié)果

從表2顯示的兩次實(shí)驗(yàn)結(jié)果可以看出，在同一環(huán)境下，第一次實(shí)驗(yàn)中，被試運(yùn)用視頻形式觀看英文電影與純音頻形式聽取電影內(nèi)容并無顯著性差異（P=0.073>0.05），而在第二次實(shí)驗(yàn)中，視頻和純音頻形式的差異極為顯著（P=0.000<0.05），但根據(jù)表1數(shù)據(jù)顯示，兩次實(shí)驗(yàn)中，視頻形式都比純音頻形式更有助于英文電影的聽力理解（A1平均分86.15>B1平均分82.33， 平均差為3.821；A2平均分63.82

2. 視頻和音頻對高分組學(xué)生和低分組學(xué)生的影響

上述實(shí)驗(yàn)數(shù)據(jù)僅僅顯示了視頻和音頻兩種不同輸入形式對兩個(gè)實(shí)驗(yàn)班級的聽力理解存在不同程度的差異。為了進(jìn)一步研究不同水平的學(xué)生對于兩種輸入形式的受益情況，我們把實(shí)驗(yàn)成績進(jìn)行分組，高于中位數(shù)的則為高分組，低于中位數(shù)的為低分組，分為A1高，A1低，A2高，A2低，B1高，B1低，B2高，B2低八組數(shù)據(jù)，輸入SPSS進(jìn)行分析得出表3如下。

如表3所示，對于低分組的被試學(xué)生來說，兩次實(shí)驗(yàn)都表明視頻和音頻兩種輸入形式對其聽力理解具有顯著性的差異（p值均為0.000）；對于高分組的被試學(xué)生來說，第一次實(shí)驗(yàn)表明視頻和音頻的輸入形式對其聽力理解沒有顯著性差異（p值為0.558），但在第二次實(shí)驗(yàn)中卻出現(xiàn)了顯著性差異（p值為0.000）。結(jié)合多模態(tài)視頻和單模態(tài)音頻的實(shí)驗(yàn)數(shù)據(jù)即表2可知，第一次實(shí)驗(yàn)中視頻和音頻未出現(xiàn)顯著性差異是由于第一次實(shí)驗(yàn)的高分組的測試成績未出現(xiàn)顯著性差異。同時(shí)從表3可以看出，低分組對視頻畫面的依賴感要比高分組強(qiáng)（第一次實(shí)驗(yàn)高分組在視頻和音頻上無顯著的差異，而低分組兩次實(shí)驗(yàn)都顯示出顯著性差異）。

三、 討 論

由于本實(shí)驗(yàn)主要研究英文電影的多模態(tài)視頻和純音頻兩種不同的材料輸入形式哪個(gè)更有助于英語專業(yè)學(xué)生的聽力理解以及視頻和純音頻對高分組學(xué)生和低分組學(xué)生的影響是否存在不同？討論部分主要分為多模態(tài)形式對英文電影聽力理解的作用以及視頻和音頻對高分組學(xué)生和低分組學(xué)生的不同影響兩個(gè)部分展開。

（一） 英文電影的多模態(tài)形式對英語專業(yè)生聽力理解的作用

針對研究問題1：英文電影多模態(tài)形式的無字幕視頻與單模態(tài)形式的純音頻這兩種不同的材料輸入形式對商務(wù)英語專業(yè)學(xué)生的聽力理解影響是否不同？ 如有不同，是何因素導(dǎo)致的？根據(jù)研究的數(shù)據(jù)顯示，在同一環(huán)境下，被試在第一次實(shí)驗(yàn)運(yùn)用視頻形式觀看英文電影與純音頻形式聽取電影內(nèi)容并無顯著性差異，而在第二次實(shí)驗(yàn)中，視頻和純音頻形式的差異極為顯著，但兩次實(shí)驗(yàn)均表明視頻形式都比純音頻形式更有助于英文電影的聽力理解， 這與查強(qiáng)[11]音頻和視頻對學(xué)生聽力理解影響的結(jié)果吻合，也與胡永近和張德祿[10]的實(shí)驗(yàn)發(fā)現(xiàn)相符，同時(shí)也進(jìn)一步證實(shí)了Romero & Arévalo [13]發(fā)現(xiàn)的多模態(tài)模式更能促進(jìn)學(xué)生對聽力材料的理解，但是不同模態(tài)的作用方式不同。然而，多模態(tài)組合的不同也會直接影響其對應(yīng)的效果。在本實(shí)驗(yàn)中，我們選用畫面和聲音結(jié)合的多模態(tài)視頻形式與單模態(tài)的純音頻進(jìn)行對比，結(jié)果顯示多模態(tài)的形式對聽力理解具有一定的輔助作用，與歐陽素珍[12]的研究發(fā)現(xiàn)不一致。

筆者認(rèn)為，造成第一次實(shí)驗(yàn)視頻和音頻無顯著性差異的原因是選取的實(shí)驗(yàn)素材中的畫面圖像與聲音的聯(lián)系不夠緊密，即音畫協(xié)同不太好，因此視頻中的畫面圖像無法起到張德祿[3]所說模態(tài)之間的“互補(bǔ)關(guān)系”。而在第二次實(shí)驗(yàn)中的實(shí)驗(yàn)素材，其畫面和聲音有較大的聯(lián)系。例如影片《公主日記》片段中女主角淋完大雨出現(xiàn)時(shí)，記者與她的對話是關(guān)于衣著外貌的描述，而這也正是測試題中的一小題單選題，這時(shí)，視頻組就理解更好，被試聽解時(shí)能根據(jù)畫面猜測新單詞或新信息。而在第一次進(jìn)行的實(shí)驗(yàn)中，由于選取的影片剪輯是一般的談話，音畫之間無太大的必然聯(lián)系，因此視頻組和音頻組的差異并不顯著。這同時(shí)也說明了當(dāng)視頻中的音畫有關(guān)或匹配度較高時(shí)，其對聽力理解的輔助作用會更加明顯。然而，研究表明無論是在第一次實(shí)驗(yàn)還是第二次實(shí)驗(yàn)，電影的多模態(tài)視頻形式對英文聽力理解的作用都不會比單模態(tài)純音頻差，因此本實(shí)驗(yàn)未發(fā)現(xiàn)顧曰國[5]所說的多模態(tài)帶來的“副作用”。但卻發(fā)現(xiàn)與音頻不相關(guān)的視頻畫面在聽解時(shí)起不到協(xié)同作用，這或許是一種資源浪費(fèi)。

（二） 視頻和音頻對高分組學(xué)生和低分組學(xué)生的影響

針對研究問題2：視頻和純音頻對高分組學(xué)生和低分組學(xué)生的影響是否不同？若有不同，不同之處和其出現(xiàn)的原因分別是什么？根據(jù)表3的數(shù)據(jù)，我們發(fā)現(xiàn)低分組的被試學(xué)生在兩次實(shí)驗(yàn)中都反映出視頻和音頻兩種輸入形式對聽力理解具有顯著性的差異；對于高分組的被試學(xué)生來說，第一次實(shí)驗(yàn)表明視頻和音頻的輸入形式對其聽力理解沒有顯著性差異，但在第二次實(shí)驗(yàn)中卻出現(xiàn)了顯著性差異且第一次實(shí)驗(yàn)視頻和音頻沒有顯著性差異的原因是第一次實(shí)驗(yàn)的高分組的測試成績未出現(xiàn)顯著性差異，由此可見，低分組對視頻畫面的依賴感要比高分組強(qiáng)。根據(jù)OMalley & Chamot[14]所說，優(yōu)秀的聽力學(xué)習(xí)者都善于集中其注意力。由此，高分組學(xué)生較低分組學(xué)生更善于集中注意力，加上高分組學(xué)生本身較強(qiáng)的聽力理解能力，此外，聽力理解還受多方面因素的影響，在聲音輸入后，聽者通過自身的個(gè)人文化背景，經(jīng)驗(yàn)等對輸入的信息進(jìn)行解碼理解[15]，高分組學(xué)生可能通過平時(shí)的學(xué)習(xí)積累豐富了各方面的認(rèn)識，為聽力理解提供了“養(yǎng)料”，于是對他們來說有無畫面信息借助和純音頻并無太大的差別。而對于低分組的學(xué)生來說，可能自身的聽力理解技能有所欠缺，因此畫面信息能夠彌補(bǔ)聽力上的不足，進(jìn)而達(dá)到Cross[16]提及的視頻信息能夠促進(jìn)對話語的理解程度。因此，對于低分組學(xué)生來說，兩次實(shí)驗(yàn)才會呈現(xiàn)出視頻和音頻的顯著性差異，且視頻信息有助于其聽力理解。

四、 結(jié) 語

本研究發(fā)現(xiàn)：一是以畫面、聲音和語言多模態(tài)播放為主的無字幕視頻形式對電影內(nèi)容的聽力理解具有輔助作用；二是無字幕視頻和純音頻兩種不同的輸入形式對英文電影的聽力理解作用具有顯著性差異；但與高分組的學(xué)生對比，低分組學(xué)生對于電影視頻畫面的依賴感更強(qiáng)。

本研究的理論意義在于：多模態(tài)理論對外語課堂教學(xué)應(yīng)用價(jià)值確實(shí)存在，可以優(yōu)化外語教學(xué)語境，改善語境效應(yīng)。但多模態(tài)也是把雙刃劍，因而要合理有效利用。我們認(rèn)為，關(guān)于電影中多模態(tài)，畫面和動作與語音的相關(guān)性尤其重要，畫面和動作屬于視覺處理，與聽覺處理具有正相關(guān)的作用。而不相關(guān)的畫面和動作則對聽力理解產(chǎn)生干擾效應(yīng)。再者，無關(guān)的畫面和動作輸入尚且有干擾效應(yīng)，字幕輸入要求的視覺加工處理難度更大，是否也會干擾和影響學(xué)生聽力發(fā)展（閱讀字幕是閱讀理解而非聽力理解）？這顯然需要多模態(tài)（字幕）輸入的長期效應(yīng)實(shí)證研究加以驗(yàn)證。然而，目前研究文獻(xiàn)中幾乎都是短期效應(yīng)研究。這一研究空缺須引起今后研究的關(guān)注。

本研究發(fā)現(xiàn)的應(yīng)用啟示有：在當(dāng)今多模態(tài)英文電影教學(xué)形式越來越流行和普及情形下，探討有效的多模態(tài)英文電影輸入形式是我們每個(gè)教師課堂教學(xué)中應(yīng)該關(guān)注的重點(diǎn)。本研究結(jié)果表明，當(dāng)視頻中的畫面與聲音關(guān)聯(lián)度較大時(shí)，視頻對聽力理解的輔助作用才得以更好地體現(xiàn)。這就要求教師制作視頻教材時(shí)必須加以考慮，才能客觀上保證視頻教學(xué)的有效性，最大限度地優(yōu)化外語課堂教學(xué)語境。此外，高分組學(xué)生在觀看英文電影時(shí)對畫面的依賴感其實(shí)并不明顯。因此，在商務(wù)英語專業(yè)課程設(shè)置中，應(yīng)該對一年級的學(xué)生先開設(shè)視聽說課，而不是先開聽力課（如Step by Step 或 Listen to This的教程）。在英文電影教與學(xué)中，對于低層次水平的學(xué)生應(yīng)該多用視頻方式教與學(xué)，給予畫面信息補(bǔ)充，而對于高層次水平學(xué)生來說，其對視頻畫面內(nèi)容補(bǔ)充的要求較低。教學(xué)應(yīng)用中的合理安排可有效利用有限的語音室設(shè)備。

本研究仍存在一些不足：實(shí)驗(yàn)考察的范圍不夠廣，影響實(shí)驗(yàn)結(jié)果的應(yīng)用廣度。本研究僅回答了純音頻和無字幕視頻雙模態(tài)形式對英文電影聽力理解的作用，并未在視頻中保留字幕并進(jìn)行實(shí)驗(yàn)，今后的實(shí)驗(yàn)可以繼續(xù)探究更多模態(tài)對英文電影聽力理解，尤其對聽力發(fā)展的長期效用。

〔參考文獻(xiàn)〕

[1]王初明. 從外語學(xué)習(xí)角度看大學(xué)英語教學(xué)和考試的改革[J]. 外語界， 2010， （1）：17-22.

[2]左煥琪. 外語教育展望[M]. 上海： 華東師范大學(xué)出版社， 2001.

[3]張德祿. 多模態(tài)話語分析綜合理論框架探索[J]. 中國外語， 2009， （1）： 24-30.

[4]Van Leeuwen， T. Speech， Music， Sound [M]. London： Macmillan， 1999.

[5]顧曰國. 多媒體、多模態(tài)學(xué)習(xí)剖析[J]. 外語電化教學(xué)， 2007， （2）： 3-12。

[6]張征. 多模態(tài)PPT演示教學(xué)與學(xué)生學(xué)習(xí)態(tài)度的相關(guān)性研究[J]. 外語電化教學(xué)， 2013， （3）： 59-64.

[7]Lonergan， J. Video in Language Teaching [M]. Cambridge： Cambridge University Press， 1984.endprint

[8]Ginther， A. Context and content visuals and performance on listening comprehension stimuli [J]. Language Testing， 2002 ， 19 （2） ：133-167.

[9]季月， 石玲. 關(guān)于外語多媒體教學(xué)信息呈現(xiàn)中視聽干擾問題的探討[J]. 外語電化教學(xué)， 2013， （2）： 41-46.

[10]胡永近， 張德祿. 英語專業(yè)聽力教學(xué)中多模態(tài)功能的實(shí)驗(yàn)研究[J]. 外語界， 2013， （5）： 20-25.

[11]查強(qiáng). 音頻和視頻對學(xué)生聽力理解影響的對比研究[D]. 成都： 電子科技大學(xué)， 2015.

[12]歐陽素珍. 多模態(tài)輸入對英語專業(yè)學(xué)生聽力理解影響的實(shí)證研究[D]. 湖南： 湖南師范大學(xué)， 2015.

[13]Romero， E. D. & Arévalo， C. M. Multimodality and listening comprehension： testing and implementing classroom material [J]. Language Value， 2010， （1）： 100-139.

[14]OMalley， J. M. & Chamot， A. U. Learning Strategies in Second Language Acquisition [M]. Cambridge： Cambridge University Press， 1990.

[15]馬黎華. 影響第二語言聽力理解的因素[J]. 西安外國語學(xué)院學(xué)報(bào)， 2002， （2）： 68-71.

[16]Cross， J. Comprehending news videotexts： the influence of the visual content [J]. Language Learning & Technology， 2011， 15 （2） ： 44-68.

（責(zé)任編輯：高生文）

Abstract： This study reports the results of an experiment and investigates the effects of different input forms of English movies （audio and video） on listening comprehension. In this study， audios and videos without subtitles of movies can be seen as different modes. Furthermore， the degrees of higher level students and lower level students dependencies on audio and video were analyzed. The results showed： 1） multimodality， i.e. videos without subtitles but with images and sound， promoted students listening comprehension； A significant difference was found between such different input forms of English movies as audios and videos without subtitles in their effects on listening comprehension， which is related to the degree of sound–images mapping. 2） Compared with the higher level students， lower level students had greater dependency on the images of videos. The article also discusses the implications in the application studies of multimodality theory.

Key words： English movies； audio； video； listening comprehension； multimodalityendprint