我國多模態(tài)外語教學(xué)研究綜述

李文琪 李珊

摘要：本文基于多模態(tài)外語教學(xué)研究內(nèi)涵和理論基礎(chǔ)，從歷年刊文量和研究內(nèi)容的視角，對2009年至2018年國內(nèi)中文核心期刊關(guān)于多模態(tài)外語教學(xué)研究載文進(jìn)行統(tǒng)計與分析。分析結(jié)果顯示： 多模態(tài)外語教學(xué)研究論文數(shù)量略呈下降趨勢; 研究內(nèi)容呈多維度特征;非實證研究較多，實證研究偏少;研究對象以高校外語教學(xué)為主?？傮w而言，國內(nèi)多模態(tài)外語教學(xué)研究還處于初級階段。

關(guān)鍵詞：多模態(tài);外語教學(xué);綜述

doi：10.16083/j.cnki.1671-1580.2020.04.026

中圖分類號：H319 文獻(xiàn)標(biāo)識碼：A 文章編號：1671—1580（2020）04—0110—04

一、引言

隨著信息技術(shù)的飛速發(fā)展和多元文化的相互滲透，多種形式的表達(dá)方式已經(jīng)滲透到我們?nèi)粘Ｉ畹姆椒矫婷?。例如，越來越多的書籍帶有精美的印刷插圖和CD，而這些插圖和音頻資源極大地豐富了讀者的閱讀信息。電視廣告和新聞充分利用了聽覺和視覺的結(jié)合，通過圖像、文字、聲音和其他符號資源向觀眾傳達(dá)信息。由此不難看出，人們對新事物的感知方式正在悄然發(fā)生變化。人們不僅依靠文字來表達(dá)含義，而且還結(jié)合視覺、聽覺、圖像、色彩、音樂和其他多模態(tài)感知和交流方法來表達(dá)含義。現(xiàn)代話語正變得越來越多模態(tài)化，傳統(tǒng)單一的讀寫能力已不能滿足讀者的需求。

同時，隨著數(shù)字、網(wǎng)絡(luò)和多媒體技術(shù)在教學(xué)領(lǐng)域的廣泛應(yīng)用，教學(xué)信息交流和意義表達(dá)方法也逐漸多樣化，聲音、圖像、色彩等副語言積極參與意義的建構(gòu)，使教學(xué)模式變得多模態(tài)化。幾乎每個學(xué)生都有很強(qiáng)的新媒體接受能力。如何培養(yǎng)學(xué)生的多元識讀能力，已經(jīng)成為新時代教師在多模態(tài)教學(xué)環(huán)境中的新教學(xué)任務(wù)。

10多年前，歐美學(xué)者開始在教學(xué)領(lǐng)域應(yīng)用多模態(tài)話語分析理論。而在中國，基于社會符號學(xué)和系統(tǒng)功能語法研究的不斷豐富和完善，學(xué)者們近年來才開始將重點放在教學(xué)領(lǐng)域的多模態(tài)研究上。因此，中國的多模態(tài)外語教學(xué)研究可以說是處于青年時期，教師們還需要繼續(xù)探索。本文對2009年至2018年在國內(nèi)核心期刊上發(fā)表的46篇文章進(jìn)行整理和歸納，希望能為國內(nèi)多模態(tài)外語教學(xué)研究提供一些必要的信息。

二、相關(guān)概念及理論基礎(chǔ)

（一）多模態(tài)相關(guān)概念定義

1.模態(tài)的產(chǎn)生

人類在進(jìn)化過程中，逐漸形成了5種穩(wěn)定的感官，并由此產(chǎn)生了5種感覺，分別是視覺、聽覺、嗅覺、味覺和觸覺。正是這5種不同的感覺為人類提供了感知這個世界的5種通道：視覺通道、聽覺通道、嗅覺通道、味覺通道和觸覺通道。5種感知渠道的獲得分別促使了以下5種交際模態(tài)的產(chǎn)生：視覺模態(tài)、聽覺模態(tài)、嗅覺模態(tài)、味覺模態(tài)和觸覺模態(tài)（朱永生，2007）。

2.三個概念的區(qū)別

模式是指人們交流的渠道，如口頭模式、書面模式、電子模式等。媒介又稱為媒體，指的是語言交流時所使用的技術(shù)，如文本、聲音、圖像等。模態(tài)則是交流渠道與技術(shù)的結(jié)合，包括了語言、技術(shù)、圖像、顏色、音樂等符號系統(tǒng)（朱永生，2007）。

3.單模態(tài)與多模態(tài)

單模態(tài)是指在交際過程中，只用了一種感官，比如看書時只使用眼睛來閱讀文字。多模態(tài)則分為兩種，一種是同時運(yùn)用多種感官來交際，比如人們在視頻聊天時需要用眼睛來看對方的圖像，用耳朵來聽對方的語言，用嘴巴來表達(dá)思想;而另一種則是只使用一種感官，但交際涉及了多種符號系統(tǒng)，比如同樣是看書，若書中既有文字又有圖畫，涉及了兩種符號系統(tǒng)，那么也可被稱為多模態(tài)運(yùn)用。

（二）理論基礎(chǔ)

1.多模態(tài)外語教學(xué)理論

多模態(tài)教學(xué)研究開始于20世紀(jì)90年代，并在21世紀(jì)初期得到迅速的發(fā)展，形成了自己的理論體系和研究方法。1994年，新倫敦小組提出了“多元識讀”的概念，這是研究多元識讀能力的先驅(qū)。這一理論表明，由于科學(xué)技術(shù)的飛速發(fā)展，現(xiàn)代人只具有文字閱讀能力是遠(yuǎn)遠(yuǎn)不夠的。相反，學(xué)生非常需要了解組成多元識讀能力的五個部分，分別是語言成分、視覺成分、聽覺成分、手勢成分和空間成分。詳細(xì)地說，語言成分包括詞匯、隱喻、結(jié)構(gòu)等，視覺成分包括顏色、角度、矢量、前景、背景等，聽覺成分包括音階、音樂、音效等，手勢成分包括行為、身體控制、情緒、運(yùn)動等，空間成分包括生態(tài)、幾何和建筑空間（Gentle，Knight和Corrigan，2006）。

2.多模態(tài)話語分析理論

多模態(tài)話語分析主要是探討多模態(tài)話語的結(jié)構(gòu)和功能，張德祿教授（2009）根據(jù)韓禮德的系統(tǒng)功能語言學(xué)理論和對大學(xué)英語課堂案例的研究成果，在《多模態(tài)話語分析的綜合理論框架探索》中，首先對多模態(tài)語話語分析研究進(jìn)行了簡明扼要的綜述，然后在系統(tǒng)功能語言學(xué)的基礎(chǔ)上建立了多模態(tài)話語分析的綜合理論框架。張德祿教授將多模態(tài)話語系統(tǒng)劃分為五個層次，分別是：（1）文化語境層，（2）情境語境層，（3）意義層，（4）形式層，（5）媒介（實質(zhì)）層。同時，他還研究了不同模式之間的關(guān)系，包括互補(bǔ)關(guān)系和非互補(bǔ)關(guān)系，以及非語言模態(tài)語法體系的建立和不同模態(tài)的語法結(jié)構(gòu)如何實現(xiàn)概念意義、人際意義和語篇意義（譚美玲，2019）。

三、國內(nèi)多模態(tài)外語教學(xué)研究統(tǒng)計與分析

（一）研究方法

本文采用文獻(xiàn)計量法和比較研究方法。在CNKI上，作者用“多模態(tài)”和“外語教學(xué)”作為關(guān)鍵詞，并在期刊類別中選擇中文核心期刊進(jìn)行搜索。在檢索完所有多模態(tài)外語教學(xué)研究文章之后，作者對所有文章進(jìn)行了總結(jié)和逐一篩選，共獲得46篇文章，構(gòu)成了本文的主要研究對象。最后，根據(jù)論文的研究內(nèi)容和發(fā)表時間，作者使用EXCEL表格對文章進(jìn)行分類和統(tǒng)計。

（二）統(tǒng)計結(jié)果與分析

本文根據(jù)研究內(nèi)容和發(fā)表時間對多模態(tài)外語教學(xué)研究文章進(jìn)行了分類。多模態(tài)外語教學(xué)的研究數(shù)量總體上呈下降趨勢，從2009年到2018年分3個階段。從2009年到2013年為第一階段，該領(lǐng)域的研究呈迅速上升趨勢，占文章總數(shù)的一半。從2014年到2016年為第二階段，開始呈下降趨勢，但下降幅度較小，其數(shù)量仍接近總數(shù)的一半。從2017年至2018年為第三階段，多模態(tài)教學(xué)研究的數(shù)量已顯著下降，只有4篇文章，甚至沒有達(dá)到總數(shù)的零頭。

（三）主要研究內(nèi)容

根據(jù)作者從CKNI中篩選出的46篇文章，多模態(tài)外語教學(xué)有六個研究熱點：多模態(tài)外語教學(xué)的綜合建設(shè)，語言能力培養(yǎng)，多元讀寫能力培養(yǎng)，多模式話語分析，多媒體輔助教學(xué)和多模態(tài)教材研究。

1.多模態(tài)教學(xué)綜合建設(shè)

從多模態(tài)外語教學(xué)綜合建設(shè)的角度出發(fā)，學(xué)者們進(jìn)行了許多研究。李慶杰（2011）對大學(xué)英語課堂教學(xué)的一個優(yōu)秀案例的描述展示了外語教學(xué)中不同模式的相互作用。楊劍英和杜平（2012）的研究表明，由于外語學(xué)習(xí)者的記憶系統(tǒng)和認(rèn)知結(jié)構(gòu)的影響，各種模式的不同組合會產(chǎn)生不同的認(rèn)知負(fù)荷并產(chǎn)生不同的學(xué)習(xí)效果。因此，在外語學(xué)習(xí)的意義建構(gòu)中，教學(xué)設(shè)計應(yīng)遵循一定的原則。郭萬群（2013）根據(jù)大學(xué)英語課堂教學(xué)的互動性原則、多模態(tài)原則和跨文化原則，提出了大學(xué)英語課堂教學(xué)設(shè)計原則模型，稱為MAP教學(xué)模型。張德祿和丁肇芬（2013）將教學(xué)過程與教學(xué)目標(biāo)聯(lián)系起來，并使教學(xué)過程能夠在多語言培訓(xùn)框架的基礎(chǔ)上進(jìn)行建模。陳爭峰、楊躍和曹志宏（2014）探索了如何利用教室、多媒體和互聯(lián)網(wǎng)的不同功能，在多模態(tài)和多媒體的環(huán)境下，優(yōu)化大學(xué)英語課堂中教師與學(xué)生、教師與教材、學(xué)生與教材的平衡。馬利芳（2016）認(rèn)為，在多模式話語的框架下，外語教學(xué)應(yīng)堅持“以學(xué)習(xí)為中心”的教學(xué)理念，注重學(xué)生綜合應(yīng)用能力的培養(yǎng)，有效地將信息技術(shù)與傳統(tǒng)教學(xué)方法相結(jié)合，最終促進(jìn)外語教學(xué)質(zhì)量的提高。張琳琳（2017）試圖將數(shù)字故事引入英語教學(xué)中，以引導(dǎo)學(xué)生完成英語創(chuàng)新實踐，總結(jié)和反思了不足之處，并提出改進(jìn)建議。

2.語言能力培養(yǎng)

這里的語言能力包括聽、說、讀、寫、譯。從歷史演變的角度，康志峰（2012）探討了新時代三維多模態(tài)口譯教學(xué)的可行性、實際應(yīng)用和最終效果，并提出了一種不同于傳統(tǒng)的“ 1 + 4”立體口譯教學(xué)方式。王蓮（2013）探討了多模態(tài)視聽教學(xué)模式對學(xué)習(xí)者學(xué)習(xí)態(tài)度、自主學(xué)習(xí)能力和學(xué)習(xí)效果的影響，并獲得了一種新的課堂教學(xué)策略。王娟和楊躍（2014）嘗試從語言學(xué)習(xí)的輸入源入手，引導(dǎo)學(xué)習(xí)者改變他們的學(xué)習(xí)習(xí)慣，并使用多模態(tài)突破日常教學(xué)各個方面的語言障礙。基于認(rèn)知語言學(xué)理論，梁曉暉（2015）設(shè)計了一種具體的教學(xué)模式，用于培養(yǎng)各層次寫作思維。黃偉（2016）認(rèn)為，多模態(tài)環(huán)境下的大學(xué)英語聽力教學(xué)活動可以提高學(xué)生的聽力理解能力和口語表達(dá)能力，并能促進(jìn)學(xué)生的全面發(fā)展。許幸和劉玉梅（2018）從多模態(tài)理論的角度構(gòu)建了一個五位一體的“時事訪談”預(yù)寫作項目。其研究表明，預(yù)寫作階段的多模態(tài)“時事訪談”實驗項目可以激發(fā)學(xué)生的預(yù)寫作動機(jī)，提高整體寫作水平。

3.多元讀寫能力培養(yǎng)

多元識讀能力培養(yǎng)作為多模態(tài)教學(xué)的長遠(yuǎn)目標(biāo)也引起了許多教師的關(guān)注。葛俊麗和羅曉燕（2010）對多元識讀教學(xué)方法進(jìn)行了評價，并指出了其對我國外語教學(xué)的啟示。張德祿（2012）在已有研究的基礎(chǔ)上，發(fā)展了多元識讀學(xué)與教的模式，探索了多元識讀培養(yǎng)的學(xué)習(xí)模式和學(xué)習(xí)內(nèi)容，最終建立了多元識讀培養(yǎng)的教學(xué)框架。張征（2013）探討了多模態(tài)課堂教學(xué)設(shè)計中的情境、意義、模態(tài)、媒體和其他元素的方法和原理，并提出了培養(yǎng)多元識讀能力的途徑和方法。張德祿和劉睿（2014）提出了英語課堂多元識讀能力培養(yǎng)的框架，認(rèn)為口頭報告在英語課堂教學(xué)中的案例研究，對于探索日常課堂教學(xué)活動中培養(yǎng)學(xué)生的多元識讀能力具有重要意義。梁惠梅（2016）認(rèn)為，教師可以采用雙管齊下的課堂教學(xué)和課外活動訓(xùn)練模式，并將課內(nèi)活動與課外活動有機(jī)地結(jié)合起來，有效地提高學(xué)生的多元識讀能力。宋英（2018）認(rèn)為，構(gòu)建“教學(xué)評估”三位一體的外語多模態(tài)能力訓(xùn)練模式可以有效地提高大學(xué)生的外語多元識讀能力，可以幫助大學(xué)生克服經(jīng)濟(jì)全球化、文化多元化和交流多模態(tài)化帶來的挑戰(zhàn)。

4.多模態(tài)話語分析

張德祿（2009）進(jìn)一步探討了系統(tǒng)功能語言學(xué)理論，為多模態(tài)話語分析和研究提供了理論框架，并為現(xiàn)代媒體技術(shù)條件下的外語教學(xué)實踐提供選擇有效教學(xué)過程和實踐的指導(dǎo)。張德祿和王璐（2010）發(fā)現(xiàn)，教學(xué)中主要涉及的是口語模態(tài)，而其他模態(tài)僅起到補(bǔ)充、加強(qiáng)和優(yōu)化的作用。根據(jù)研究結(jié)果，他們總結(jié)了教師在教學(xué)中需要注意和改進(jìn)的六個方面。劉秀麗、張德祿和張宜波（2013）根據(jù)教師的人格魅力和哲學(xué)理論，建立了一個理論模型，認(rèn)為運(yùn)用適當(dāng)?shù)亩嗄B(tài)話語能激發(fā)學(xué)生的外語課堂教學(xué)學(xué)習(xí)熱情。鄭秀梅（2014）研究了多模態(tài)話語分析視角下高校外語課堂教學(xué)改革，為高校外語人才的培養(yǎng)提供理論參考。

5.多媒體教學(xué)研究

由于多媒體與多模態(tài)教學(xué)密切相關(guān)，并且對多模態(tài)教學(xué)有著很大幫助，這也成了多模態(tài)外語教學(xué)研究一個主要內(nèi)容。張征（2010）研究了多模態(tài)PPT演示教學(xué)環(huán)境中大一非英語專業(yè)學(xué)生的學(xué)業(yè)表現(xiàn)變化情況。研究表明，多模態(tài)PPT演示教學(xué)可以提高學(xué)生的學(xué)習(xí)成績，有助于提高學(xué)生的短期記憶效率，但與長期學(xué)習(xí)成績的相關(guān)性不顯著。張征（2013）探討了多模態(tài)PPT演示教學(xué)在改變學(xué)生的學(xué)習(xí)態(tài)度和學(xué)生對該教學(xué)模式的態(tài)度方面的影響。其研究表明，多模態(tài)PPT演示教學(xué)可以讓學(xué)生的學(xué)習(xí)態(tài)度變得積極，并且大多數(shù)學(xué)生都接受這種教學(xué)模式。張振虹、何美和韓智（2014）介紹了使用Elan軟件構(gòu)建大學(xué)公共英語多模態(tài)語料庫的方法和過程，并探討了這種小型的自建多模式語料庫在大學(xué)公共英語教學(xué)中的應(yīng)用。

6.多模態(tài)教材研究

教材是一種非常重要的教學(xué)資源，因此，學(xué)者們也做過教材方面的一些研究。 張德祿和張淑杰（2010）討論了編寫具有多模態(tài)特征的外語教科書的原則。劉明和胡加圣（2011）運(yùn)用多模態(tài)外語教學(xué)理論和相關(guān)認(rèn)知理論，探討了多模態(tài)發(fā)展趨勢以及大學(xué)外語視聽教材的設(shè)計原理和技術(shù)特點，并在對現(xiàn)行聽力教材進(jìn)行抽樣分析的基礎(chǔ)上，總結(jié)了多模態(tài)外語視聽教材中內(nèi)容選擇的要求，最后提出了編寫多模態(tài)大學(xué)外語視聽教材的新思路和新建議。李鳳和李娜（2012）首先闡明了多模態(tài)外語教材的定義。其次，他們分析了多模態(tài)外語教材的特點：協(xié)同性、多維性、網(wǎng)絡(luò)化和智能化;最后，他們討論了在教育學(xué)、生物學(xué)、心理學(xué)和語言學(xué)領(lǐng)域編寫多模態(tài)外語教科書的基本原理。

7.其他

除上述研究熱點外，還有其他一些有關(guān)多模態(tài)教學(xué)的研究，涉及多方面的內(nèi)容。張德祿（2010）探討了外語課堂教學(xué)中可能存在的教學(xué)階段以及每個階段的可選教學(xué)步驟和方法，最后討論了教學(xué)設(shè)計中模態(tài)系統(tǒng)的選擇原則。張維、劉曉斌和周榕（2012）研究了高中生對多模態(tài)英語語法教學(xué)的適應(yīng)性。研究結(jié)果表明，多模態(tài)英語語法教學(xué)具有傳統(tǒng)語法教學(xué)所沒有的優(yōu)勢。李廣鳳（2014）認(rèn)為，在多模態(tài)外語課堂教學(xué)中，教師主要通過三種方式發(fā)揮作用來提高教學(xué)效果。華裕濤和馮宇玲（2015）簡要分析了外語教學(xué)中模態(tài)的選擇和文化輸入的方法。同時，他們還討論了多模態(tài)在外語教學(xué)文化輸入中的作用，通過合理選擇和運(yùn)用多種模態(tài)，能提高學(xué)生的跨文化交際能力。夏穎（2016）以某大學(xué)的英語課程為例，在“開放與妥協(xié)”原則的指導(dǎo)下，設(shè)計了一套獨特的大學(xué)英語自主學(xué)習(xí)模式，并通過分級改革班一年的教學(xué)實踐，初步驗證了該模型的有效性。

四、國內(nèi)多模態(tài)外語教學(xué)研究特點

（一）從研究方法角度看

在筆者分析的46篇文章中，僅有一小部分進(jìn)行了課堂實證研究，并從實際教學(xué)效果中探索了多模態(tài)教學(xué)的經(jīng)驗。因此，他們的研究基本實現(xiàn)了理論與實踐的結(jié)合，具有非常重要的實際應(yīng)用價值和實踐指導(dǎo)意義。此外，大多數(shù)研究仍是非實證性研究，主要從宏觀角度探討多模態(tài)教學(xué)模式的構(gòu)建，雖然具有重要的理論指導(dǎo)意義，但在研究方法方面，多模態(tài)外語教學(xué)研究處于一邊倒的局面，缺乏大量的實證研究檢驗理論層面的建議。

（二）從研究對象角度看

國內(nèi)學(xué)者研究幾乎都集中在大學(xué)英語課堂教學(xué)上。因此，研究對象的范圍太過局限了。實際上，初中課堂和高中課堂，甚至是小學(xué)課堂，都需要更多的多模態(tài)外語教學(xué)來豐富教學(xué)內(nèi)容和提升教學(xué)效果，讓學(xué)生真正地學(xué)習(xí)一種語言，而不僅僅是學(xué)習(xí)一些語言知識。

（三）從研究結(jié)果實際運(yùn)用角度看

盡管多模態(tài)外語教學(xué)研究已經(jīng)進(jìn)行了近十年，并取得了一些成果，但一線教師在實際教學(xué)中并不經(jīng)常使用這些成果，許多教室仍采用傳統(tǒng)的教學(xué)模式。因此，令人感到遺憾的是學(xué)生們無法分享到最新的科研成果。

五、結(jié)語

近年來，中國網(wǎng)絡(luò)信息技術(shù)和媒體技術(shù)的發(fā)展加速了多模態(tài)話語及多模態(tài)外語教學(xué)的研究。本文通過統(tǒng)計，梳理和分析2018年至2019年的46篇多模態(tài)外語教學(xué)文章，總結(jié)了國內(nèi)研究的特點。統(tǒng)計結(jié)果表明，多模態(tài)外語教學(xué)研究論文數(shù)量呈小幅下降趨勢;研究內(nèi)容呈多維性;非實證研究較多，實證研究較少;研究對象主要是大學(xué)英語課堂。本研究的局限在于對統(tǒng)計文獻(xiàn)的分析可能有遺漏或不完整，希望之后的研究可以對此進(jìn)行彌補(bǔ)。筆者希望此次的文獻(xiàn)綜述能夠為學(xué)者們研究國內(nèi)多模態(tài)外語教學(xué)提供一些幫助。

[參考文獻(xiàn)]

[1]Gentle， F. M. Knight， M. & Corrigan. Mutiliteracies and Information &Communications Technologies： Ensuing Information Access in the Classroomfor Students with Vision Impairment [EB/OL]. http：//www.ridbe.Org.au.2006.

[2]陳爭峰，楊躍，曹志宏.多模態(tài)、多媒體環(huán)境下高校英語課堂動態(tài)平衡模式探究[J].西安電子科技大學(xué)學(xué)報（社會科學(xué)版），2014（04）.

[3]葛俊麗，羅曉燕.新媒介時代外語教學(xué)新視角：多元識讀教學(xué)法[J].外語界，2010（05）.

[4]郭萬群.論間性理論視閾下的大學(xué)英語多模態(tài)教學(xué)與研究——兼論外語教育技術(shù)的哲學(xué)基礎(chǔ)[J].外語電化教學(xué)，2013（01）.

A Review of Studies on Multimodal Foreign Language Teaching in China

—— An Overview of the Publications with CNKI Journals in Latest Decade

LI Wenqi，LI Shan

（Chengdu University of Technology，Chengdu Sichuan 610051，China）

Abstract：Based on the studies of definition and theoretical basis of multimodal foreign language teaching， this paper conducts statistics and analysis on the research papers on multimodal foreign language teaching in Chinas core journals from 2009 to 2018 from the perspective of the amount of literature and research contents. The results show that the number of research papers on multimodal foreign language teaching has a slight downward trend; the research content is multi-dimensional; there are more non-empirical studies and less empirical research; the research subjects are mainly foreign language teaching in colleges and universities. In general， domestic multimodal foreign language teaching research is still in its infancy.

Key words：multimodality; foreign language teaching; review

[責(zé)任編輯：張麗麗]