公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料庫(kù)的創(chuàng)建及其應(yīng)用

李曉琳

(蘭州工業(yè)學(xué)院 外國(guó)語(yǔ)學(xué)院，甘肅 蘭州 730050)

1 研究背景

隨著信息技術(shù)的發(fā)展，公共英語(yǔ)課堂成為典型的多模態(tài)教學(xué)場(chǎng)所。外語(yǔ)教師作為課堂意義構(gòu)建的中介者，其多模態(tài)教學(xué)能力水平直接影響著教學(xué)信息的有效傳播及多模態(tài)教學(xué)的成效。教師多模態(tài)教學(xué)能力的現(xiàn)狀及其提升路徑的探討是多模態(tài)外語(yǔ)教學(xué)及外語(yǔ)教師發(fā)展研究中的重要內(nèi)容。教師的多模態(tài)教學(xué)能力，亦可稱為基于課堂的多模態(tài)交際能力，即教師在教學(xué)課堂中識(shí)讀、選擇和整合多模態(tài)資源的意識(shí)與能力[1]。

目前有關(guān)英語(yǔ)教師多模態(tài)教學(xué)能力的研究主要以多模態(tài)話語(yǔ)分析理論為基礎(chǔ)，通過對(duì)教師課堂話語(yǔ)開展個(gè)案研究，或?qū)δ硡^(qū)域教師的多模態(tài)應(yīng)用能力開展調(diào)查研究，以探討其多模態(tài)外語(yǔ)教學(xué)能力。本文通過對(duì)1998～2019年間英語(yǔ)課堂中多模態(tài)教學(xué)能力相關(guān)研究的梳理，提出創(chuàng)建語(yǔ)料豐富、蘊(yùn)含多層次標(biāo)注信息的公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料庫(kù)，以期為公共英語(yǔ)教師多模態(tài)教學(xué)能力的精確診斷和能力發(fā)展提供多模態(tài)的研究語(yǔ)料、工具與視角。

2文獻(xiàn)綜述

筆者依據(jù)研究視角及方法的不同,將1998～2019年間相關(guān)研究分為以下三個(gè)類別，即單模態(tài)教師話語(yǔ)分析、多模態(tài)相關(guān)理論在英語(yǔ)教師教學(xué)中的指導(dǎo)意義研究以及英語(yǔ)教師多模態(tài)應(yīng)用能力的調(diào)查研究。

2.1單模態(tài)教師話語(yǔ)分析

早期與教師話語(yǔ)相關(guān)的研究以口語(yǔ)模態(tài)為主，通過隨堂觀察、錄音、記錄與分析、問卷調(diào)查及訪談等定性與定量相結(jié)合的研究方式，探討單模態(tài)教師話語(yǔ)的質(zhì)與量和學(xué)生語(yǔ)言習(xí)得之間的關(guān)系，以期實(shí)現(xiàn)教師話語(yǔ)的最優(yōu)化[2-3]。周星、周韻通過課堂錄音的方法, 對(duì)不同教學(xué)模式中的教師話語(yǔ)特征進(jìn)行了對(duì)比分析。研究結(jié)果表明在以學(xué)生為中心的教學(xué)模式中，教師話語(yǔ)能給學(xué)生提供更多目標(biāo)語(yǔ)言使用的機(jī)會(huì),有利于其外語(yǔ)語(yǔ)言的習(xí)得[3]。

2.2多模態(tài)相關(guān)理論在英語(yǔ)教師教學(xué)中的指導(dǎo)意義

同其他情境的交際話語(yǔ)一樣，教師的有效課堂話語(yǔ)并非只包含口語(yǔ)這一單一模態(tài)，而是呈現(xiàn)多模態(tài)化的特征。其他非語(yǔ)言因素，如身體語(yǔ)言特征、教學(xué)環(huán)境(教學(xué)設(shè)備、實(shí)驗(yàn)室、計(jì)算機(jī)、網(wǎng)絡(luò)等因素)等亦和口語(yǔ)模態(tài)一樣，在教學(xué)信息意義的構(gòu)建和傳播中起著重要的作用，這種以多種交際方式產(chǎn)生的課堂話語(yǔ)被稱為教師的多模態(tài)話語(yǔ)。張德祿、王璐采用教學(xué)案例分析法探討了大學(xué)英語(yǔ)課堂中教師話語(yǔ)不同模態(tài)之間的協(xié)作方式，指出口語(yǔ)與其他模態(tài)之間互相補(bǔ)充、強(qiáng)化、優(yōu)化，共同完成教學(xué)目標(biāo)，并提出優(yōu)化教師話語(yǔ)中模態(tài)協(xié)作的建議[4]。張德祿、李玉香以某節(jié)英語(yǔ)教學(xué)示范課中的多模態(tài)教師話語(yǔ)為研究語(yǔ)料，探討不同模態(tài)間的協(xié)作方式及其在不同語(yǔ)言層面的體現(xiàn)，對(duì)多模態(tài)課堂話語(yǔ)的模態(tài)配合與選擇進(jìn)行了進(jìn)一步的探討[5]。該類研究的共同之處在于研究者均嘗試在多模態(tài)理論視域下探討多模態(tài)及其相關(guān)理論對(duì)英語(yǔ)教師課堂教學(xué)的指導(dǎo)意義，以期優(yōu)化英語(yǔ)教師話語(yǔ)中不同模態(tài)的協(xié)作與配合，實(shí)現(xiàn)教學(xué)目標(biāo)。

2.3公共/大學(xué)英語(yǔ)教師多模態(tài)教學(xué)/應(yīng)用能力的研究

(1) 英語(yǔ)教師多模態(tài)識(shí)讀能力的研究：教師對(duì)教學(xué)環(huán)境中多模態(tài)資源的識(shí)讀及應(yīng)用能力會(huì)影響課堂信息有效傳播。多數(shù)個(gè)案研究結(jié)果均指出優(yōu)秀教師善于運(yùn)用體勢(shì)模態(tài)、PPT組合模態(tài)及情境模態(tài)等，與語(yǔ)言模態(tài)共同實(shí)現(xiàn)課堂教學(xué)與互動(dòng)功能。李廣鳳探討了多模態(tài)外語(yǔ)教學(xué)中教師的中介作用，提出教師在多模態(tài)外語(yǔ)課堂中通過多模態(tài)PPT課件以及網(wǎng)絡(luò)學(xué)習(xí)平臺(tái)的使用優(yōu)化課堂輸入，促進(jìn)師生互動(dòng), 有效發(fā)揮了其中介作用[6]；郭寧則通過問卷調(diào)查及訪談關(guān)注高校英語(yǔ)教師的多模態(tài)認(rèn)知及識(shí)讀能力，其調(diào)查結(jié)果均為外語(yǔ)教師多模態(tài)教學(xué)能力的發(fā)展提供了有益的建議[7]。

(2)基于ELAN的優(yōu)秀英語(yǔ)教師多模態(tài)教學(xué)能力的研究：該類研究以個(gè)案研究為主，借助多模態(tài)分析軟件對(duì)優(yōu)秀教師多模態(tài)課堂話語(yǔ)進(jìn)行量化分析，以探討教師在授課過程中如何利用語(yǔ)言、動(dòng)作、聲音、圖像等多種社會(huì)符號(hào)模態(tài)的配合與協(xié)同實(shí)現(xiàn)教學(xué)目的。胥國(guó)紅對(duì)某大學(xué)英語(yǔ)教師的課堂錄像進(jìn)行了觀察與分析，重點(diǎn)探討了教師話語(yǔ)中非言語(yǔ)行為與言語(yǔ)行為的關(guān)系[8]。李冬艷等則在其個(gè)案研究中聚焦于某優(yōu)秀大學(xué)英語(yǔ)教師的課堂語(yǔ)言模態(tài)與動(dòng)作、聲音、圖像等模態(tài)在課堂教學(xué)中如何協(xié)同構(gòu)建意義，實(shí)現(xiàn)教學(xué)效果[9]。從歷年相關(guān)文獻(xiàn)來看，研究中所涉及的教師話語(yǔ)模態(tài)既包括口語(yǔ)模態(tài)，亦包括非言語(yǔ)模態(tài)、圖形模態(tài)、PPT模態(tài)以及情境模態(tài)等，種類愈加全面與復(fù)雜，間接反映了受試在英語(yǔ)課堂中的多模態(tài)教學(xué)能力。

(3)某區(qū)域英語(yǔ)教師多模態(tài)應(yīng)用能力的調(diào)查研究：研究者通過向班級(jí)內(nèi)學(xué)生發(fā)放問卷，間接了解該班英語(yǔ)任課教師的多模態(tài)教學(xué)的態(tài)度及應(yīng)用情況[10]。另有研究者結(jié)合問卷調(diào)查及深度訪談的研究方法，從多模態(tài)識(shí)讀能力的認(rèn)識(shí)、態(tài)度及應(yīng)用能力三個(gè)維度對(duì)某區(qū)域大學(xué)英語(yǔ)教師的多模態(tài)運(yùn)用能力進(jìn)行了調(diào)查分析[11]，研究結(jié)果表明大部分教師對(duì)多模態(tài)理解的準(zhǔn)確度存在偏差；在多模態(tài)使用上存在模態(tài)濫用、匱乏以及模態(tài)間協(xié)作失衡等問題，并提出了合理的改進(jìn)意見。

2.4創(chuàng)建公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料庫(kù)的必要性

綜上所述，以上關(guān)于公共/大學(xué)英語(yǔ)教師多模態(tài)教學(xué)能力的研究仍值得進(jìn)一步探討?；诮處煻嗄B(tài)話語(yǔ)分析或問卷調(diào)查的研究能夠反映受試在英語(yǔ)教學(xué)中配合與應(yīng)用多模態(tài)資源的能力，體現(xiàn)其多模態(tài)教學(xué)能力，對(duì)公共/大學(xué)英語(yǔ)教學(xué)及教師發(fā)展有一定的啟發(fā)及示范作用。但由于所選取樣本的特殊性，以及分析語(yǔ)料的局限性，該類研究結(jié)果無法對(duì)公共英語(yǔ)教師這一群體的多模態(tài)應(yīng)用/教學(xué)能力進(jìn)行準(zhǔn)確診斷與定位。

為了確保研究語(yǔ)料的代表性與豐富性，筆者提出可以以不同教齡公共英語(yǔ)教師的多模態(tài)課堂話語(yǔ)為原始語(yǔ)料，后期采用ELAN多模態(tài)語(yǔ)料分析軟件實(shí)現(xiàn)原始語(yǔ)料的轉(zhuǎn)寫與分層標(biāo)注，生成用于教師課堂話語(yǔ)分析的多模態(tài)標(biāo)注語(yǔ)料庫(kù)。該語(yǔ)料庫(kù)的創(chuàng)建可以為教師多模態(tài)教學(xué)能力的相關(guān)研究提供新的語(yǔ)料與視角；亦可為教師課堂話語(yǔ)的模態(tài)應(yīng)用提供多模態(tài)范例，實(shí)現(xiàn)教師多模態(tài)教學(xué)能力的提升與發(fā)展。

3 公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料庫(kù)的創(chuàng)建

參考單模態(tài)語(yǔ)料庫(kù)及外語(yǔ)課堂教學(xué)多模態(tài)語(yǔ)料庫(kù) MCCT 的建庫(kù)過程[12]，筆者在建庫(kù)之前確定了建庫(kù)目的、規(guī)模、語(yǔ)料的來源及語(yǔ)料加工所需的軟硬件設(shè)備及人員資金配備等。公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料庫(kù)為“公共英語(yǔ)教師多模態(tài)教學(xué)能力培養(yǎng)與發(fā)展”專門用途多模態(tài)語(yǔ)料庫(kù)，語(yǔ)料的采集方式及標(biāo)注方案均依據(jù)這一目的而制定。筆者選用多模態(tài)分析軟件ELAN為建庫(kù)工具。ELAN對(duì)音視頻格式的兼容性較強(qiáng)；具有轉(zhuǎn)寫、標(biāo)注及分割等模式，便于對(duì)視頻資源進(jìn)行多層轉(zhuǎn)寫與標(biāo)注；檢索功能強(qiáng)大，便于對(duì)標(biāo)注信息進(jìn)行提取、檢索、統(tǒng)計(jì)與分析。建庫(kù)流程包括原始語(yǔ)料的采集與處理、多層次標(biāo)注方案的制定、語(yǔ)料的轉(zhuǎn)寫、語(yǔ)料的切分及多層次標(biāo)注、語(yǔ)料庫(kù)的建立等環(huán)節(jié)。

3.1原始語(yǔ)料的采集

筆者以某本科院校公共英語(yǔ)教師為實(shí)驗(yàn)教師，根據(jù)教齡將其分為三組，即新手型教師(0～4年)，熟手型教師(5～15年)以及專家型教師(15年以上)。原始語(yǔ)料源于實(shí)驗(yàn)教師的教學(xué)音視頻及教學(xué)PPT，涉及課程為大學(xué)英語(yǔ)。筆者對(duì)各實(shí)驗(yàn)教師的課堂教學(xué)進(jìn)行錄音錄像，錄制過中保證了音視頻的清晰度與分辨度。目前已隨機(jī)選取了9位包括筆者在內(nèi)的不同教齡的實(shí)驗(yàn)教師，順利完成了《大學(xué)英語(yǔ) I》公共必修課程的教學(xué)錄像，歷時(shí)5個(gè)月，16周，每周4學(xué)時(shí)，每學(xué)時(shí)為50分鐘。本學(xué)年將會(huì)繼續(xù)選取實(shí)驗(yàn)教師進(jìn)行錄制，以增強(qiáng)語(yǔ)料的歷時(shí)性。筆者將教學(xué)錄像按時(shí)間順序進(jìn)行了編號(hào)，以便后期語(yǔ)料的深度加工。采錄的原始語(yǔ)料由音視頻語(yǔ)料、圖片及文字語(yǔ)料等多種信息集合而成，蘊(yùn)含口語(yǔ)模態(tài)、體勢(shì)模態(tài)、PPT 組合模態(tài)以及情景模態(tài)等，包括以下內(nèi)容：(1) 教師課堂教學(xué)言語(yǔ)及行為;(2) 學(xué)生課堂學(xué)習(xí)言語(yǔ)及行為；(3)教師教學(xué)多模態(tài)PPT及其演示(見表1)。

表1 公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料種類及蘊(yùn)含信息

3.2原始語(yǔ)料的處理

(1)語(yǔ)料的預(yù)處理：筆者將同步錄制的課堂音視頻存為清晰標(biāo)準(zhǔn)的“MPEG”格式；然后將課堂音視頻流中的教師課堂話語(yǔ)音頻流使用軟件(Ulead Video Studio)進(jìn)行提取，以“WAV”格式保存。

(2)元數(shù)據(jù)的導(dǎo)入：筆者使用ELAN(元數(shù)據(jù)添加工具Arbil)完成語(yǔ)料元數(shù)據(jù)的輸入、編輯和管理。元數(shù)據(jù)主要指與原始語(yǔ)料相關(guān)的信息，包括實(shí)驗(yàn)教師的年齡、性別、職稱、音頻及視頻的錄制時(shí)間和地點(diǎn)、課程名等。

3.3多層次標(biāo)注方案的制定

本文所建多模態(tài)語(yǔ)料庫(kù)旨在實(shí)現(xiàn)公共英語(yǔ)教師多模態(tài)教學(xué)能力的精確診斷與發(fā)展。筆者以MCCT多模態(tài)語(yǔ)料庫(kù)語(yǔ)料的標(biāo)注方案為參考[12]，聚焦教師課堂話語(yǔ)的不同模態(tài)。該標(biāo)注方案包括以下四層：教學(xué)目標(biāo)/指導(dǎo)、教學(xué)情境(媒介)、教師課堂言語(yǔ)(文字模態(tài))、教師課堂行為(非言語(yǔ)模態(tài)，如語(yǔ)音語(yǔ)調(diào)、表情、肢體語(yǔ)言)以及課堂教學(xué)效果；各層的標(biāo)注又包含了不同的維度(見表2)。其中一、二層級(jí)屬于基本信息標(biāo)注，適用于所有采集語(yǔ)料；三、四級(jí)標(biāo)注(教師課堂言語(yǔ)以及教學(xué)行為)為核心標(biāo)注，主要用于語(yǔ)料的深度加工，其標(biāo)注可以清晰描述實(shí)驗(yàn)教師課堂話語(yǔ)中的不同模態(tài)在教學(xué)信息意義構(gòu)建中的內(nèi)涵及作用，具體體現(xiàn)實(shí)驗(yàn)教師的多模態(tài)教學(xué)能力，即教師在公共英語(yǔ)課堂中對(duì)各類多模態(tài)資源的認(rèn)識(shí)能力，對(duì)多模態(tài)資源的識(shí)讀及合理應(yīng)用能力，對(duì)多模態(tài)資源整體傳輸效果的反思能力等。

表2 公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料的多層次標(biāo)注方案

3.4 語(yǔ)料的深加工處理

(1)語(yǔ)料的轉(zhuǎn)寫：對(duì)多模態(tài)語(yǔ)料深加工的第一步是將音視頻中的言語(yǔ)信息同步轉(zhuǎn)寫為各級(jí)文字標(biāo)注層。轉(zhuǎn)寫以忠實(shí)于原始語(yǔ)料為原則，對(duì)原始語(yǔ)料中的語(yǔ)言錯(cuò)誤均不做任何修改。文字轉(zhuǎn)寫中除包含教師口語(yǔ)講授內(nèi)容的文字信息，亦包含對(duì)其聲音特質(zhì)，如語(yǔ)音、語(yǔ)調(diào)等的描述。筆者擬使用ELAN的轉(zhuǎn)寫模式完成語(yǔ)料的轉(zhuǎn)寫；轉(zhuǎn)寫人員也可將所聽語(yǔ)音內(nèi)容手動(dòng)轉(zhuǎn)寫為文字信息，并輸出保存為“TXT”格式文件。

(2)語(yǔ)料的切分與標(biāo)注：在完成語(yǔ)料的文字轉(zhuǎn)寫后，在各音視頻文件中導(dǎo)入標(biāo)注文件(EAF)，用于后期語(yǔ)料的切分與標(biāo)注。筆者以音視頻文件中教師/學(xué)生話語(yǔ)停頓、話語(yǔ)功能所形成的分割片段為單位，依據(jù)公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料的多層次標(biāo)注方案，在ELAN分割模式下對(duì)實(shí)驗(yàn)教師的多模態(tài)課堂話語(yǔ)進(jìn)行切分和多層次標(biāo)注。

3.5語(yǔ)料庫(kù)的建立

筆者將語(yǔ)料按照一、二級(jí)標(biāo)注內(nèi)容進(jìn)行分類整理，即依據(jù)不同教學(xué)目標(biāo)分類儲(chǔ)存；各類文件夾內(nèi)包含若干子文件夾，分別按照課程名稱、教師姓名、錄制時(shí)間和地點(diǎn)等信息命名；各子文件夾內(nèi)包含各節(jié)課同步采錄的音視頻(MPEG & WAV)、同步轉(zhuǎn)寫字幕(TXT)及其標(biāo)注文件(EAF)，具體如下：(1)教師課堂教學(xué)實(shí)錄音視頻及其同步字幕文件；(2)學(xué)生課堂學(xué)習(xí)實(shí)錄音視頻及其同步字幕文件；(3)多模態(tài)PPT課堂演示音視頻及其同步字幕文件；(4)標(biāo)注文件(EAF)。

該語(yǔ)料庫(kù)建成后構(gòu)成如下：(1)采集的原始語(yǔ)料：這部分語(yǔ)料主要指課堂同步錄制的音視頻，真實(shí)記錄了公共英語(yǔ)教師的多模態(tài)課堂話語(yǔ)、學(xué)生課堂學(xué)習(xí)行為與言語(yǔ)以及師生互動(dòng)情況；(2)經(jīng)ELAN切分與標(biāo)注的深加工語(yǔ)料：筆者根據(jù)其研究目的選取部分語(yǔ)料進(jìn)行了深加工，標(biāo)注生成的EAF文件支持層、表格、文本及字幕等多種顯示方法，便于后期檢索與分析。

4 公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料庫(kù)的應(yīng)用

公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料庫(kù)的創(chuàng)建旨在診斷、提升與發(fā)展公共英語(yǔ)教師多模態(tài)教學(xué)能力。該語(yǔ)料庫(kù)選取的樣本具有代表性；教師課堂話語(yǔ)的多模態(tài)語(yǔ)料經(jīng)多層次標(biāo)注后蘊(yùn)含豐富信息，便于提取、統(tǒng)計(jì)與分析，能夠用于公共英語(yǔ)教師多模態(tài)教學(xué)能力的調(diào)查與分析，以期對(duì)公共英語(yǔ)多模態(tài)教學(xué)以及教師教學(xué)能力發(fā)展提供反饋與指導(dǎo)。

研究者可將庫(kù)中的深加工語(yǔ)料作為分析語(yǔ)料，采用語(yǔ)料庫(kù)研究法，診斷調(diào)查公共英語(yǔ)教師的多模態(tài)教學(xué)能力，找到其在多模態(tài)意識(shí)、課堂環(huán)境中多模態(tài)識(shí)讀、應(yīng)用及多模態(tài)教學(xué)效果方面的癥結(jié)所在?？晒┭芯康膯栴}如下：公共英語(yǔ)教師課堂話語(yǔ)中使用了哪幾種話語(yǔ)模態(tài)? 各模態(tài)資源在不同教學(xué)環(huán)節(jié)如何分布? 各模態(tài)資源間是如何相互協(xié)同和配合，以實(shí)現(xiàn)外語(yǔ)課堂信息的有效傳遞? 從學(xué)生的課堂話語(yǔ)和行為來看，課堂多模態(tài)資源的整合傳輸效果如何？研究者亦可在以上量化分析的基礎(chǔ)上，從多模態(tài)意識(shí)培養(yǎng)、課堂環(huán)境中多模態(tài)識(shí)讀和應(yīng)用能力培養(yǎng)及多模態(tài)教學(xué)效果反思能力培養(yǎng)等維度進(jìn)一步探索公共英語(yǔ)教師多模態(tài)教學(xué)能力的可持續(xù)發(fā)展路徑。

5 結(jié)語(yǔ)

本文所創(chuàng)建的公共英語(yǔ)教師課堂話語(yǔ)多模態(tài)語(yǔ)料庫(kù)是用于診斷、提升與發(fā)展公共英語(yǔ)教師多模態(tài)教學(xué)能力的專門用途語(yǔ)料庫(kù)。該語(yǔ)料庫(kù)的創(chuàng)建可為教師多模態(tài)課堂話語(yǔ)及多模態(tài)教學(xué)能力的相關(guān)研究提供豐富的分析語(yǔ)料、方法與視角。庫(kù)內(nèi)蘊(yùn)含豐富信息的標(biāo)注語(yǔ)料可用于分析與診斷各話語(yǔ)模態(tài)資源間配合與協(xié)同失衡的癥結(jié)及內(nèi)在原因，繼而采取切實(shí)可行的改善措施；語(yǔ)料庫(kù)內(nèi)優(yōu)秀實(shí)驗(yàn)教師的課堂話語(yǔ)多模態(tài)語(yǔ)料亦可為教師提供多模態(tài)范例，向其展示如何在公共英語(yǔ)課堂中實(shí)現(xiàn)各模態(tài)的潛在意義及模態(tài)間的合理協(xié)同與配合，以期喚醒教師的多模態(tài)意識(shí)，提升教師多模態(tài)資源識(shí)讀能力和有效應(yīng)用能力以及教師對(duì)多模態(tài)資源及其整合傳輸效果的判斷及反思能力，實(shí)現(xiàn)教師多模態(tài)教學(xué)能力的可持續(xù)發(fā)展。