社會(huì)符號(hào)學(xué)視角下的多模態(tài)話語(yǔ)分析

李勝楠

摘 要：多媒體技術(shù)的發(fā)展使語(yǔ)篇世界日趨呈現(xiàn)多模態(tài)化。多模態(tài)話語(yǔ)分析應(yīng)運(yùn)而生并逐漸成為語(yǔ)言學(xué)研究的熱點(diǎn)之一。本文以Halliday的系統(tǒng)功能語(yǔ)法和Kress & Van Leeuwen的視覺語(yǔ)法框架為理論基礎(chǔ)，對(duì)《海上鋼琴師》的電影海報(bào)進(jìn)行社會(huì)符號(hào)學(xué)分析。通過解讀電影宣傳海報(bào)語(yǔ)篇的再現(xiàn)意義、互動(dòng)意義和構(gòu)圖意義，揭示文字與圖像共同作為社會(huì)符號(hào)的表意功能，從而驗(yàn)證以社會(huì)符號(hào)學(xué)理論為基礎(chǔ)的多模態(tài)話語(yǔ)分析理論對(duì)分析電影海報(bào)語(yǔ)篇的可行性和可操作性。

關(guān)鍵詞：多模態(tài)話語(yǔ)分析;社會(huì)符號(hào)學(xué);視覺語(yǔ)法;電影海報(bào)

隨著計(jì)算機(jī)技術(shù)和多媒體技術(shù)的發(fā)展，話語(yǔ)不再以單一的文字模式體現(xiàn)，而是加入了聲音、顏色、圖像、動(dòng)畫等多種模式。這種運(yùn)用聽覺、視覺、觸覺等多種感覺，運(yùn)用語(yǔ)言、圖像、聲音、動(dòng)作等多種符號(hào)資源進(jìn)行交際的現(xiàn)象就是多模態(tài)話語(yǔ)（張德祿，2009a：24）。

多模態(tài)語(yǔ)篇分析興起于20世紀(jì)90年代的西方。近年來，國(guó)內(nèi)外的學(xué)者對(duì)多模態(tài)話語(yǔ)分析開展了多方面的研究。以Halliday的系統(tǒng)功能語(yǔ)法為基礎(chǔ)，Kress & Van Leeuwen在《圖形閱讀》（ Reading Images ，1996） 一書中， 提出了第一個(gè)系統(tǒng)而全面的視覺語(yǔ)法分析框架，從構(gòu)圖視角、色彩等方面來解讀圖像所要表達(dá)的意義，為多模態(tài)話語(yǔ)分析提供了理論依據(jù)和分析方法。

本文試圖用Kress & Van Leeuwen的多模態(tài)話語(yǔ)分析方法，以電影《海上鋼琴師》的宣傳海報(bào)為例，進(jìn)行多模態(tài)話語(yǔ)的社會(huì)符號(hào)學(xué)分析，探討圖像是如何與文字一起實(shí)現(xiàn)表意功能的，以期對(duì)于讀者多模態(tài)識(shí)讀能力的提高有所幫助。

1.理論背景

1.1多模態(tài)話語(yǔ)

模態(tài)指交流的渠道和媒介，包括語(yǔ)言、技術(shù)、圖象、顏色、音樂等符號(hào)系統(tǒng)（朱永生，2007）。近年來，由于科學(xué)技術(shù)的發(fā)展，觸覺模態(tài)、嗅覺模態(tài)和味覺模態(tài)也開始用于話語(yǔ)交際。多模態(tài)指的便是除了文本之外，還帶有圖像、圖表等的復(fù)合話語(yǔ)，或者說任何由一種以上的符號(hào)編碼實(shí)現(xiàn)意義的文本（李戰(zhàn)子，2003）。Kress & Leeuwen（2001）認(rèn)為語(yǔ)篇的多模態(tài)性是當(dāng)今世界人們交際中使用的各種語(yǔ)篇的一個(gè)重要特征。

1.2系統(tǒng)功能語(yǔ)法

Halliday建立了系統(tǒng)功能語(yǔ)法，他將錯(cuò)綜復(fù)雜的語(yǔ)言功能簡(jiǎn)化為三大元功能： 概念功能、人際功能和語(yǔ)篇功能。正如Halliday在其《功能語(yǔ)法導(dǎo)論》中所說的，他創(chuàng)建功能語(yǔ)法的目的是為語(yǔ)篇分析提供一個(gè)理論框架，這個(gè)框架可以用來分析英語(yǔ)中任何口頭或書面語(yǔ)篇（1994）。

1.3視覺社會(huì)符號(hào)學(xué)理論

在Halliday提出的語(yǔ)言三大元功能的基礎(chǔ)之上，Kress & Van Leeuwen在其合著Reading Images 中，對(duì)視覺語(yǔ)言進(jìn)行了系統(tǒng)分析，提出了視覺語(yǔ)法的分析框架。他們認(rèn)為正如語(yǔ)言的語(yǔ)法規(guī)定了詞如何組成小句、句子和語(yǔ)篇，視覺語(yǔ)法也決定了所描繪的人物、地點(diǎn)和事物如何組成具有不同復(fù)雜程度的“陳述”（李戰(zhàn)子，2003 ）。Kress & van Leeuwen提出了視覺語(yǔ)法的三個(gè)意義層面來分析圖像，分別是再現(xiàn)意義、互動(dòng)意義和構(gòu)圖意義。

2.電影海報(bào)《海上鋼琴師》的多模態(tài)話語(yǔ)分析

本片講述了一個(gè)鋼琴天才傳奇的一生。1900年，一個(gè)孤兒被遺棄在頭等艙，由船上的水手撫養(yǎng)長(zhǎng)大，被取名為1900。主人公顯示出了非凡的鋼琴天賦。但他從來不愿踏上陸地，直到有一天，他愛上了一個(gè)女孩。最后，他決心下船去尋找他愛的女孩，然而當(dāng)他站立在船與陸地之間的樓梯上時(shí)，他卻呆住了，面對(duì)一望無際的盡頭，他無法接受也無法融入其中，只能返回船上。

（一）電影海報(bào)的再現(xiàn)意義分析

Kress & Van Leeuwen（1996）強(qiáng)調(diào)，圖像中參與者和環(huán)境等元素對(duì)圖像再現(xiàn)意義有著非常重要的影響。再現(xiàn)功能分為敘事再現(xiàn)和概念再現(xiàn)兩種。敘事圖像中，參與者之間的關(guān)系是通過相互作用來體現(xiàn)的，圖中的元素形成斜線，通常是強(qiáng)烈的對(duì)角線，就形成矢量（ vector）。一般來講，概念圖像中是沒有矢量的（李戰(zhàn)子，2003）。 它表示更為穩(wěn)定的意義。

電影海報(bào)中，男主人公面朝大海和游輪，背對(duì)著陸地和圖像觀看者而立，保持靜止?fàn)顟B(tài)，因此海報(bào)只呈現(xiàn)出概念意義。分類和分析過程與功能語(yǔ)法中的關(guān)系過程極為相似，著重研究了參與者是以何種關(guān)系相互聯(lián)系起來的。分析過程中也有兩類參與者：表整體和表部分的承載者具備的特征。簡(jiǎn)單的說，分類過程研究的是上下級(jí)或同級(jí)之間的關(guān)系，而分析過程研究的是整體和部分的關(guān)系（張敬源，2012）。電影海報(bào)中，陸地實(shí)際上代表象征著人類文明的城市。人、船和城市這三者之間蘊(yùn)含著整體和部分關(guān)系，主人公從小生長(zhǎng)在船上，可以說是船的一部分，而船可以說是工業(yè)城市的一部分。三者的彼此依存關(guān)系進(jìn)一步增添了主人公個(gè)人命運(yùn)的悲劇色彩，主人公終歸擺脫不了人類社會(huì)的掌控。象征過程研究參與者的本體或象征義，在只有一個(gè)參與者時(shí)，被稱為象征暗示，有兩個(gè)以上的參與者時(shí)是象征屬性。在海報(bào)中，海洋和天空象征夢(mèng)想，而陸地象征現(xiàn)實(shí)，而海中的船則象征著將人們載向夢(mèng)想的搖籃。在影片中，弗吉尼亞號(hào)游輪不僅是男主人公追求夢(mèng)想的搖籃，也是歐洲移民實(shí)現(xiàn)美國(guó)夢(mèng)的搖籃。在圖像中，主人公面朝大海和游輪，背對(duì)著陸地而立，因此影片中的主人公是一個(gè)避世者的形象，他可以承受大自然帶來的驚濤駭浪，卻無法面對(duì)現(xiàn)實(shí)陸地中的繁華都市（賀哲野，2016）。

（二）電影海報(bào)的互動(dòng)意義分析

互動(dòng)意義不僅表達(dá)了圖像制作者、圖像參與者和圖像觀看者的相互之間的社會(huì)關(guān)系也體現(xiàn)了對(duì)圖像觀看者的態(tài)度進(jìn)行引導(dǎo)。接觸指圖中的參與者與圖像觀看者有目光交流，對(duì)觀眾有情感訴求，形成索取;反之，則形成信息提供。海報(bào)中的男主人公背對(duì)著圖像觀看者而立。這向觀看者傳達(dá)出了這樣一個(gè)信息：他所向往的生活應(yīng)該在船上度過，因?yàn)橹挥性谳喆纤拍茏杂勺栽诘刈非笞约旱囊魳穳?mèng)想。社會(huì)距離可由圖像參與者的大小來表明，表示圖像參與者與觀看者之間的親疏關(guān)系，這種親疏關(guān)系可以通過鏡頭取景的框架大小加以體現(xiàn)。如特寫鏡頭可以體現(xiàn)圖像參與者和觀看者親密的關(guān)系，而長(zhǎng)鏡頭則體現(xiàn)了兩者較為疏遠(yuǎn)的關(guān)系。電影海報(bào)采用了長(zhǎng)鏡頭，拉開主人公與觀眾所代表的世俗社會(huì)之間的距離?，F(xiàn)代人永遠(yuǎn)也走進(jìn)不了主人公的內(nèi)心世界，始終和主人公1900存在著距離。

態(tài)度主要通過“視角（perspective）”來體現(xiàn)，表達(dá)對(duì)圖像參與者所持的態(tài)度。從垂直的角度來看，如果觀看者通過俯視的角度觀看參與者，表明觀看者享有權(quán)勢(shì)，如果是平視的角度則表示觀看者和參與者相對(duì)平等的關(guān)系，仰視則表示參與者處于強(qiáng)勢(shì)地位（Kress & Van Leeuwen，1996）。觀察電影海報(bào)之后，我們可以看出海報(bào)是從水平的正面視角拍攝的，但觀眾無法看到主人公的正臉。圖像制作者邀請(qǐng)觀眾以一種客觀平等的視角去理性地審視主人公打破常規(guī)，自由大膽追求音樂夢(mèng)想的行為，但是對(duì)于他這種看似荒誕的行為，普通的觀看者又是不能真正理解其中的內(nèi)涵。

情態(tài)指的是人們對(duì)關(guān)注的世界所做出的陳述的真實(shí)度或者可信度。情態(tài)被分為高、中、低三類： 高感官情態(tài)指圖像使用了高飽和度的色彩;中感官情態(tài)指圖像色彩不太飽和，低感官情態(tài)指圖像只是黑白的（李戰(zhàn)子2003）。經(jīng)過觀察我們可以發(fā)現(xiàn)：在電影海報(bào)中，和大自然有關(guān)的大海和天空使用了高飽和度的色彩，具有高情態(tài)值，色彩較為斑斕，給人強(qiáng)烈的視覺沖擊力和遠(yuǎn)視力，散發(fā)著浪漫主義的氣息。而與人類文明有關(guān)的陸地、游輪、和主人公的背影則使用了低飽和度的黑灰色和白色，具有較低的情態(tài)值，容易使圖像觀看者產(chǎn)生壓抑、消極的感覺。主人公雖然能夠在船上自由自在地追求音樂夢(mèng)想，但船作為人類文明的產(chǎn)物終歸擺脫不了人類社會(huì)的控制。

（三）電影海報(bào)的構(gòu)圖意義分析

對(duì)應(yīng)于功能語(yǔ)法的語(yǔ)篇意義，Kress & Van Leeuwen提出了多模態(tài)語(yǔ)篇的構(gòu)圖意義。多模態(tài)話語(yǔ)的構(gòu)圖意義包括：信息值、取景和顯著性。

信息值是通過元素在構(gòu)圖中的放置位置來實(shí)現(xiàn)的。上方和下方具有不同的信息值。置于上方的因素是“理想的”，而置于下方的是“真實(shí)的。“理想的”指它是信息的最顯著部分“真實(shí)的”指更特定的信息，如細(xì)節(jié)等，或者說更實(shí)際的信息（李戰(zhàn)子，2003）。這張海報(bào)可分為上中下三部分，上部分是天空，天空中點(diǎn)綴著月亮和星星還有電影宣傳語(yǔ)和影片的獲獎(jiǎng)情況，中間部分是大海和游輪，下部分是陸地。海報(bào)的上部分是“理想的”，簡(jiǎn)潔有力地概括了影片的影響力，它是海報(bào)信息最顯著部分，星辰大海象征著詩(shī)和遠(yuǎn)方，在主人公看來，天空是自由的象征。海報(bào)的下部分是“真實(shí)的”，它交代了影片在現(xiàn)實(shí)社會(huì)的上映時(shí)間和出品公司，同時(shí)也以黑色的筆觸展現(xiàn)了黑暗陰冷的現(xiàn)實(shí)生活，表明主人公必然會(huì)被拉回殘酷的現(xiàn)實(shí)。中間部分是一艘游輪，他載著主人公的夢(mèng)想，在理想與現(xiàn)實(shí)之間苦苦地掙扎，但最終還是消失在大海之中。

取景與顯著性。所謂取景，就是使用架構(gòu)的方法，劃出分割線或者實(shí)際的框線，來連接或者切斷影像中的元素，以象征它們?cè)谀承┓矫姹舜讼鄬倥c否。所謂顯著性，指的是元素的設(shè)計(jì)，是以不同程度值來吸引觀看者的注意力，可通過前景或者背景、相對(duì)大小等來表現(xiàn)。電影海報(bào)以陸地和大海的交接處為分割線，大海與陸地分割象征著浪漫主義與現(xiàn)實(shí)主義的對(duì)立、理想與現(xiàn)實(shí)的對(duì)立。在這幅電影海報(bào)中，圖像是靜止的，故事的發(fā)展是以靜止的圖畫述說一個(gè)動(dòng)態(tài)的故事。將天空、大海和船作為背景，能傳達(dá)出豐富的內(nèi)涵。將主人公黑色的背影置于大海和船的前面使得人物形象得以在海報(bào)中獲得更高的凸顯度，吸引觀看者進(jìn)一步去了解主人公背后的成長(zhǎng)經(jīng)歷。電影的中文名字”海上鋼琴師”使用白色字體在背景的印襯下顯得更加醒目，英文名字也全部使用大寫字母且將”legend”和”1900”這兩個(gè)字放大，吸引讀者去了解主人公背后的傳奇人生。海報(bào)巧妙地使用圖像和凸顯的電影名字構(gòu)成一個(gè)整體多模態(tài)的語(yǔ)篇，達(dá)到更加顯著的電影宣傳效果，給人留下深刻的印象。

結(jié)語(yǔ)

本文首先簡(jiǎn)單介紹了海報(bào)分析所基于的理論基礎(chǔ)—Halliday系統(tǒng)功能語(yǔ)法，以及在此基礎(chǔ)上發(fā)展起來的Kress & Van Leeuwen的視覺語(yǔ)法框架。并以此為基礎(chǔ)，分析了《海上鋼琴師》的電影海報(bào)，解讀了圖像的再現(xiàn)意義、互動(dòng)意義、構(gòu)圖意義，以及他們是如何和文字一起共同來完成表意功能的。說明不僅文字具有意義，圖像、顏色和符號(hào)也可以構(gòu)建話語(yǔ)意義，具有多功能性。通過分析，我們可以看出，在數(shù)字化的今天，多模態(tài)識(shí)讀能力已經(jīng)變得非常重要和必要。希望本文對(duì)電影海報(bào)的分析模式，能夠?qū)ο嚓P(guān)模態(tài)話語(yǔ)資源的分析解讀提供借鑒。

參考文獻(xiàn)：

[1] Halliday， M. A. K. An introduction to Functional Grammar（2nd edition） [M]. London： Arnold， 1994.

[2] Kress， G. & van Leeuwen， T. Multimodal Discourse： The Modes and Media of Contemporary Communication [M]. London： Arnold，? 2001.

[3] Kress， G. & Leeuwen， T. V. Reading Image [M]. Burwood： Brown Prior Anderson， 1996.

[4]賀哲野，方麗. 浪漫荒誕的悲劇人生——電影《海上鋼琴師》中1900的藝術(shù)形象分析[J]. 電影評(píng)介，2016年第6期.

[5] 李戰(zhàn)子.多模式語(yǔ)篇的社會(huì)符號(hào)學(xué)分析. 外語(yǔ)研究， 2003年第5期.

[6] 張德祿.多模態(tài)話語(yǔ)分析綜合理論框架探索[J ]中國(guó)外語(yǔ)，2009a， C1）： 24-30.

[7] 張敬源，賈培培. 關(guān)于視覺語(yǔ)法的幾點(diǎn)思考[J]. 當(dāng)代外語(yǔ)研究，2013.

[8] 朱永生.多模態(tài)話語(yǔ)分析的理論基礎(chǔ)與研究方法. 外語(yǔ)學(xué)刊， 2007年第5期.