新媒體數(shù)位藝術(shù)——聲音與影像的跨界融通

楊 君

（河南大學(xué) 新聞與傳播學(xué)院，河南 開封 475001）

一、聲音裝置藝術(shù)

聲音藝術(shù)（Sound Art）從最初在傳統(tǒng)音樂下突破制式的架構(gòu)、創(chuàng)造新的樂音及作品形式的種種改變，即可說是在過往既定的架構(gòu)下，刻板于音樂種種美學(xué)感知中，還原其音樂的本質(zhì)，用聲音來創(chuàng)造一個(gè)新的美學(xué)概念，使音樂有了更多的空間及可能性。而聲音藝術(shù)可能是當(dāng)代藝術(shù)形態(tài)中較難定義的類型之一，它不以硬體器材設(shè)備取勝，因?yàn)槿魏问褂寐曇魹槊襟w素材的創(chuàng)作都有成為廣義聲音的可能。［1］

新媒體數(shù)位藝術(shù)中的聲音裝置將傳統(tǒng)藝術(shù)的結(jié)構(gòu)分為“視、聽、動(dòng)、靜”四部分，它們之間相互融通，從而能夠創(chuàng)造出極其美妙的數(shù)位藝術(shù)。其中，聲音是受眾接受外界信息的主要渠道之一，在新媒體數(shù)位藝術(shù)中，聲音發(fā)揮著重要的作用，對(duì)于新媒體數(shù)位藝術(shù)來說，它的作品的藝術(shù)價(jià)值發(fā)揮著舉足輕重的作用。

二、新媒體藝術(shù)在臺(tái)灣

臺(tái)灣的新媒體數(shù)位藝術(shù)發(fā)展迅速，2000年以后，自電影與錄像開始出現(xiàn)在美術(shù)館和博物館之后，音像很快受到人們的重視，這也意味著聲音藝術(shù)的脈絡(luò)有著明朗化的發(fā)展。音像與數(shù)位技術(shù)緊密的結(jié)合，利用錄像藝術(shù)、聲音裝置、聲音與影像現(xiàn)場(chǎng)及時(shí)表演等方式，成就聲音裝置藝術(shù)的完美展出。

姚仲涵從2007年開始著手以日光燈進(jìn)行創(chuàng)作，日光燈不穩(wěn)定的模糊狀態(tài)是讓姚仲涵感興趣的主因，也成就其卓越的創(chuàng)作。姚仲涵的多數(shù)作品皆搜集來自日光燈閃爍過程的聲響，再透過電腦放大、改變音頻、構(gòu)筑為作品中的聲響元素。已被國(guó)立臺(tái)灣美術(shù)館典藏的《流竄座標(biāo)》便是以聲光、身體與空間為基礎(chǔ)，透過三者的關(guān)聯(lián)互動(dòng)觸發(fā)觀者的「身音經(jīng)驗(yàn)」，《流竄座標(biāo)》更使觀者的身體成為聲音、光、位置三者匯聚的焦點(diǎn)，進(jìn)而在藝術(shù)創(chuàng)作中實(shí)踐身體、聲光與空間的彼此關(guān)系。

簡(jiǎn)而言之，聲音和其他藝術(shù)形式最大的不同在于，人們必須要先聽完才知道發(fā)生了什么事，才能確定自己體驗(yàn)到了什么但是在聽完之前，受眾要先排除自己的心理障礙。因?yàn)槁犛X是接受度最窄的一種感官，而且受慣性所牽制。［2］所以，長(zhǎng)期以來，音像被看成是聽覺和聲音以不可見的抽象媒體素材來完成的具體實(shí)踐形式。

我們可以看出，聲音作為人類獲取信息的主要渠道之一，在新媒體數(shù)位藝術(shù)中發(fā)揮著重要的作用。但是，在媒體市場(chǎng)中，聲音裝置技術(shù)與藝術(shù)水平還有待提高。在今后的新媒體數(shù)位藝術(shù)創(chuàng)作中，必須重視聲音設(shè)計(jì)在新媒體中的重要影響力。

三、新媒體藝術(shù)在大陸

近年來，新媒體藝術(shù)逐漸在中國(guó)大陸各大藝術(shù)館、美術(shù)館樹立起較為完整的一套藝術(shù)體系。新媒體藝術(shù)與科技密切相連，這種藝術(shù)手法與傳統(tǒng)的藝術(shù)手法迥異，這是一書中的創(chuàng)新。例如，上海第十屆雙年展城市館的“人機(jī)未來”、上海21世紀(jì)民主美術(shù)館開館展“多重宇宙”、中央美院美術(shù)館第二屆未來站“創(chuàng)客創(chuàng)客”等。這種藝術(shù)集合了網(wǎng)絡(luò)、計(jì)算機(jī)、音像與影像并與觀眾進(jìn)行互動(dòng)這種形式，他們展現(xiàn)了炫酷的特技，令人眼花繚亂。

張尕，媒體藝術(shù)家，媒體中國(guó)2008年策展人，紐約帕森斯藝術(shù)學(xué)院教授。曾參加許多重要國(guó)際展覽如Ars Electronica Center （奧地利）、Adelaide Art Festival（澳大利亞）等。從2004年至2006年之間，他組織并策劃了北京國(guó)際新媒體數(shù)位藝術(shù)展及論壇，將國(guó)際新媒體藝術(shù)引向中國(guó)大陸。2015年起，他將參與指導(dǎo)上海新媒體藝術(shù)中心展覽，談?wù)勑旅襟w數(shù)位藝術(shù)究竟是什么。

四、影像，是一種聽覺經(jīng)驗(yàn)

當(dāng)代新媒體數(shù)位藝術(shù)家利用科技媒體，創(chuàng)造了充滿媒介性（mediality）元素的藝術(shù)品、虛擬環(huán)境、表演以及裝置，并標(biāo)志著越來越電腦化處理的媒體元素（如、圖像、活動(dòng)影像、聲音、形象、空間和文字）。這些人工制造出的成果，被稱為是“顛覆矩形視窗”、“視覺圖像認(rèn)知”以及帶動(dòng)互動(dòng)性展演的“新界面”，藝術(shù)家、作家以及影像創(chuàng)作者都不斷地實(shí)驗(yàn)這種新思維，以及新視覺界面和敘事結(jié)構(gòu)的模式。

聲音與影像之間的關(guān)系，不僅能夠表現(xiàn)、引起、召喚、緩和情緒，說明情節(jié)、促進(jìn)聯(lián)想、加深視覺印象。人類在真實(shí)生活中運(yùn)用到的感官體驗(yàn)，聽到或是看到的東西并不能給我們完全立體的感受。若是把影像獨(dú)立，除去聲音的部分，會(huì)是怎樣的情形？反之，又會(huì)是怎樣的體驗(yàn)？加入經(jīng)典的原著少了影像，或是缺了聲音，作品本質(zhì)仍然存在或是變成另一件不同的，甚至是迥異的作品？

為了使聲音和影像之間能夠更好地融通，受眾在新媒體數(shù)位藝術(shù)的表演中起著重要作用。新媒體藝術(shù)是一個(gè)互動(dòng)性較強(qiáng)的藝術(shù)樣式，通過搜集各種資料，形成新的藝術(shù)作品，呈現(xiàn)在受眾的面前，吸引受眾參與其中，這是媒體的一大飛躍式進(jìn)程。它是全新的藝術(shù)形態(tài)，受眾與影像及聲音互動(dòng)的過程，就是社會(huì)和科技文化進(jìn)步的過程。

五、聲音與影像的密切聯(lián)系

新媒體數(shù)位藝術(shù)主要是通過視覺、聽覺、觸覺等身體感官器官的刺激來獲得親身體驗(yàn)與感受。其中，視覺和聽覺就像是孿生姐妹，是一個(gè)整體。沒有視覺，聽覺就不完整；沒有聽覺，視覺就無法完美地呈現(xiàn)出來。但是，聲音在新媒體數(shù)位藝術(shù)中的作用是無可厚非的?！奥曇羲囆g(shù)”成為一個(gè)極其難以論述的藝術(shù)創(chuàng)作方式，當(dāng)人們的感官器官不斷受到挑戰(zhàn)與刺激的時(shí)候，我們更難以對(duì)“聲音”傳統(tǒng)思維的定義“聲音是用聽覺感知來體會(huì)的”加以確定。一般來說，人們對(duì)“聲音”的認(rèn)知只是淺層面上的理解，只是純粹的聽覺感官上的刺激。在數(shù)位藝術(shù)下，聽覺、視覺與感官器官相融合，創(chuàng)造出集視覺、聽覺、觸覺為一體的完美體驗(yàn)。在網(wǎng)絡(luò)發(fā)達(dá)的時(shí)代，數(shù)位科技在聲音（sound）與音樂（music）藝術(shù)創(chuàng)作及其傳輸上的影響不言而喻，聲音的音像傳播面向的創(chuàng)作計(jì)劃經(jīng)常是以互動(dòng)裝置的形式表現(xiàn)出來，反映出不同使用者對(duì)如何置入或是轉(zhuǎn)化資料結(jié)構(gòu)成為聲音與視覺的展現(xiàn)。

所以，在聲音中，受眾參與的每一個(gè)藝術(shù)家的作品之中，都會(huì)由一種新的生命的形式呈現(xiàn)出來。從而，受眾對(duì)于之后的每一次感知形式的廣泛理解以及感知理論的發(fā)展開啟了一扇新窗。不同層次的新媒體數(shù)位藝術(shù)作品對(duì)于聲音的要求各不相同。

一是人機(jī)之間的互動(dòng)藝術(shù)。這個(gè)數(shù)位藝術(shù)比較簡(jiǎn)單，就是人與機(jī)器之間的直接觸覺接觸。例如，教育類的數(shù)位游戲，檢測(cè)人們的大腦反應(yīng)情況進(jìn)行簡(jiǎn)單的測(cè)試。二是能實(shí)現(xiàn)人機(jī)、人人，低水平的互動(dòng)游戲。例如，憤怒的小鳥，人的手指與屏幕接觸，屏幕受到手指的控制，來完成整個(gè)游戲。這種虛擬現(xiàn)實(shí)的特點(diǎn)主要依靠手指與屏幕進(jìn)行互動(dòng)，這種互動(dòng)信息傳送的效率較低，成員之間的呼應(yīng)較困難。三是能夠?qū)崟r(shí)進(jìn)行成員之間的直接對(duì)話。這是高級(jí)虛擬的訓(xùn)練系統(tǒng)，如飛行員模擬駕駛、消防員模擬救生訓(xùn)練等。

在新媒體數(shù)位藝術(shù)聲音音像中，聲音被作為一種訊號(hào)“signal”，其含義是從電腦到其他裝置之間的輸入和輸出。正如勞雷爾（Brenda Laurel）所言：“即使人們看不到聲音，但卻常說：聲音被音響給展示（displayed）出來。”張永達(dá)對(duì)上述有了明確的表示：“不管是視覺藝術(shù)或是其他領(lǐng)域，聲音是在幫助或輔助視覺的建構(gòu)，使它更清楚地表達(dá)，就像是一開始的無聲電影到有聲電影，其實(shí)是幫助我們進(jìn)入視覺所要呈現(xiàn)的狀態(tài)，彌補(bǔ)一些不足?！?/p>

［1］ 林其蔚.聲音藝術(shù)的定義困境I——讓人迷惑的藝術(shù)［J］.藝術(shù)Issue，2010（8）：44.

［2］ 張?zhí)N之.聲音藝術(shù)，臺(tái)灣發(fā)聲——從五線譜中離開：聲音藝術(shù)對(duì)話錄［J］.幼獅文藝，2005（621）：43.

［3］ 何巖.VIDEO 新媒體藝術(shù)中的動(dòng)態(tài)影像藝術(shù)［J］.長(zhǎng)春教育學(xué)院，2010（23）.

［4］ 姜超遷.從作品《得廣廈千間-致萬安》看中國(guó)新媒體聲音裝置藝術(shù)［J］. 2013（6）.

［5］ 孫霞.關(guān)于交互設(shè)計(jì)中“視與聽”元素的研究［J］. 2013（zl）.