新視聽技術(shù)與文化產(chǎn)業(yè)的新業(yè)態(tài)

花 建

(上海社會科學院 文化產(chǎn)業(yè)研究中心, 上海 200235)

一、 從文化產(chǎn)業(yè)視野看新視聽技術(shù)的發(fā)展

文化產(chǎn)業(yè)視野中的新視聽技術(shù)，指采用先進的視覺造型、視頻和音頻制作及相關(guān)技術(shù)，通過人的視覺和聽覺而影響人的情感和認知，營造出具有敘事主題和故事內(nèi)容的視聽效果。人作為地球上最高等級的動物，在獲取外界的信息時，90%以上是通過視覺和聽覺獲得的。視聽感覺的拓展對于人類的進化具有重大的意義。

人類有史以來，就試圖通過科學研究和技術(shù)進步，改善自己的視聽能力，突破用自然手段制作和保存視聽信息的局限性，提升對于視覺和聽覺信息的記錄、制作、壓縮、加工、儲存、轉(zhuǎn)換、播放等能力，將視聽信息制作成為產(chǎn)業(yè)化和社會化的產(chǎn)品和服務。這已經(jīng)成為人類長久以來的夢想，也是人類實現(xiàn)自由的重要途徑。這其中，對于在一定時間段中連續(xù)發(fā)生和流動的動態(tài)視覺和聽覺信息，進行采錄、儲存、傳輸和加工，就成為視聽技術(shù)研發(fā)和更新的重心。

人類提升視覺和聽覺能力，是立足于科學和技術(shù)的不斷進步和普及而實現(xiàn)的。從18世紀工業(yè)革命以來，人類就分別在音頻和視頻的不同領(lǐng)域中，做了艱苦的探索。所謂音頻技術(shù)，指把人工和自然聲音進行可錄制、可壓縮、可傳輸、可播放的技術(shù)整合。1877年8月15日，發(fā)明家愛迪生在實驗室里，通過純機械錄音技術(shù)發(fā)明了世界上第一款留聲機。在這之后，科學家和工程師突破了機械錄音技術(shù)，進一步發(fā)展出光學錄音、磁性錄音和電子錄音技術(shù)。而揚聲器則是將上述一切聲音信號轉(zhuǎn)換為聲音的終端裝置。它作為整個工作鏈的最末端，在音頻技術(shù)的引用中發(fā)揮了重大作用。而視頻技術(shù)，則是指把靜態(tài)到動態(tài)的圖像進行攝錄、編碼、制作、壓縮、儲存、傳輸、播放的技術(shù)。它起源于早期的照相技術(shù)，從視頻技術(shù)、模擬視頻信號，發(fā)展到數(shù)字視頻信號。上述這些技術(shù)分別在視頻和音頻領(lǐng)域進行了探索，這一階段可以稱為“單媒體時代”(Monomedia Time)。從20世紀后半葉開始，人類在該領(lǐng)域全面進入“多媒體時代”(Multimedia Time)，并且結(jié)合人工智能、大數(shù)據(jù)、移動互聯(lián)、混合現(xiàn)實、3D打印等技術(shù)，推動視聽技術(shù)跨越了三個發(fā)展階段(見圖1)。

圖1 新視聽技術(shù)發(fā)展的三大階段

第一階段，從20世紀末開始，視聽技術(shù)的主流進入到“跨媒體-新視聽1.0版”。它指人類已經(jīng)掌握和應用了同時采集兩種以上不同類型信息媒體的技術(shù)，這些信息媒體包括聲音、圖形、圖像、文字、動畫、視頻、音頻等。在這一階段，日本學者提出“泛在城市理論”，認為日本要從E-Japan(電子日本)時代向U-Japan(物聯(lián)網(wǎng)日本)時代轉(zhuǎn)化；中國學者提出“泛在網(wǎng)絡與多媒體業(yè)務創(chuàng)新”，指出終端技術(shù)的融合、接入技術(shù)的多樣化、網(wǎng)絡的融合等，將使手機終端成為無所不在的中繼器和控制器。[注]呂廷杰在北京大學文化產(chǎn)業(yè)新年論壇上的演講：《泛在網(wǎng)絡與多媒體業(yè)務創(chuàng)新》，2009年1月10日。層出不窮的新視聽文化形態(tài)，依托技術(shù)的進步，大大降低了文化產(chǎn)品和娛樂服務的成本，使得數(shù)字化的文化產(chǎn)品和娛樂服務獲得極大的豐富，成為當年松下公司總裁所說的“自來水產(chǎn)品”。

第二階段，從2000年以后，視聽技術(shù)的主流進入“跨現(xiàn)實-新視聽2.0版”。它指人類研發(fā)和不斷升級虛擬現(xiàn)實、增強現(xiàn)實等技術(shù)，把物理現(xiàn)實和虛擬現(xiàn)實相結(jié)合，使得人們可以在混合形態(tài)的多維現(xiàn)實空間獲得前所未有的多樣化體驗。它立足于后工業(yè)社會與科技發(fā)展所創(chuàng)造出的“模擬” (Simulation) 與“擬真” (Virtuosity) ，進一步創(chuàng)造出“虛擬真實”(Virtual Reality，簡稱VR) 與“增強現(xiàn)實”(Augmented Reality，簡稱AR) 的環(huán)境。這種全新的視聽技術(shù)，擴大了人們對虛構(gòu)世界的創(chuàng)造與再現(xiàn)，融合出虛擬與真實合一的情境。AR技術(shù)是在1990 年代初期，由美國波音公司的一群優(yōu)秀科學家，為了先進制造業(yè)而創(chuàng)造的。他們探索開發(fā)出一種實驗性的AR 系統(tǒng)，協(xié)助工人裝配航空器部件。當AR技術(shù)把增強現(xiàn)實的信息疊加到一線工人的特種眼鏡上時，可以大大提高工人裝配的準確性和效率。而美國軍隊在中東戰(zhàn)場上使用AR技術(shù)偵察戰(zhàn)地場景，讓軍人快速獲得實際上無法用肉眼觀測的信息。以此為基礎，新視聽技術(shù)在文化產(chǎn)業(yè)領(lǐng)域中同時向巨型化和微型化發(fā)展。所謂巨型化，指工程師、藝術(shù)家和設計師可以營造出4K、3D、巨幕/環(huán)幕/球幕、全息聲音場、巨型燈光秀等超大型視聽藝術(shù)效果；所謂微型化，指工程師、藝術(shù)家和設計師可以結(jié)合移動互聯(lián)網(wǎng)，在可穿戴設備、智能手機、平板電腦等隨身裝置中制作、傳遞、展示混合現(xiàn)實型的視聽藝術(shù)效果。

第三階段，從2010年開始，視聽技術(shù)的主流進入“跨智能-新視聽3.0版”。它結(jié)合從人類智能到人工智能的進步，依托對不同領(lǐng)域的海量信息的智能化處理，把視聽技術(shù)發(fā)展到一個全面集成、復合體驗、智能處理、人-機互動的新階段。正如維克托·邁爾-舍恩伯格所說，隨著大數(shù)據(jù)時代的到來，人類放棄對因果關(guān)系的渴求，而更加關(guān)注相關(guān)關(guān)系。這也就是說只要知道“是什么”，而不需要知道“為什么”[注]維克托·邁爾-舍恩伯格：《大數(shù)據(jù)時代》，浙江人民出版社，2012年。。這種轉(zhuǎn)變必須在人工智能的基礎上才能實現(xiàn)。斯坦福大學人工智能研究中心的尼爾遜教授對人工智能所下的定義為：“人工智能是關(guān)于知識的學科——怎樣表示知識以及怎樣獲得知識并使用知識的科學?！倍绹槭±砉W院的溫斯頓教授認為：“人工智能就是研究如何使計算機去做過去只有人才能做的智能工作。”[注]李碧云：《人工智能與人腦的智力比拼 誰的棋會下的更久?》，http://tech.163.com/16/0303/10/BH7OM6HA00094P0U.html，2016年3月3日。根據(jù)上述科學家的研究，人工智能是研究人類智能活動的規(guī)律，并且構(gòu)造具有一定智能的人工系統(tǒng)，研究如何讓計算機去完成以往需要人的智力才能勝任的工作，應用計算機的軟硬件來模擬人類智能行為的理論、方法和技術(shù)，通過發(fā)揮人工智能的深度學習能力，推動新視聽技術(shù)跨入了一個全新的階段。

二、 新視聽技術(shù)對故事和敘事的貢獻

從文化產(chǎn)業(yè)的視角看，新視聽技術(shù)連續(xù)跨越了“跨媒體”“跨現(xiàn)實”“跨智能”三個階段，對構(gòu)建文化產(chǎn)業(yè)的核心內(nèi)容特別是故事和敘事做出了重要的貢獻。聯(lián)合國開發(fā)計劃署和聯(lián)合國貿(mào)發(fā)會議編撰的《創(chuàng)意經(jīng)濟報告》指出，各類文化產(chǎn)品和文化服務具有三個基本的特點：創(chuàng)意的投入、傳達符號信息(Symbolic Messages)的媒介、知識產(chǎn)權(quán)(Intellectual Property)[注]UNDP & UNCTADN, Creative Economy: A Feasible Development Option, United Nations,2011.。而從人類智慧創(chuàng)造的意義上說，這些作為創(chuàng)意結(jié)晶的符號型知識產(chǎn)權(quán)，之所以能夠連接歷史與現(xiàn)在，打動具有不同宗教和文化背景的人群，溝通淹沒的遺址與現(xiàn)代人群，其核心線索就是創(chuàng)作的故事和敘事(Story Telling)。而新視聽技術(shù)極大地促進了當代人對于故事的創(chuàng)作和敘事的演示。

具有豐富實踐經(jīng)驗的美國概念與體驗設計專家羅伯特· 歌德(Robert Gould)結(jié)合大量文化創(chuàng)意產(chǎn)業(yè)的成功案例指出：“故事發(fā)揮著什么樣的作用呢？它能夠表述我們試圖解釋的東西，它是有一種對我們生活歷程當中的人生痛苦和喜悅的原因。就像神話指引著生活的意義和目標，他們傳遞、鼓舞、揭示并且說明已知以及未知的世界?！覀冊谀X海當中所吸收的這些故事形式就像我們生活當中所經(jīng)歷的一樣。我們知道在這個地球上我們是唯一的生物，我們能夠進行幻想，能夠產(chǎn)生故事，能夠產(chǎn)生神話故事。在這些故事當中，敘述是輔助文化組織結(jié)構(gòu)、發(fā)展理想并為其行為尋找權(quán)威的依據(jù)。它能夠讓我們的心理、身心融為一體?！倍乱暵牸夹g(shù)把這種能力發(fā)展到一種前所未有的高度，能用全新的視聽效果傳遞內(nèi)在的寓意，說明人類心理對于已知以及未知世界的感應和投射。比如2017年，英特爾公司與中國2005年《超級女聲》的冠軍李宇春進行合作，把新視聽技術(shù)融合到《今天雨，可是我們在一起》這首歌的MV中，開始了從內(nèi)在感悟(Intel Inside)轉(zhuǎn)向視聽震撼(Amazing Experience Outside)的嘗試。這一新視聽形態(tài)用如夢如幻的視聽體驗，與李宇春的臉部特效相結(jié)合，時而是超高清晰的水滴，時而是變化莫測的調(diào)色盤，更有似真似幻的穿越，演繹了“今天雨，可是我們在一起”的都市故事和情感主題。[注]羅伯特·歌德(Robert Gould)在上海國際文化裝備博覽會上的演講：《暢享未來：體驗、故事和魔法之諦》(Imagining the Future: Experience, Story and the Magic of Place)，2018年6月16日。

從總體上看，新視聽技術(shù)對于故事創(chuàng)作和敘事的貢獻集中在以下方面：

第一，高度多樣化的技術(shù)集成。由于當今前沿的視聽技術(shù)要整合和處理聲音、圖形、圖像、文字、動畫、視頻、音頻等海量信息，制造光效、音效、水幕、煙幕、場景移動、全效劇場等極為復雜的效果，所以用光影、環(huán)幕、巨幕、全息聲、無人機、無人艇、虛擬音樂、全景移動裝備、沉浸式空間等多類型的設備，用多機位、多角度的攝錄設備同時制作和傳遞。

第二，大數(shù)據(jù)和人工智能的支持。高度的技術(shù)集成，帶來了極為復雜和海量的信息整合和智能處理難題。其信息處理的重點不是精確性，而是混雜性，不是線性的因果關(guān)系，而是復雜的相互關(guān)系。傳統(tǒng)的人工設計和人工操控根本無法解決這樣復雜的信息。比如英特爾宣布運用True VR技術(shù)，在2018年平昌冬奧會上實現(xiàn)迄今為止最大規(guī)模的虛擬現(xiàn)實賽事轉(zhuǎn)播。對一個足球前衛(wèi)的射門拍攝，三維像素記錄全場的所有攝像頭，在巨大的足球場中采用TRUE VIEW技術(shù)的設備，每分鐘會產(chǎn)生高達3TB的數(shù)據(jù)。這就是說，每場足球賽的前15分鐘所產(chǎn)生的數(shù)據(jù)量就相當于美國國會圖書館中所有文獻量，可見數(shù)量之巨大。唯有在人工智能、大數(shù)據(jù)、先進制造技術(shù)的強大支持下，當代的新視聽技術(shù)才能跨上一個新的臺階。

第三，高水平的人-機互動。由于前所未有的新視聽技術(shù)，結(jié)合可穿戴設備和大數(shù)據(jù)分析，文化產(chǎn)業(yè)的從業(yè)人員可以更加敏銳地把握人類的微感覺和微情緒，通過對不同人群在行蹤、年齡、消費、愛好、時段、周邊活動等的海量信息的綜合分析，對小眾人群的文化需求進行精準定位，提供更加豐富多樣的文化體驗。而對于情景化的服務和知識，更需要大數(shù)據(jù)的模擬和說明。在通向一個特色化的視聽情境時，系統(tǒng)集成所要處理的變量會變得更加復雜多樣，因此它更需要高智商的集中管控和視聽表達。例如，在2018年1月的全球電子消費展(CES)上，英特爾公司展示的科技成果，堪稱新視聽技術(shù)推動文化創(chuàng)意產(chǎn)業(yè)所貢獻的超級秀。它包括三大部分：算法與布魯斯、數(shù)據(jù)、無人機與人工智能AI(見表1)。這些炫酷的科技都是利用英特爾積累的技術(shù)，與文化藝術(shù)進行深度融合所創(chuàng)造的最新成果。

表1 CES英特爾公司的科技秀主要內(nèi)涵

此次2018年英特爾科技秀，設在拉斯維加斯蒙特卡洛酒店的大劇院，展示了全球第一支數(shù)據(jù)樂隊演奏、全球第一次100 架英特爾Shooting Star微型無人機燈光和舞蹈秀、12歲舞者Sophie用數(shù)據(jù)展示表演、虛擬音樂和動作捕捉系統(tǒng)配合作秀、無人飛行汽車Volocopte等。此次采用的微型無人機機身框架柔軟，采用柔性泡沫塑料和無螺絲結(jié)構(gòu)設計，重量僅280克，比一個排球還輕。它的四軸飛行器的螺旋槳搭配加蓋保護罩，更加安全和靈巧。當100架英特爾微型無人機在巨大的空間排列成為流動的矩陣，伴隨著激動人心的音樂，在三維空間自由翻滾和變化時，猶如100個美妙的精靈在空中翩翩起舞，營造出變幻莫測的視聽效果。由于英特爾科技秀采用了大數(shù)據(jù)作為基礎，獨有算法能夠自動處理海量的動畫制作流程，并在瞬間創(chuàng)建100架無人機空中表演圖案的最快路徑。這樣高度集成的新視聽技術(shù)，堪稱在先進人工智能、大數(shù)據(jù)、移動互聯(lián)等支持下，對視頻、音頻、AR、VR、動作捕捉、光影效果、先進制造業(yè)技術(shù)等的高度整合。

三、 新視聽對遺產(chǎn)傳承和開發(fā)的提升

新視聽技術(shù)對于文化產(chǎn)業(yè)的積極貢獻之一，在于極大地提高了多樣化文化遺產(chǎn)的傳承與開發(fā)效率，營造出一個與文化遺產(chǎn)的物理性存在相對應的數(shù)字化視聽世界，從而為傳承和延伸人類文化遺產(chǎn)打開了新的自由天地。2010年上海世博會期間，時任聯(lián)合國教科文組織總干事伊琳娜·博科娃在世博園的聯(lián)合國館內(nèi)發(fā)布了聯(lián)合國成立以來第一份有關(guān)文化的報告：《著力于文化多樣性與文化間對話》。它指出：文化多樣性不僅僅是一種需要保護的資產(chǎn)，也是一種需要開發(fā)的資源。文化多樣性的源泉是創(chuàng)造性活動，而文化創(chuàng)造性恰恰體現(xiàn)了文化多樣性的活力。[注]聯(lián)合國教科文組織：《著力于文化多樣性和文化間對話》， http://ishare.iask.sina.com.cn/f/22/32644.html。

文化產(chǎn)業(yè)與其他制造業(yè)和服務業(yè)的最大差異之一，在于它以創(chuàng)造豐富的IP文化內(nèi)容為核心資產(chǎn)。這些IP文化內(nèi)容包括了人類世世代代所創(chuàng)造的價值觀念，又超越了真與善，在更高的意義上創(chuàng)造了美。由于文化的創(chuàng)造是一種積累的過程，所以，要創(chuàng)造出豐富的IP內(nèi)容，必須立足于對文化遺產(chǎn)的傳承，這就要解釋其中包含的文化密碼，從21世紀的時代高度去理解它，溝通它，豐富它，激活它，再創(chuàng)造出新的文化產(chǎn)品。

在地球上，文化信息的傳承和解碼是人類所獨有的一種本領(lǐng)。環(huán)顧地球上的大自然，除了人類以外，所有生物的機體都已經(jīng)高度特化了，長頸鹿能狂奔，雄鷹可飛翔，鯊魚能潛水，鱷魚能在混濁的河流中進行長時間的守候伏擊，刺猬和豪豬能變成一簇尖利的針。與動物相比，人類雖然沒有這樣的體能優(yōu)勢，但是人的思維具備高度的抽象性、概括力和創(chuàng)作力。人類在不同的時代和背景下發(fā)展出一套套有著嚴密邏輯和語法規(guī)則的符號體系，特別是創(chuàng)造了“故事”和“敘事”，這才使得人類有可能傳承極為豐富的文化信息。正如羅伯特· 歌德所說的：在地球上的生物中，唯有“我們用幻想服務于文化，因為人是唯一具有幻想的生物。人類是非常脆弱和易受打擊的動物，因而進化出了能夠運動我們獨特現(xiàn)象的能夠去創(chuàng)造假設的情景和自我中心的故事內(nèi)容。人類創(chuàng)造敘述故事和神話這是一種進化的觀念，沒有其他的任何動物擁有神話，神話故事定義了他們的意圖和目的，存在于人們心間”。[注]羅伯特· 歌德在上海國際文化裝備博覽會上的演講：《暢享未來：體驗、故事和魔法之諦》(Imagining the Future: Experience, Story and the Magic of Place)，2018年6月16日。

羅伯特· 歌德(Robert Gould)應用諾貝爾經(jīng)濟學獎得主丹尼爾·卡內(nèi)曼教授的格言指出：從品牌選擇、明星崇拜到節(jié)慶活動，“沒有一個人會因為一個數(shù)字做出一個決定，他們需要的是故事”。[注]2002年諾貝爾經(jīng)濟學獎得主丹尼爾·卡內(nèi)曼(Daniel Kahneman)在其2011年出版的《思考，快慢有別》(Thinking, Fast and Slow)(胡曉姣、李愛民、何夢瑩譯，中信出版社，2012年)中探討了人類有兩種不同思維方式。他指出：擁有一種自動反應的思維體系顯然是必要的。人類的祖先沒時間從基本原則中尋找解決生活挑戰(zhàn)的辦法。他們獲得了自動反應的本領(lǐng)，也形成了聽從經(jīng)驗法則的文化傾向。這兩種特質(zhì)都被現(xiàn)代人繼承了。因此，現(xiàn)代人會深刻地受到問題提出方式的影響。另一個特征是“確認偏誤”(confirmation bias)——即將新信息解讀為能夠支持已有觀點的傾向，還有“厭惡損失”(loss aversion)的傾向，即強烈抗拒失去人們已經(jīng)擁有的東西。對人類只能勉強維持生存的祖先來說，這種傾向非常明智。按照丹尼爾·卡內(nèi)曼的觀點，人類具有快和慢兩種思維模式：慢的模式訴諸理性和邏輯，快的模式訴諸經(jīng)驗和感覺。有鑒于此，盡管由于電腦和互聯(lián)網(wǎng)的普及，現(xiàn)代人可以調(diào)用和獲得海量的數(shù)據(jù)，但是在現(xiàn)代媒體的轟炸下，大部分人的感官和情感系統(tǒng)受到巨大的刺激，理智和邏輯能力發(fā)展并不明顯。當代人的文化習慣更關(guān)注對于消費主義、品牌故事、名人軼事、內(nèi)在欲望等做出快速的反應。所以，從文化消費的意義上看，人們越來越生活在一個情感和感覺驅(qū)動的文化當中，偏好欲望而不是數(shù)據(jù)、理性和事實。有鑒于此，在文化消費的領(lǐng)域中，要把對于人類彌足珍貴的文化遺產(chǎn)挖掘出來，必須立足于對于遺產(chǎn)的探索和理解，依托世世代代傳承的基因密碼，創(chuàng)造出新的敘事和故事，才能在溝通現(xiàn)代人心靈的意義上，把文化遺產(chǎn)轉(zhuǎn)化成為可投資、可流通、可轉(zhuǎn)化、可增值的文化資產(chǎn)。

正因為人類文化具有信息特性，巖畫碑刻、青銅銘文、活字印刷、數(shù)字視頻、全息投影、數(shù)字音頻才得以相繼出現(xiàn)并發(fā)揮作用，為人類傳遞和處理文化信息開辟了越來越廣闊的未來。但是，以數(shù)字技術(shù)為基礎的新視聽技術(shù)對文化遺產(chǎn)傳承的貢獻，與傳統(tǒng)意義上物理形態(tài)的遺產(chǎn)修復和形態(tài)復原是不一樣的。新視聽以電子文本、音頻、視頻、光效等數(shù)字物為特征。中國學者李三虎指出：“數(shù)字物不同于自然物而屬于技術(shù)人工物，可以被稱為‘數(shù)字人工物’?！盵注]李三虎：《從物性視角看數(shù)字世界》，載《中國社會科學報》，2018年11月6日第4版。他指出：數(shù)字物可還原為0和1的二進制數(shù)字表達和運算，屬于非物質(zhì)性技術(shù)人工物，不同于傳統(tǒng)技術(shù)人工物(如建筑物、雕塑、建筑、書本、書畫等)，所以還可以被稱為“數(shù)字客體”。這種對數(shù)字物的本體論的界定和區(qū)分，把數(shù)字世界展示為一種符號化的非物質(zhì)軟體世界。采用新視聽技術(shù)對各類文化遺產(chǎn)進行掃描、模仿、再造、衍生開發(fā)而形成文化產(chǎn)品和文化服務，其豐富的寓意與符號價值，就是一種符號化的非物質(zhì)形態(tài)。它遠比文化遺產(chǎn)或者復制品自身的實用功能要來得顯著。

從文化遺產(chǎn)的角度看，構(gòu)成樂山大佛和敦煌石窟的巖石、山體、廟宇等是典型的物質(zhì)實體，同時又凝聚和物化了前人巨大的智慧和技巧，達到一種極高的創(chuàng)造境界。而數(shù)字物就其本質(zhì)而言，是通過二進制數(shù)字語言表達的“元數(shù)據(jù)”系統(tǒng)，并不是傳統(tǒng)意義的物質(zhì)存在。根據(jù)李三虎先生的研究，如大腦和紙張是語言符號的承載物一般，數(shù)字物的“元數(shù)據(jù)”要依托電腦、屏幕、視頻播放設備等才能存在，成為一種依賴特定物質(zhì)關(guān)聯(lián)環(huán)境的“準客體”(quasi-object)[注]李三虎：《從物性視角看數(shù)字世界》，載《中國社會科學報》，2018年11月6日第4版。。當我們使用智能手機、平板電腦、巨型LED屏、環(huán)幕電影等數(shù)字化媒介觀看以數(shù)字化手段復原、再造的《清明上河圖》《富春山居圖》和《蒙娜麗莎》時，便已經(jīng)擁有了一種與集成電路邏輯運算相關(guān)聯(lián)的物質(zhì)性網(wǎng)絡環(huán)境。如果拋開這一物質(zhì)關(guān)聯(lián)環(huán)境，人類便無法感知到數(shù)字物的獨立存在。反過來說，當人類建立起一個數(shù)字化手段復原、再造文化遺產(chǎn)的視聽形態(tài)時，就形成了一個可以無限延伸、疊加、變化和進入的符號化非物質(zhì)世界，也可以用訴諸理性和訴諸經(jīng)驗的知覺，更加深刻地影響大部分人。新視聽技術(shù)對遺產(chǎn)傳承和開發(fā)的貢獻集中在以下方面(見圖2)：

圖2新視聽技術(shù)對遺產(chǎn)傳承開發(fā)的貢獻

第一，立足新視聽和相關(guān)預感、測繪、圖像、人工智能等技術(shù)，可以建立基于3S(GPS，RS，GIS)技術(shù)和大數(shù)據(jù)技術(shù)的文化遺產(chǎn)和考古工地數(shù)字化平臺與重要遺跡采集系統(tǒng)，能夠把文化遺產(chǎn)的物理性質(zhì)全部轉(zhuǎn)化成為系統(tǒng)化的數(shù)據(jù)，并且根據(jù)這些數(shù)據(jù)可以重構(gòu)符號化的文化遺產(chǎn)形態(tài)，為永續(xù)保存、科學研究和視聽再現(xiàn)提供了最重要的條件?，F(xiàn)代的考古調(diào)查、勘探、發(fā)掘、整理的過程是一個信息不斷揭露、豐富、整理和丟失的過程。在這個過程中，采集遺產(chǎn)的空間信息之手段的不足是一個迫切需要解決的問題，而各種考古信息資源的流通與整合缺乏效率，也是一個極大的挑戰(zhàn)。近年來，快速發(fā)展的基于3S技術(shù)和大數(shù)據(jù)技術(shù)的文化遺產(chǎn)和考古工地數(shù)字化平臺與重要遺跡采集系統(tǒng)，采用基于GPS、北斗等的考古測量儀、低空無人機智能化遙感測繪平臺、自主三維激光掃描儀、激光全景等技術(shù)，可以開展文化遺址保護、調(diào)查、勘探、發(fā)掘過程中的圖形測繪及相關(guān)的全景和視頻記錄工作。近年來，對敦煌莫高窟壁畫和雕塑的數(shù)字化空間和影像采集，就在這方面取得了重要進展。

第二，立足新視聽和相關(guān)技術(shù)，可以對文化遺產(chǎn)中蘊含的智慧密碼進行深度解讀，并且用全新的視聽形象，把文化遺產(chǎn)的價值在更加廣闊的視野中展現(xiàn)出來。前人對這些遺產(chǎn)的探索，是在不同的專業(yè)領(lǐng)域中進行的，而今天我們可以在更高的層面上把這些研究成果進行整合。比如英國布萊頓大學媒體藝術(shù)科技學院的克麗·斯諾克(Kelly Snook)教授在有關(guān)技術(shù)創(chuàng)新整合音樂與科學的研究成果中，以全新的視角審視了科技與音樂制作之間的關(guān)系。[注]克麗·斯諾克(Kelly Snook)：《通過技術(shù)創(chuàng)新整合音樂與科學》(Reuniting Music and Science Through Technology Innovation)，在2017年文化科技創(chuàng)新論壇(CTIS 2017)上的演講，2017年10月。她提出一個深刻而有趣的問題：你可以通過演奏樂器來回答一個歷經(jīng)400年的宇宙奧秘問題嗎？390多年前，偉大的科學家約翰內(nèi)斯·開普勒提出了改變?nèi)祟悮v史、具有歷史意義的頓悟，即三大行星運動定律，而成為現(xiàn)代天文學之父之一。但是大多數(shù)人并不知道：這些定律是與約翰內(nèi)斯·開普勒根據(jù)音樂和聲原理驅(qū)動的調(diào)查分不開的。他相信所有創(chuàng)造的真實原型都隱藏在宇宙的和諧關(guān)系中。從本質(zhì)上說，音樂與數(shù)學、天文學一樣，是一種探索現(xiàn)實世界、發(fā)掘大自然規(guī)律的工具，是具有嚴密邏輯和智慧延伸的符號系統(tǒng)。音樂以藝術(shù)的形式表現(xiàn)大自然的規(guī)律、人類的情感以及生活，使用數(shù)學的想法，將復雜的數(shù)學方程式、研究方案與音樂的聽覺、視覺表達進行關(guān)聯(lián)，就可以產(chǎn)生互動，幫助人類對自然的進一步探索。有鑒于此，克麗·斯諾克教授和相關(guān)的研究團隊，正在努力開發(fā)一個“開普勒協(xié)和弦樂器項目”。它將是一個虛擬的沉浸式體驗，使用先進的虛擬現(xiàn)實和增強現(xiàn)實來構(gòu)建一個科學準確的、交互式的、用音樂表達的太陽系模型。通過音樂探索數(shù)學，人們不僅可以看到和聽到天體本身，而且可以探索與天體相關(guān)的美麗而復雜的幾何圖案，從而更加深刻地理解約翰內(nèi)斯·開普勒的偉大貢獻，也有助于現(xiàn)代人站在巨人的肩膀上，去探索更加深邃的宇宙奧秘。

第三，立足新視聽和相關(guān)技術(shù)，可以通過對文化遺產(chǎn)的紀錄、分析、理解、重構(gòu)等，創(chuàng)作出包含傳統(tǒng)文化基因的新故事和新敘事，建立全新的意義結(jié)構(gòu)。它可以形成人與人、人與動物、人與自然的新關(guān)聯(lián)，重新解釋人類痛苦和喜悅的原因，從而把傳承與創(chuàng)造、歷史遺產(chǎn)與新創(chuàng)內(nèi)容的IP更加緊密地聯(lián)系起來。比如2017年第74屆威尼斯電影節(jié)是全世界第一屆將VR電影納入競賽單元的世界級電影節(jié)，競賽單元的VR電影由美國電影《阿登的覺醒》獲得。第74屆威尼斯電影節(jié)亞太電影藝術(shù)單元最佳未來影像和最佳沉浸影片雙項金獅獎的VR電影《小涼帽傳奇·白鷺歸來》，就是一個傳承非物質(zhì)文化遺產(chǎn)與重建創(chuàng)意敘事的生動案例。而《小涼帽傳奇·白鷺歸來》的IP核心內(nèi)容來自深圳客家小鎮(zhèn)——甘坑村和涼帽村。300多年前，客家人從中原遷徙集聚到這一帶，通過世世代代的綿延生息，積累了大量的遺產(chǎn)，其中就包括具有鮮明客家特點的涼帽。由于深圳氣候炎熱，客家女性的帽子采用竹編帽圈和紗布帽簾，以便遮擋陽光和熱量的輻射。這種帽子透氣性良好，帽子中空而無頂，不是為了擋雨，而是為了納涼。1950年代，甘坑村一帶的客家人向東南亞制作涼帽出口，占全國涼帽出口量的70%左右。2016年，華僑城集團參與了對該區(qū)域的改造，對保留的100多間客家老屋進行修繕，重塑甘坑客家小鎮(zhèn)。在這個傳承和重建的過程中，華僑城的專業(yè)人員依托涼帽這一文化遺產(chǎn)，導入了IP Town戰(zhàn)略。這個創(chuàng)意項目以涼帽為核心視覺元素，傳承了客家人“天人合一，耕讀傳家”的傳統(tǒng)，以“白鷺回來了”為生態(tài)文明的主題，將小涼帽繪本故事“白鷺回來了”的主題元素與視聽設計結(jié)合，建設一座親近自然的、場景浸入式的全國首個本土原創(chuàng)IP親子農(nóng)莊。它包括線上數(shù)字繪本、動畫電影、VR電影《小涼帽傳奇·白鷺歸來》和相關(guān)的旅游服務，獲得了很好的效益，不到一年時間，甘坑客家小鎮(zhèn)吸引到大批游客，在周末達到2萬～3萬人，是導入IP主題內(nèi)容之前的10倍以上。

四、 新視聽技術(shù)對文化體驗的拓展

新視聽技術(shù)對于文化產(chǎn)業(yè)的重要拓展，是創(chuàng)造了各種文化體驗的新業(yè)態(tài)，開創(chuàng)了沉浸式體驗+等豐富的文化消費空間。它通過全景式的視、聽、觸、嗅、震動等感覺的交互體驗，包括利用VR設備的幫助，使人有一種“身臨其境”“全身包裹”的感覺。沉浸式體驗使人的每一種感覺，都與周邊環(huán)境有了敏感的感應和互動。這些新技術(shù)的應用，使人類進入到“時空的穿越”和“虛擬的世界”。以沉浸式體驗為核心的電影、展覽、演藝、游戲、娛樂等，成為深受各年齡人群喜愛的一種文化藝術(shù)形態(tài)。它重新定義了創(chuàng)作者與消費者的關(guān)系，更加自由地表達創(chuàng)意(故事的創(chuàng)意、觀演關(guān)系的創(chuàng)意、新技術(shù)的創(chuàng)意應用等)，利用情境、沉浸、角色、氣氛、情節(jié)、光影的效果，讓觀眾和聽眾融入故事之中。

有關(guān)生物科學的研究表明：人類所感覺的世界是由人的器官與外界接觸后形成的生物電流信號，并在自己的大腦中合成與創(chuàng)造(Reality is created by mind)。人類所看到的東西，并不一定都是物理的現(xiàn)實。首先，很多物理層面的現(xiàn)實，是人類的感覺器官無法捕捉到的，例如，人類看不到紅外線，聞不到一氧化碳，聽不到超低的音頻訊號。人們接收到的感官刺激的質(zhì)量——天空的顏色、玫瑰的香味、砂紙的觸感、合成器所形成的低頻音響——對每個人來說并非完全一樣。因此，人類不滿足于已經(jīng)獲得的感官，而要去探索遙遙無盡頭的“視聽新邊疆”。有鑒于此，新視聽技術(shù)創(chuàng)造的沉浸式體驗，讓人類擁有了更加豐富多彩的現(xiàn)實形態(tài)，從而極大地拓展了人類的感覺體驗。當這種沉浸式體驗被有目的地設計和制作出來時，就成為滿足人類需求的一種文化創(chuàng)意和文化服務，形成了“沉浸式+”的豐富文化消費形態(tài)(見圖3)。

圖3“沉浸式+”促進文化產(chǎn)業(yè)的新業(yè)態(tài)

文化產(chǎn)業(yè)領(lǐng)域中的沉浸式體驗，不但提供給人類豐富的視聽消費，也讓人類更加認真地去思考人與客觀世界的關(guān)系，去探索人與自然的本質(zhì)關(guān)系。它與商業(yè)、旅游、生態(tài)、校園等空間的結(jié)合，也賦予這些空間以豐富多彩的藝術(shù)內(nèi)涵。

沉浸式展覽它讓人們一旦步入展廳便被奇妙的視聽感受所包裹，也讓觀眾更加強烈地去思考: 人的感官邊界是什么？我們能夠憑借感覺去把握客觀世界嗎？宇宙的時間和空間在哪里是起點和盡頭呢？人類能夠把握以光年為計算單位的巨大空間和時間嗎？如日本設計師草間彌生設計的“無限鏡屋——數(shù)百萬光年以外的靈魂”，在一個室內(nèi)面積約25平方米，凈高約2.43米的封閉空間內(nèi)，依托鏡子無限反射的紅白波點，形成了一個讓人置身其中迷失方向和時間的空間。而“雨屋”的神奇之處便在于智能化的“控雨”，讓觀眾走進雨中，卻不會淋濕。這一如同“雨神”的智能掌控效果，吸引無數(shù)觀眾紛至沓來；至于“飛躍邊界的蝴蝶”(Flutter of Butterflies Beyond Borders)與“花與人”(Flowers and People)，把兩個主題巧妙地結(jié)合在一起展出。觀眾步入這個空間，腳下會“生長”出一片晶瑩璀璨的花草，還可以通過下載APP來控制“水晶宇宙”(Crystal Universe)的顏色和形態(tài)。

沉浸式設計它常常對于古典藝術(shù)的經(jīng)典構(gòu)圖和視聽效果進行再造，從而表達新的敘事主題。正如國際多媒體協(xié)會聯(lián)盟主席哈威·費舍爾在《數(shù)字沖擊波》中指出的：“藝術(shù)和文學一樣，都是關(guān)于物像，否則就不算藝術(shù)。物像在我們看來就是視覺的濃縮，象征著一種美感或者主題，是所屬社會的制度、價值和主要參照體系?！庇需b于此，我們迫切需要在數(shù)字影像的大潮流中重建視聽的美感主題。[注]哈威·費舍爾：《數(shù)字沖擊波》，黃淳等譯，旅游教育出版社，2009年，第109頁。2018年第二屆倫敦設計雙年展的主題就采用了“情感狀態(tài)”，美國設計師R. Luke DuBois 和 Zachary Lieberman制作的《面部價值》(FaceValues)，采用了一個貌似航空港、火車站常見的自助拍攝和打印證件照的機器。它可以紀錄觀眾的面部表情，并且將其展現(xiàn)在屏幕上。而觀眾可以用表情來控制裝置的聲音和圖像。在這里，平時被機器監(jiān)控、分析的人臉成了控制者。人在與機器交互的過程中，可以顛覆畢達哥拉斯建筑學派有關(guān)黃金分割的傳統(tǒng)，調(diào)動五官而做出更加豐富的表情，使人的臉部具有更高的價值。這些表情通過裝置被記錄下來，最終呈現(xiàn)出一幅連續(xù)的情緒作品。這個設計得到了2018年該雙年展的“情緒狀態(tài)獎”。

沉浸式藝術(shù)秀它常常以再現(xiàn)歷史上經(jīng)典場景、經(jīng)典作品的形式而出現(xiàn)，又賦予這些視聽場景以新的寓意和內(nèi)涵。正如馬克思在《〈政治經(jīng)濟學批判〉導言》中所說：希臘藝術(shù)“能夠給我們以藝術(shù)享受，而且就某一方面說還是一種規(guī)范和高不可及的范本”，“希臘人是正常的兒童，他們的藝術(shù)對我們所產(chǎn)生的魅力，同這種藝術(shù)在其中生長的那個不發(fā)達的社會階段并不矛盾”，并且會“作為永不復返的階段而顯示出永久的魅力”。[注]馬克思：《〈政治經(jīng)濟學批判〉導言》，徐堅譯，人民出版社，1964年。而依托新視聽技術(shù)所創(chuàng)作的沉浸式藝術(shù)秀，在更高的水平上恢復了當代人與歷史記憶和經(jīng)典作品的內(nèi)在聯(lián)系。比如在成都安仁古鎮(zhèn)，一場名為《今時今日安仁》的大型沉浸式演出，在4個相互打通的百年民國公館內(nèi)展開。它通過裸眼3D、全息、多媒體影像、光影秀等新視聽技術(shù)，讓觀眾在行走和體驗中了解一段安仁古鎮(zhèn)的民國傳奇。它將多媒體、虛擬現(xiàn)實、三維實境等高科技手段與傳統(tǒng)演出相結(jié)合，還設置了民國照相館、復古理發(fā)店、洋帽藝術(shù)展等交互展覽，讓觀眾更加真切地體會到：我們從哪里來，又會到哪里去。

沉浸式旅游它突破了經(jīng)典的旅游定義“異地和短期的生活”，而發(fā)展成為“穿越時間和空間的短期生活”，讓游客獲得在不同時間和空間的穿越式體驗。比如2017年4月，首部漂移型沉浸式體驗劇《知音號》在長江上的一艘游輪上演出，它以20世紀初漢口的商業(yè)故事為主線，從知音號碼頭露天部分拉開序幕。它為游客設置了“九省通衢”之地的老碼頭實景體驗，包括從漢口富商、碼頭工人到湖廣民俗的豐富場景，讓游客穿越到近100年前的江漢春天。游客隨后將登上一艘具有1920—1930年代風格的蒸汽輪船，分層移步觀看觸及心靈的武漢故事。這一部沉浸式演出不分觀眾區(qū)和表演區(qū)，每一個角落都發(fā)生過、發(fā)生著或即將發(fā)生不可預知的故事，而游客恰恰就是故事和視聽的一部分。

沉浸式劇場演出它突破了傳統(tǒng)意義上的劇場格局，形成一種全景包裹的視聽氛圍，而讓觀眾也成為劇場和演出的一部分。比如世博會信息通信館的“五合一沉浸式夢幻劇場”，通過正前方一塊21米高、11米寬的弧形超大熒幕、頭頂上32塊“神奇屏幕”，配合下雪、座椅震動、渦流效應等特技效果，再加上氣勢恢宏的音響，包括了聽覺、視覺、觸覺、嗅覺、味覺，以多立體互動體驗，為更加豐富的主題敘事創(chuàng)造了條件。2016年，英國沉浸式演出經(jīng)典劇目《不眠之夜》(SleepNoMore)在上海舉行亞洲首演，2017年，從英國引進的《愛麗絲冒險奇遇記》也獲得好評。它們打破了傳統(tǒng)劇場的規(guī)則，讓觀眾自由地穿梭在史詩般的故事中，選擇自己所到之處和所見之景，讓每一位觀眾獲得獨一無二的體驗歷程。英國Punchdrunk劇團作為浸沒式戲劇的先驅(qū)，在16年間一共出品了16部浸沒式戲劇。其中最成功的就是SleepNoMore。該劇取材于莎士比亞的名著《麥克白》，而“Sleep No More”的主題則來源于麥克白在殺死鄧肯國王后的一句對白：“I heard a voice cry，Sleep no more！Macbeth does murder sleep”(我聽見一聲呼喊：“醒來??！麥克白，把睡意趕走”)。在這個9300多平方米的5層空間內(nèi)，每一個場景都逼真到極致，陰郁的空氣讓人窒息，讓觀眾在看完之后Sleep No More。

沉浸式體驗+商業(yè)綜合體它把沉浸式體驗植入各類商業(yè)綜合體，把商業(yè)空間轉(zhuǎn)化成為富有藝術(shù)魅力的文化空間，把文化意義的豐富性、審美設計的獨創(chuàng)性和空間功能的有效性有機融合在一起，讓寶貴的城市空間注入更豐富、更精彩的文化元素。2018年11月，《致敬達·芬奇》沉浸式光影大展在上海環(huán)球金融中心4樓開幕，為這座金融商業(yè)大廈帶來了新的藝術(shù)元素。它以沉浸式的視聽效果表達了達·芬奇?zhèn)髌姘愕某晒?。達·芬奇不僅是一位全能型的藝術(shù)家，也是一位深邃的哲學思想家。他懷著永無休止的探索精神去研究自然和人生的一切奧秘，把藝術(shù)、科學與自然完美結(jié)合，在繪畫、雕塑、工程、軍事、建筑、機械、城市規(guī)劃、人體解剖等領(lǐng)域都做出了巨大的貢獻，把文藝復興的成就推向一個前所未有的新高度。這次展覽是繼精彩美妙的“Klmit”(克里姆特光影展)之后，意大利CROSS MEDIA團隊的又一創(chuàng)意精品，也是由意大利達·芬奇博物館發(fā)起的“紀念達·芬奇逝世500周年”系列活動之一。它采用了光影結(jié)合、激光投影、VR、5D等先進視聽和高科技手段，為觀眾呈上了一場沉浸式藝術(shù)的盛宴。它以20余件根據(jù)達·芬奇手稿復原的機械實物，包括振動翼飛機、坦克、自行車、明輪船、風速計、浮橋等，展現(xiàn)了達·芬奇的才思與創(chuàng)意。它還包括一個5D影院：以一部動畫影片講述了達·芬奇創(chuàng)作蒙娜麗莎的奇妙故事，觀眾們可以在觀看動畫電影的同時，感受燈光、聲音、水、風和吹泡泡相結(jié)合的特效，在沉浸式的體驗中接觸到達·芬奇的美妙世界。

2018年，英國國家科研與創(chuàng)新署(UKRI)及隸屬的英國藝術(shù)與人文研究理事會出資1000萬英鎊打造“未來故事學院”(The Story Future Academy),重點支持沉浸式敘事的前沿創(chuàng)意培訓和研究計劃。這一計劃顯示了英國高度重視集成大量先進科技和創(chuàng)意成果的沉浸式敘事項目，也希望在這一領(lǐng)域形成領(lǐng)先的優(yōu)勢。這正如歐洲事務公司在《文化型創(chuàng)意的影響》報告中指出的：要發(fā)揮文化創(chuàng)新的活力效應，形成良好的跨界合作模式，把創(chuàng)意、設計、藝術(shù)、工程、商貿(mào)、教育、旅游等多個專業(yè)部門組合起來，這種跨界合作就是創(chuàng)新活力的激發(fā)源泉。[注]KEA European Affairs, The Impact of Culture on Creativity, Study Prepared for the European Commission, Directorate General for Education and Culture, Brussels,2009.文化產(chǎn)業(yè)視野中的新視聽技術(shù)也必將在多學科的跨界合作中獲得更加廣闊的發(fā)展空間。