從虛擬現(xiàn)實(shí)到空間建構(gòu)
——談視覺新聞的沉浸式創(chuàng)新

■

沉浸式技術(shù)主要包括虛擬現(xiàn)實(shí)（VR）、增強(qiáng)現(xiàn)實(shí)（AR）和混合現(xiàn)實(shí)（XR/MR）三大類，它正在改變?nèi)祟愱P(guān)于創(chuàng)造、娛樂、學(xué)習(xí)、交流與互動的方式。咨詢公司Gartner 在2020 年全球十大技術(shù)趨勢分析報告中將沉浸式技術(shù)歸入“復(fù)合體驗(yàn)”，①有的研究機(jī)構(gòu)則用“擴(kuò)展現(xiàn)實(shí)技術(shù)”來定義。這些不同的觀點(diǎn)表明沉浸式技術(shù)在應(yīng)用邊界上具有融合媒介的特征。

今天，數(shù)字媒體很大程度上依然是印刷原版的在線形式，其中包括大量的音頻和視頻新聞。盡管沉浸式技術(shù)尚未真正成為主流，但是隨著5G 的到來，這種情況可能很快會發(fā)生改變。用戶在5G 網(wǎng)絡(luò)環(huán)境中越來越能夠“體驗(yàn)”新聞，而不僅僅是閱讀或觀看新聞。5G 通信的高速率、低延遲和廣連接的特點(diǎn)，將在新聞傳播領(lǐng)域催生手機(jī)虛擬現(xiàn)實(shí)，與AR軟件相連的智能眼鏡以及其他新的媒介形態(tài)。

VR新聞：增強(qiáng)數(shù)字新聞報道的現(xiàn)場體驗(yàn)

VR 是虛擬現(xiàn)實(shí)的縮寫，是沉浸式技術(shù)目前應(yīng)用相對廣泛的領(lǐng)域。它通過為用戶提供一個完全封閉的數(shù)字環(huán)境，主要是用計算機(jī)圖形（CG）或360 度視頻來替換用戶的真實(shí)所在，從而使得用戶感覺進(jìn)入了遠(yuǎn)程環(huán)境。雖然學(xué)界對于360 度視頻是否應(yīng)納入虛擬現(xiàn)實(shí)一直存在爭議，但是從產(chǎn)業(yè)和科技的角度來看，360VR與CG VR可以使用統(tǒng)一的頭盔、眼鏡和顯示技術(shù)，只是觀看內(nèi)容在制作技術(shù)上有所區(qū)別，因此360度視頻也應(yīng)當(dāng)視為VR的一種。

美國有線電視新聞網(wǎng)（CNN）為VR視頻專門開設(shè)了獨(dú)立的頻道，選題多為重要的專題報道，大部分采用360 度視頻VR 呈現(xiàn)，無法拍攝的則采用CGVR。以“超越地球”VR短片為例，在登月50周年后，CNN通過動畫VR進(jìn)行跨時空之旅，探索太空中人類的未來。制作團(tuán)隊包括19 名成員，由制作人、創(chuàng)意總監(jiān)、藝術(shù)總監(jiān)、動畫師、插畫師、聲音設(shè)計師和研究人員構(gòu)成。2019 年CNN 重要的VR 報道還有“切爾諾貝利禁區(qū)探索”“諾曼底登陸75 周年紀(jì)念”“探索加州迪士尼樂園星戰(zhàn)基地”等。CNN 除了在重大報道中運(yùn)用VR 之外，還會以VR 短片的方式在社交媒體上進(jìn)行傳播。2018 年12 月，CNN 記者威爾·里普利用VR 來記錄、展示朝鮮平壤的學(xué)校餐廳、運(yùn)動場、展覽館、廣場、商店和住宅小區(qū)，這部不到5 分鐘的“An Ordinary Day in North Korea（朝鮮普通一日）”短片在YouTube 上獲得了8 萬次的點(diǎn)擊量，視頻中出現(xiàn)的人物面孔都作了模糊處理。

新聞業(yè)一直在探索講故事的方式。VR 作為一種新型的敘事工具，成為媒體實(shí)現(xiàn)深度融合的重要途徑。VR 也可以與其他的影視器材協(xié)同工作，例如360 度全景攝影機(jī)、360 度全景錄音機(jī)、支持VR 設(shè)備安裝的無人機(jī)等。在后期編輯制作中，近兩年新推出的外置顯卡的運(yùn)算加速方式，為VR 視頻編輯提供了便利。現(xiàn)在的VR 報道一般都會提前剪輯，主流的制作軟件也支持VR 字幕和配音功能。VR 新聞的交互設(shè)計和用戶導(dǎo)航在制作中較為復(fù)雜，CGVR的制作成本高昂，制作周期較長。從應(yīng)用角度來看，360VR視頻更適合新聞媒體進(jìn)行虛擬現(xiàn)實(shí)的探索。

近年來VR 在我國的教育領(lǐng)域也有飛速發(fā)展，大量VR 課程作為仿真訓(xùn)練進(jìn)入職業(yè)類院校。VR 和黨建的融合也開創(chuàng)出我國獨(dú)有的應(yīng)用形式，通過對黨建基地的實(shí)景、博物館、紀(jì)念館等數(shù)字化采集，可以讓黨員以VR 的方式進(jìn)行紅色經(jīng)典、紅色人物和廉政教育的學(xué)習(xí)。

根據(jù)互聯(lián)網(wǎng)數(shù)據(jù)中心最新發(fā)布的《全球增強(qiáng)與虛擬現(xiàn)實(shí)支出指南》②顯示，至2020 年，全球AR/VR 市場相關(guān)支出規(guī)模將達(dá)到188 億美元，較2019 年同比增長約78.5%。2020 年中國市場的AR/VR 技術(shù)投資將達(dá)到57.6 億美元，占比超過全球市場份額的30%，成為支出規(guī)模第一的國家。VR 產(chǎn)業(yè)目前的主要問題在于缺乏優(yōu)質(zhì)內(nèi)容，這從側(cè)面反映出我國的數(shù)字文化建設(shè)任重道遠(yuǎn)。好內(nèi)容能夠直接帶動VR 硬件產(chǎn)品銷售，進(jìn)而推進(jìn)業(yè)態(tài)升級與技術(shù)更新。

虛擬現(xiàn)實(shí)新聞（VR 新聞）作為一個正式的概念逐漸被國際新聞業(yè)所接受。沉浸感與存在感是VR 新聞的核心，沉浸感越強(qiáng)，用戶在數(shù)字虛擬環(huán)境中的存在感越強(qiáng)?！俺两痛嬖?，兩者都試圖通過一種虛擬系統(tǒng)來描述人們正在經(jīng)歷另一種現(xiàn)實(shí)的感覺”。③這會帶來用戶與新聞主體之間的距離縮小，而觀眾成為見證者。體驗(yàn)另一種感覺對新聞應(yīng)用至關(guān)重要。

VR 新聞提出了一種新的技術(shù)和敘述方式，從拍攝記錄、編輯制作，觀看終端和交互設(shè)計，都需要重新設(shè)計與整合。記者在報道中可能是隱身的，記者也需要重新定義自己在新聞故事中的角色與存在，而觀眾將以一種內(nèi)在的、體驗(yàn)式的方式進(jìn)入“新聞現(xiàn)場”。報紙、廣播、電視和社交媒體使我們了解他人的描述與體驗(yàn)，而VR 則可能走得更遠(yuǎn)，也可以讓觀眾產(chǎn)生更大的共鳴。

AR新聞：構(gòu)建空間新聞的立體信息呈現(xiàn)

VR 是用模擬環(huán)境完全取代用戶的實(shí)際環(huán)境，而AR 則是持續(xù)保持人們對于現(xiàn)實(shí)環(huán)境的感知。AR 是對用戶的真實(shí)世界進(jìn)行數(shù)字信息覆蓋，主要有三種功能：真實(shí)世界與虛擬世界的組合；實(shí)時交互；虛擬與真實(shí)物體的精確3D匹配。AR疊加的信息可以是累加的，也可以是遮擋的。AR 數(shù)字體驗(yàn)與現(xiàn)實(shí)世界無縫交織，因此被視為基于真實(shí)環(huán)境的沉浸應(yīng)用。

AR 也是一種融合沉浸，人成為系統(tǒng)的自然組成部分。AR 數(shù)字信息疊加的方式與平面設(shè)計軟件中的“層”很相似，卻更加復(fù)雜和靈活，也不再局限于2D 平面。對于游戲而言，AR 可以把游戲平移到現(xiàn)實(shí)環(huán)境之中，用戶可以利用地理位置技術(shù)在真實(shí)環(huán)境內(nèi)與虛擬角色進(jìn)行對抗。這種方式有許多用途，包括博物館、展會及藝術(shù)活動。事實(shí)上，AR新聞也借鑒吸收了某些游戲的體驗(yàn)與觀念。

AR 帶給新聞業(yè)最大的突破，是重新建構(gòu)和塑造新聞與延展信息的關(guān)系。AR 技術(shù)能夠在3D 空間以立體的視角重新定義新聞的呈現(xiàn)方式。與傳統(tǒng)新聞和VR 新聞不同的是，AR 新聞引入了以用戶為導(dǎo)向的空間動力（spatial dynamics），并引導(dǎo)用戶進(jìn)入了新的體驗(yàn)境界。因此，空間新聞（spatial journalism）未來將成為新聞業(yè)的前沿領(lǐng)域。

雖然電影、電視能夠通過構(gòu)圖和景深在屏幕上表現(xiàn)空間的透視感，但是它無法將觀眾帶入其中，屏幕依然是基于平面顯示技術(shù)的視覺載體?？臻g新聞一直受到技術(shù)平臺、高昂的制作成本和漫長的制作周期的限制，而AR 技術(shù)近年來的進(jìn)展可以讓新聞故事在3D 空間內(nèi)快速呈現(xiàn)。AR 不僅是用全息圖方式展示新聞，還能將觀眾帶入3D地圖、舞臺、交互式數(shù)據(jù)分析，甚至是火星登陸。

AR 驅(qū)動的空間新聞可能開啟了一個具有深遠(yuǎn)意義的新聞時代。人類的記憶高度依賴于空間理解。記憶宮殿（memory palace）這個概念說明了古代希臘人是如何通過空間來增強(qiáng)記憶的。在古代羅馬人的修辭學(xué)著作中最早出現(xiàn)了記憶宮殿的描述，這項(xiàng)記憶技術(shù)的基本思想是將信息片段與自身非常熟悉的空間位置相關(guān)聯(lián)。當(dāng)回想起這些信息時，個體會經(jīng)歷一條空間化的思維路線。在2017 年《經(jīng)濟(jì)學(xué)人》雜志發(fā)表其“食品的未來”一文時，使用Snapchat 和Snap 代碼，在僅僅通過手機(jī)應(yīng)用的情況下大規(guī)模展示了AR 的效果，圍繞報道中涉及食品展開的圖形、數(shù)據(jù)和圖表，觀眾均可以用手機(jī)看到。蘋果公司在2018年發(fā)布了Quick Look，用戶能夠直接從瀏覽器中啟動AR 中的3D 對象。而《紐約時報》的AR 報道“亞馬遜：垂死的森林”，則可以將森林、數(shù)據(jù)和圖片通過手機(jī)與眼前的地板或?qū)懽肿缹?shí)時合成，并保持一致的3D 透視關(guān)系。

AR 技術(shù)的每次進(jìn)步都會帶動新聞媒體緊隨其后，進(jìn)行新的實(shí)驗(yàn)與嘗試。2020年，科技公司North 計劃發(fā)布的AR 眼鏡，將手機(jī)信息投射于鏡片上，將AR 應(yīng)用繼續(xù)向前推進(jìn)。

XR/MR 是VR 和AR 的混合體，將虛擬人物、道具、場景與現(xiàn)實(shí)世界融合，以產(chǎn)生新的可視化效果，數(shù)字角色或物體與真實(shí)環(huán)境實(shí)時共存和交互。與VR 和AR 相比，XR/MR形態(tài)多樣，在終端上也更加多樣化，不局限于眼鏡或頭盔，例如洞穴虛擬環(huán)境（CAVE）、平視顯示器（HUD）、頭戴式顯示器（HMD）、平板電腦等都屬于混合現(xiàn)實(shí)的終端范疇。XR/MR目前主要用于藝術(shù)創(chuàng)作與展示、高風(fēng)險工作培訓(xùn)以及執(zhí)法、軍事等特種訓(xùn)練領(lǐng)域。

5G推動沉浸式技術(shù)進(jìn)一步發(fā)展

5G 通信網(wǎng)絡(luò)的下載速度是4G 的10-20 倍，④這將會推動沉浸式技術(shù)的進(jìn)一步發(fā)展。虛擬現(xiàn)實(shí)、增強(qiáng)現(xiàn)實(shí)和混合現(xiàn)實(shí)的應(yīng)用，在設(shè)備便攜化、價格經(jīng)濟(jì)化和體驗(yàn)流暢化三方面將發(fā)生明顯改善。要特別增強(qiáng)VR 優(yōu)質(zhì)內(nèi)容的開發(fā)，新聞媒體也可以通過新創(chuàng)科技持續(xù)推動用戶對于重要主題和事件的關(guān)注，這些都會帶動相關(guān)產(chǎn)業(yè)的發(fā)展。

5G、點(diǎn)云與可穿戴設(shè)備等新興技術(shù)的進(jìn)步將進(jìn)一步影響新聞業(yè)。5G將使海量數(shù)據(jù)幾乎實(shí)時下載到終端設(shè)備。新聞記者如果正在拍攝360度視頻，那么用戶幾乎可以同時以沉浸的方式進(jìn)行觀看，就如同在現(xiàn)場一樣。點(diǎn)云是真實(shí)世界的數(shù)字化映射，這會使得用戶以混合現(xiàn)實(shí)的方式共享經(jīng)驗(yàn)。可穿戴設(shè)備的影響目前還很難預(yù)測，當(dāng)相機(jī)能夠進(jìn)行較為精確的距離深度感應(yīng)時，視覺新聞沉浸式創(chuàng)新的下一個變革才會真正到來。

（作者系中國傳媒大學(xué)新聞學(xué)院副教授）

注釋：

①《Gartner2020年十大技術(shù)趨勢報告》，https://www.gartner.com/smarterwithgartner/gartner-top-10-strategic-technology-trends-for-2020/。

②《IDC：全球AR/VR 支出指南發(fā)布，2020 年中國市場規(guī)模達(dá)57.6 億美元》，https://www.idc.com/getdoc.jsp?containerId=prCHC45738319。

③virtual reality journalism，哥倫比亞大學(xué)TOW 數(shù)字新聞學(xué)研究中心，https://www.cjr.org/tow_center_reports/virtual_reality_journalism.php。

④What is 5G and what will it mean for you，https://www.bbc.com/news/business-44871448。