淺析360度視頻新聞的聲音制作

陶志鵬 郭靜

摘? 要：近年來，隨著新聞記錄方式的不斷革新，新聞工作者除了使用傳統(tǒng)的錄音筆、攝像機(jī)等設(shè)備，還會使用智能手機(jī)、全景攝像機(jī)、頭戴式攝像機(jī)等多種方式進(jìn)行拍攝記錄，這意味著以智能化、便捷化為發(fā)展趨勢的移動互聯(lián)網(wǎng)、大數(shù)據(jù)與云計算等新興技術(shù)力量，已經(jīng)滲透到視頻新聞制作各個方面，視頻新聞制作將迎來重新定義的可能，虛擬現(xiàn)實技術(shù)（VR）將帶來身臨其境的新聞體驗。虛擬現(xiàn)實技術(shù)的應(yīng)用拓寬了視頻新聞的制作方式，讓觀眾在接收信息的同時，增強(qiáng)了可感知的視覺化，聽覺化體驗。本文從虛擬現(xiàn)實技術(shù)的角度出發(fā)，結(jié)合視頻新聞的特點分析其優(yōu)勢，闡述視頻新聞聲音內(nèi)容的制作流程，然后對虛擬現(xiàn)實技術(shù)在視頻新聞制作的發(fā)展進(jìn)行分析。

關(guān)鍵詞：360度視頻新聞;VR技術(shù);新聞制作;聲音制作;虛擬現(xiàn)實技術(shù)? ? ? ? ? ? 中圖分類號：TN94? ? ? ? ?文獻(xiàn)標(biāo)識碼：A

文章編號：1671-0134（2020）08-120-03? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?DOI：10.19483/j.cnki.11-4653/n.2020.08.032

本文著錄格式：陶志鵬，郭靜.淺析360度視頻新聞的聲音制作[J].中國傳媒科技，2020（8）：120-122.

1.360度視頻新聞對聲音的要求

1.1 360度視頻新聞的真實性

360度視頻新聞在播放時聲音與其他VR聲音的主要區(qū)別在于：其聲音的真實性比較高，對聲音的效果以及報道中新聞的真實性要求頗高，聲音的呈現(xiàn)對新聞是否真實是不可缺少的證明之一。以2015年VICENEWS公司傾力之作《紐約百萬人大游行》為例子，這篇新聞報道的是關(guān)于紐約市民對美國警察殺害兩名青年而引起抗議的百萬人游行表達(dá)不滿的報道，報道中我們可以清晰聽見抗議人們的吶喊波瀾起伏，連綿不絕，這些場景中只分出一部分作為演講，多余的部分去除，大大地增加了該新聞的可信度，同時現(xiàn)場感受也相當(dāng)強(qiáng)。

眾所周知，一篇新聞的真實性與聲音效果和視覺感受密不可分，360度視頻新聞亦是如此。所以在真實的場景中錄音，由于設(shè)備和音樂受到一定程度的限制，導(dǎo)致一些畫面或者聲音錄制無法達(dá)到預(yù)期的效果。因此，VR技術(shù)采用一些設(shè)備技術(shù)，如后期的模擬重組聲音、現(xiàn)場安裝音質(zhì)非常好的話筒和重新錄制等方法來彌補(bǔ)許多不足之處。由于后期的處理中，可能會對360度視頻新聞的真實性有影響，因此，對前期的真實場景里的錄制要求提高了一個檔次。

在現(xiàn)實生活中，人們的視野有限，在視野之外的地方耳朵仍然能接收到有效的信息，人們可以通過不同的距離，音色，方位來獲得信息。因此，想要給觀眾帶來沉浸式體驗，很大程度上取決于聲音是否具有良好的空間信息和質(zhì)感。

1.2 360度視頻新聞的完整敘事性

360度視頻新聞的敘事研究基本上在VR鏡頭語言的變化方面展開。對于傳統(tǒng)電影，VR電影的制作有很多新的挑戰(zhàn)。例如，第一人稱的視覺體驗不能使用多功能、固定的鏡頭，不能使用蒙太奇，是否要有鏡頭語言等。隨著VR影像的創(chuàng)造者對鏡頭和觀眾的控制減弱，可以說這些挑戰(zhàn)動搖了傳統(tǒng)的鏡頭語言和敘事結(jié)構(gòu)。因此，聲音系統(tǒng)在視頻中非常重要，他將承擔(dān)更多的敘事任務(wù)，是VR影像敘事中強(qiáng)有力的助攻。

作品《流離失所》（TheDisplaced）開篇，小男孩在黑板上寫的時候，觸摸黑板的粉筆“da da”的聲音，起到了吸引觀眾的作用。在信息豐富的場景中，用戶經(jīng)常會被這種聲音吸引。此時，特定的聲音內(nèi)容可以有效地發(fā)揮對觀眾故事指導(dǎo)的作用，因此可以集中在特定的視覺內(nèi)容上。

360度視頻新聞的聲音內(nèi)容由于有真實性的要求，后期制作的自由度相對較低。而且新聞事件中往往存在特定的關(guān)注對象，由于鏡頭語言的缺失常需要通過聲音事件引導(dǎo)視點，尤其是在具有方向性的移動聲源和突發(fā)聲音事件中，必須注意聲音內(nèi)容的敘事性。

2. 360度視頻新聞聲音內(nèi)容的制作

2.1兩種主流空間音頻制作技術(shù)

2.1.1基于對象（Object-based）空間音頻技術(shù)

基于對象的音頻（Object-based）將每個聲音對象看作是一個點聲源，通過各式各樣的點聲源來完成對空間聲場的塑造，每個聲音對象靈活可控。在虛擬空間中每個聲源都處于空間的不同位置，當(dāng)你轉(zhuǎn)動頭部的時候聲源位置不變，HMD追蹤你的頭部，然后聲音即時渲染，聲音可以是來自任何地方的?；趯ο笠纛l制作方法相對比較簡單，在聲場中的每一條聲音對象可以被單獨記錄。音頻對象可以將音頻作為獨立的聲音進(jìn)行編輯處理，用戶在終端也能依據(jù)自己的喜好進(jìn)行調(diào)整。以籃球比賽為例，用戶可以調(diào)整現(xiàn)場嘈雜的人聲、解說聲的大小來獲得主場與客場的不同觀感，在嘈雜的環(huán)境中獲得一個最佳聽音體驗。

2.1.2基于聲場模擬的（Ambisonics）虛擬全景聲聲場技術(shù)

Ambisonics是一種用于記錄，混音和重放360度音頻的方法。隨著虛擬現(xiàn)實產(chǎn)業(yè)的飛速發(fā)展，Ambisonics制作方案得到了更多人士的認(rèn)可。Ambisonics的基本方法是將聲場視為圍繞中心點，不同方向的360度3D聲場。中心點是麥克風(fēng)的位置，或是播放時聽眾的“最佳聽音位置”。在VR和360度視頻中廣泛使用的最流行的Ambisonics格式包括Ambisonicsb格式的4通道格式，它只是使用4個通道來再現(xiàn)完整的聲場。目前有不少麥克產(chǎn)品和播放平臺支持，最基本的也是現(xiàn)在最廣泛使用的Ambisonics格式，4-channel B格式（圖1），也稱為一階Ambisonics B格式。一階B格式的四個通道稱為W，X，Y和Z。它們在360度球體中代表不同的方向性：中心，左右，前后和上下，通過增益和相位相差的關(guān)系，組合的四個通道代表整個三維360度的聲場。

2.2Ambisonics B格式聲場還原原理

W可以看作一個全指向型話筒，包含球體內(nèi)的所有聲音，來自各方的增益和相位相同。

X可以看作指向前的八字形話筒。

Y可以看作指向左側(cè)的八字形話筒。

Z可以看作指向上的八字形話筒。

在x通道，和任何8字形話筒一樣，它分為正面和反面兩個方向。x的極坐標(biāo)為正向，則反面表示負(fù)向。通道X上產(chǎn)生的音頻信號包含正相位球的所有聲音和負(fù)相位球的所有聲音。與八字形話筒一樣，它的增益與聲音接收點直接在正向或負(fù)向的聲音將全增益收錄，但當(dāng)發(fā)聲位置離開話筒兩極時，增益將逐漸下降，直到在90度時獲得與八字形話筒完全相同的無增益。對于y和Z通道也是如此，通過增益與相位差的關(guān)系，組合得來的四個通道代表了整個三維空間聲場。

2.3錄制方案

錄制方式主要有兩類。其一，QuadBinaural類方案。該方案以仿真頭技術(shù)為基礎(chǔ)，通過模擬同一水平方向上的多對人耳實現(xiàn)聲音錄制，但缺少垂直方向的聲音效果，因而VR音頻體驗有一定缺失。錄音操作簡便，對回放硬件設(shè)備要求相對較低，但通常只適用于耳機(jī)回放。后期制作通用的工具數(shù)量并不理想，并且制作使用的工具，走的流程幾乎不可復(fù)制，有很強(qiáng)的特異性。其二，Ambisonics類方案。此類方案以Ambisonics技術(shù)為基礎(chǔ)，可實現(xiàn)任意角度、連續(xù)的雙耳回放效果，且成本較低，后期制作工具豐富。但不同插件和工具使用的具體算法不同，帶來的回放效果差異較大。整體來看，技術(shù)方案之間主要有回放效果、格式標(biāo)準(zhǔn)、后期制作、設(shè)備可攜帶性、設(shè)備價格等差異。從回放效果、格式標(biāo)準(zhǔn)、后期制作的角度去對比二者的技術(shù)特點，具體如表1所示。

2.4 360度視頻新聞制作流程

360度視頻新聞聲音內(nèi)容制作還存在不少問題，主要是：制作過程繁雜、技術(shù)手段不統(tǒng)一。其制作流程如圖2所示。

同期錄音：錄音與視頻內(nèi)容同時錄制采集;音頻后期制作，同步視頻和音頻的空間位置，并在需要時加入非同期錄制的旁白、音效等素材，這些素材常為非全景聲錄制，故后期制作時需進(jìn)行處理并混入VR音頻環(huán)境;最后，音頻成品與視頻合成并在相應(yīng)的平臺發(fā)布。

在整體制作流程上，傳統(tǒng)視頻新聞與360度視頻新聞制作思路相似。主要差異在于，360度視頻新聞的各制作階段均需在VR音頻環(huán)境下進(jìn)行，以保證聲音具有良好的沉浸效果。而且，同期拾音中非VR音頻素材的錄制需要較為謹(jǐn)慎，后期處理整體也較為保守，以最大限度地保證聲音內(nèi)容的新聞?wù)鎸?。對于直播錄制、突發(fā)新聞、UGC等類型360度視頻新聞，后期處理環(huán)節(jié)基本省去，匹配格式標(biāo)準(zhǔn)后直接發(fā)布。

3. 360度視頻新聞發(fā)展前景

3.1發(fā)展前沿技術(shù)

虛擬現(xiàn)實新聞要想發(fā)展，需要在技術(shù)上進(jìn)行創(chuàng)新。在整體大環(huán)境下，如果僅僅是技術(shù)短缺可以通過改變產(chǎn)品本身各種性質(zhì)來適應(yīng)環(huán)境的需要。當(dāng)然任何一項技術(shù)的成熟都不是一帆風(fēng)順的，人體在適應(yīng)VR技術(shù)方面仍然需要突破一些困難。因為VR技術(shù)是3D顯示，如果觀眾不能夠適應(yīng)這種環(huán)境，會出現(xiàn)頭暈的現(xiàn)象，而頭暈會直接影響到觀眾的觀看體驗，這樣的觀看體驗就不能夠促進(jìn)VR的進(jìn)一步發(fā)展。所以此項技術(shù)還應(yīng)該努力突破這些問題。比如可以選擇和專業(yè)的技術(shù)公司一起合作。像《紐約時報》與vrse合作，就是一個非常聰明的選擇。他們將新聞內(nèi)容的拍攝和影像的編輯外包，再將自身的剪輯修改能力巧妙地和頂尖的科技公司的技術(shù)結(jié)合起來。在這樣的合作下，《紐約時報》在兩年時間內(nèi)制作出了20部高質(zhì)量的虛擬現(xiàn)實電影。

3.2培養(yǎng)復(fù)合型人才

2016年全球職場社交平臺LinkedIn（領(lǐng)英）曾經(jīng)對外公布的《全球虛擬現(xiàn)實人才報告》當(dāng)中的數(shù)據(jù)顯示，虛擬現(xiàn)實技術(shù)性人才在中國僅占全球的2%，甚至要低于印度。但VR在就業(yè)需求方面，中國約占18%，居第二位。這兩種數(shù)據(jù)形成了強(qiáng)烈的對比，明顯能看出中國的人才需求出現(xiàn)了巨大的缺口。而我國目前的VR人才現(xiàn)狀大多都不是直接從科班中產(chǎn)生的，而是游戲動漫等行業(yè)看中了這塊風(fēng)水寶地而轉(zhuǎn)型過來的。但畢竟這不是同一個行業(yè)，因此存在技術(shù)上的差異。這導(dǎo)致一大批人才在進(jìn)入VR領(lǐng)域之前都需要有一個較長的磨合階段。目前，我國虛擬現(xiàn)實新聞產(chǎn)業(yè)還處于萌芽階段，人才儲備是一個較大的缺口，復(fù)合型人才更是求之而不可得。為了緩解我國VR行業(yè)人才緊缺的現(xiàn)狀，可以嘗試著將VR技術(shù)引入高校培養(yǎng)的創(chuàng)新模式中，在高校中培養(yǎng)既具有攝像、編輯等影視方面的能力，又具備交互、硬件等知識的復(fù)合人才。可以嘗試著開辟VR新聞實驗室，使各大媒體之間相互合作，分享實用經(jīng)驗，在共同協(xié)作的環(huán)境中共同推動行業(yè)的整體發(fā)展。當(dāng)然，成為一個優(yōu)秀的VR工作者，不僅僅需要全面的技術(shù)，更加需要新聞從業(yè)者的道德。只有自身具備扎實的素質(zhì)才能夠把控好新聞的尺度，保證VR技術(shù)能夠真正地發(fā)揮其所用。

3.3永遠(yuǎn)內(nèi)容至上

新聞的報道無論使用怎樣的技術(shù)，其核心看點都是新聞的內(nèi)容。好的內(nèi)容不會隨著時間的流逝而褪去美好的容顏，技術(shù)是將內(nèi)容推向發(fā)展不可缺少的動力，而不是媒體界走向衰弱的外在因素。VR新聞可以采用技術(shù)與娛樂相結(jié)合的方式增強(qiáng)新聞的可讀性，采用創(chuàng)新實踐、提升內(nèi)容價值的報道形式為群眾服務(wù)，促進(jìn)利益與服務(wù)的最大化。

從上游VR中選取的229條VR新聞的閱讀量分為三個區(qū)間：“在[0—10000]的區(qū)間內(nèi)的新聞閱讀量，占總的約為35%，而閱讀量占比最高的是區(qū)間[10001—20000]，占到了總的52%。而在2萬以上的閱讀量僅僅只有5%。”分析之后，我們了解到：受眾能夠自發(fā)去關(guān)注的，要么就是自己生活中發(fā)生的事情，和自己有密切關(guān)系的內(nèi)容，要么就是國內(nèi)外容易引起關(guān)注的重大事件。類似事件因本身就具有讓人想了解的魅力，加上VR新聞的內(nèi)容概述必將更加受歡迎。因此關(guān)注這些內(nèi)容的發(fā)展和未來，也是新聞制作中需要摸清楚的一個方向。

無論是在過去，還是技術(shù)發(fā)達(dá)的今天，VR技術(shù)都應(yīng)當(dāng)理性看待未來的路，堅決做好優(yōu)質(zhì)服務(wù)。

參考文獻(xiàn)

[1]陸穎雋. 虛擬現(xiàn)實技術(shù)在數(shù)字圖書館的應(yīng)用研究[D].武漢大學(xué)，2013.

[2]郭勇陳，賈佳麗，王皎琳，周德群. VR技術(shù)在高校經(jīng)管類實驗教學(xué)中的應(yīng)用研究[J]. 實驗室科學(xué)，2016，19（02）：70-75.

[3]高東鋒，王森. 虛擬現(xiàn)實技術(shù)發(fā)展對高校實驗教學(xué)改革的影響與應(yīng)對策略[J]. 中國高教研究，2016（10）：56-59.

[4]蘇凱，張亞斌，咸麗楠. VR技術(shù)在數(shù)字媒體藝術(shù)專業(yè)教學(xué)中的應(yīng)用：現(xiàn)狀、創(chuàng)新、趨勢[J]. 江西廣播電視大學(xué)學(xué)報，2019，21（02）：11-17.

[5]章怡 . 虛擬現(xiàn)實技術(shù)在杭州供電公司電力系統(tǒng)中的應(yīng)用 [D]. 北京：華北電力大學(xué)，2015.

[6]閆婧 . 基于沉浸式 VR 技術(shù)的室內(nèi)空間情感化設(shè)計評價研 究 [D]. 株洲：湖南工業(yè)大學(xué)，2017.

[7]劉洋 . 基于 VR 技術(shù)的初中思想品德課情境教學(xué)探究 [D]. 沈陽：沈陽師范大學(xué)，2017.

[8]Azimkulov Ayan（阿陽）. VR 技術(shù)的虛擬教學(xué)應(yīng)用研究 [D]. 上海：東華大學(xué)，2017.

[9]肖灑 . VR 技術(shù)在展示設(shè)計中的應(yīng)用 [D]. 濟(jì)南：山東工藝美術(shù)學(xué)院，2016.

[10]呂佰昌. BIM+VR技術(shù)在綠色建筑設(shè)計中的應(yīng)用研究 [D]. 張家口：河北建筑工程學(xué)院，2019.

作者簡介：陶志鵬（1996-），男，云南省楚雄州元謀縣，學(xué)士，研究方向：聲音制作;郭靜（1985-），女，河南鶴壁人，助教，研究方向：數(shù)字音頻。