新華社AI合成主播新聞播報(bào)創(chuàng)新探析

文/肖蕾

媒介技術(shù)進(jìn)步驅(qū)動(dòng)媒體報(bào)道創(chuàng)新。2021年全國“兩會(huì)”期間，新華社與搜狗公司聯(lián)合打造的AI合成主播就是典范。該AI合成主播能夠通過新華社“新立方”智能化演播室實(shí)現(xiàn)自由“穿越”，運(yùn)用五面LED屏構(gòu)建場(chǎng)景，結(jié)合多角度三維縫合技術(shù)，實(shí)現(xiàn)現(xiàn)實(shí)空間與虛擬空間交錯(cuò)，打造了新聞報(bào)道的全新樣態(tài)。目前，AI合成主播已經(jīng)具備了與真人主播頗為相似的外形特征、聲音動(dòng)作及面部表情。在算法的加持下，AI合成主播能夠與真人主播同頻互動(dòng)。AI合成主播在采訪播報(bào)時(shí)不受空間限制，能夠?qū)崟r(shí)“穿越”多個(gè)場(chǎng)景，為觀眾帶來前所未有的新聞體驗(yàn)，這不僅是新時(shí)代媒體融合深度推進(jìn)的重要成果，也為用戶的新聞接收提供了豐富的視聽體驗(yàn)。

一、跨界融合創(chuàng)新，打造全新新聞樣態(tài)

在新聞播報(bào)過程中，依靠技術(shù)便捷性，新華社AI合成主播能夠在短時(shí)間內(nèi)穿越多個(gè)場(chǎng)景，在演播室與新聞現(xiàn)場(chǎng)之間快速往返，給觀眾們帶來了全新的新聞體驗(yàn)，塑造了全新的新聞樣態(tài)。

在2021年的“兩會(huì)”新媒體報(bào)道中，新華社新媒體中心攜手搜狗公司，首次推出了由AI合成主播主持的全國“兩會(huì)”特別節(jié)目，尤其是深度使用了搜狗公司業(yè)內(nèi)領(lǐng)先的智能“分身技術(shù)”。例如，搜狗“分身”的語音、合成等技術(shù)能夠快速模擬真人播報(bào)畫面。這與以往語音圖像合成僅能單獨(dú)創(chuàng)造虛擬形象，要靠語音輸出唇部效果的情況大不相同。根據(jù)使用者輸入的文字、語音等各類文本，搜狗“分身技術(shù)”下的AI合成主播能即時(shí)輸出音視頻合成效果。如此一來，新聞視頻制作效率明顯提升，新聞媒體后期制作各項(xiàng)成本大大降低。早在2021年1月，新華社就利用該技術(shù)在客戶端推出了“AI主播超市”，8位AI明星主播煥新亮相。在搜狗公司自主研究開發(fā)的“StyleTTS端到端多模態(tài)合成系統(tǒng)”助力下，8位AI主播播報(bào)效果有了顯著提升。該系統(tǒng)能夠精準(zhǔn)生成和控制AI主播的聲音、動(dòng)作乃至微表情等細(xì)節(jié)，AI主播整體播報(bào)效果已與真人主播沒有太大差異。在“兩會(huì)”特別節(jié)目報(bào)道中，AI主播能夠與真人主播實(shí)時(shí)對(duì)話、互動(dòng)，表達(dá)流利，交流順暢，讓未來的新聞?chuàng)碛辛烁鄻拥某尸F(xiàn)可能。

新華社AI合成主播不僅能坐著報(bào)消息，還能根據(jù)其所播報(bào)的新聞內(nèi)容做出相應(yīng)手勢(shì)，擺出不同姿態(tài)，聲情并茂地播報(bào)新聞。2021年全國“兩會(huì)”期間，新華社新媒體中心搭建“新立方”演播室，推出了全國“兩會(huì)”特別節(jié)目。在2021年3月5日的首期節(jié)目中，AI合成主播雅妮開場(chǎng)“空降”節(jié)目演播室，與新華社真人主持人高熹進(jìn)行了簡(jiǎn)單互動(dòng)和新聞播報(bào)。隨后，AI主播又“趕到”了位于人民大會(huì)堂的人大會(huì)議代表通道，在新聞現(xiàn)場(chǎng)向觀眾們介紹了將要通過網(wǎng)絡(luò)視頻形式接受采訪的幾位全國人大代表。最后，雅妮再次返回“新立方”演播室。短短一分半鐘的新聞播報(bào)過程，AI主播來回穿梭于演播室和新聞現(xiàn)場(chǎng)，彌補(bǔ)了真人主持“分身乏術(shù)”的劣勢(shì)，為觀眾們帶來了新的新聞體驗(yàn)。

為促進(jìn)新技術(shù)與新媒體的深度融合，新華社大膽嘗試各類前沿科技，創(chuàng)新報(bào)道理念和報(bào)道手法，形成了對(duì)報(bào)道場(chǎng)景創(chuàng)新的有效探索。在2021年全國“兩會(huì)”召開前夕，新華社策劃并推出了一系列沉浸式、跨屏訪談報(bào)道。通過5G、AI、MR等前沿技術(shù)，新華社新媒體中心采集了代表委員及其所處環(huán)境的實(shí)時(shí)信號(hào)，依靠CAVE演播室，等比例“復(fù)制”出真實(shí)場(chǎng)景。為了讓主持人與嘉賓在節(jié)目當(dāng)中“置身一室”，新華社在智慧演播室中安裝了多角度三維縫合的LED屏幕，將有限的演播空間拓寬成了無限的沉浸式環(huán)境，場(chǎng)景視覺效果被成倍放大，畫面更顯清晰、自然、流暢。不僅如此，在節(jié)目中，原本身處北京演播室的主持人只需“一步”即可“跨入”代表委員們所在的實(shí)地工作和調(diào)研場(chǎng)景，實(shí)現(xiàn)主持人與嘉賓的隔空同框。觀看節(jié)目時(shí)，觀眾們仿佛置身于訪談現(xiàn)場(chǎng)，直接聆聽代表委員們的履職故事。而在屏幕背后，一切都以“跨屏”的方式呈現(xiàn)出來。作為高新視頻業(yè)態(tài)的一部分，沉浸式、跨場(chǎng)景的內(nèi)容呈現(xiàn)能夠?qū)崿F(xiàn)超清的畫質(zhì)、超大的視角以及超高的沉浸感。

二、技術(shù)賦能，打造全新視聽體驗(yàn)

通過與頂級(jí)科技企業(yè)合作、數(shù)字科技賦能，新華社大膽

AI合成主播“新小微”改進(jìn)演播室舞美，為觀眾帶來了全新的視聽體驗(yàn)。

新華社AI合成主播在設(shè)計(jì)之初就是以真人主持為原型進(jìn)行制作的。在提取真人主持的聲音、表情、肢體動(dòng)作等內(nèi)容的基礎(chǔ)上，新華社利用人工智能技術(shù)進(jìn)一步整合還原，最終實(shí)現(xiàn)了AI合成主播的驚艷亮相?？梢哉f，每一位AI合成主播在現(xiàn)實(shí)中都對(duì)應(yīng)著一位真人主播。因此，AI合成主播算得上是現(xiàn)實(shí)、科技與藝術(shù)，主體與客體的完美結(jié)合。新華社AI合成主播運(yùn)用了人臉關(guān)鍵點(diǎn)檢測(cè)、人臉特征提取、唇語識(shí)別、情感遷移等眾多先進(jìn)技術(shù)，在語音、圖像等多模態(tài)信息的幫助下，完成了多次聯(lián)合建模訓(xùn)練。經(jīng)過多次迭代，如今的新華社AI合成主播一舉手、一投足都表現(xiàn)得活靈活現(xiàn)。在全國“兩會(huì)”特別報(bào)道中，AI合成主播雅妮對(duì)輕重?cái)嗑?、音色韻律掌握自如，這一表現(xiàn)與從前生硬無感情、機(jī)械化的AI語音播報(bào)大不相同。不僅如此，在強(qiáng)大算法的支撐下，新華社AI合成主播更顯人性化、智能化、情感化。例如，在節(jié)目當(dāng)中，面對(duì)真人主持拋出來的問題，AI合成主播雅妮不僅對(duì)答如流，話語當(dāng)中還透著一絲幽默。當(dāng)真人主持高熹發(fā)問雅妮，馬上要錄節(jié)目是否會(huì)感覺緊張時(shí)，雅妮回答道：“當(dāng)然不緊張，我又不會(huì)忘詞?！睆难拍莸拇鸢钢胁浑y發(fā)現(xiàn)，依靠強(qiáng)大的算法適配，AI合成主播犯錯(cuò)率低，無備稿壓力，未來在新聞主持領(lǐng)域?qū)⒋笥锌蔀椤?/p>

在“兩會(huì)”5G沉浸式多地跨屏訪談中，新華社將人大代表和政協(xié)委員“請(qǐng)到了”演播室，主持嘉賓跨屏握手，“憑空”實(shí)現(xiàn)裸眼3D效果。當(dāng)主持人在演播室固定點(diǎn)位間來回走動(dòng)時(shí)，場(chǎng)景中仿佛打開了一扇“任意門”，眨眼間將主持人送去了代表委員們的工作現(xiàn)場(chǎng)?！?G沉浸式跨屏訪談”這一話題也就此破圈。為在同一鏡頭中等比例還原演播室、嘉賓所處區(qū)域多地空間，在有限的真實(shí)空間中擴(kuò)展出無限場(chǎng)景，新華社先后采用了5G傳輸、基于投影的虛擬現(xiàn)實(shí)技術(shù)、全息成像、混合現(xiàn)實(shí)、LED屏三維縫合等“黑科技”，最大限度地發(fā)揮了數(shù)字科技的仿真度。在視覺效果方面，演播室大屏清晰度在4K以上，屏幕間距僅1.2毫米，基本實(shí)現(xiàn)了無縫拼接。演播室箱體尺度縮小，背景屏造型更加流暢，演播室舞美更加炫目。新聞訪談場(chǎng)景不再單一呆板，逐漸能夠適應(yīng)主持人訪談和節(jié)目?jī)?nèi)容的變化和要求。對(duì)于嘉賓而言，能夠在自己熟悉的場(chǎng)景里接受采訪，本身表現(xiàn)也會(huì)更加輕松。正因如此，節(jié)目最終呈現(xiàn)效果十分逼真。

“兩會(huì)”報(bào)道期間，新華社力求應(yīng)用場(chǎng)景出新，視聽體驗(yàn)升級(jí)。為此，搭建了“新立方智能化演播室”，讓AI合成主播跨場(chǎng)景分身報(bào)道、真人主持跨屏訪談等節(jié)目形式都成為現(xiàn)實(shí)?！靶铝⒎健毖莶ナ依梦迕嬷悄躄ED屏，通過LED屏幕三維縫合技術(shù)，將演播室總面積擴(kuò)展至近400平方米。在傳統(tǒng)的新聞報(bào)道形式中，受限于視聽語言構(gòu)建起的二維平面，觀眾往往只能單向、被動(dòng)地接受信息。而“新立方”演播室則實(shí)現(xiàn)了沉浸式內(nèi)容呈現(xiàn)，為新聞交互提供了全場(chǎng)域、多維度支持，讓參與者仿佛置身其中，感受到別致而愉悅的存在感。為了讓最終呈現(xiàn)效果盡如人意，新華社還要解決三維立體場(chǎng)景下的拍攝機(jī)位問題。由于技術(shù)條件的限制，三維視效對(duì)拍攝角度要求嚴(yán)苛。為此，節(jié)目組不得不反復(fù)調(diào)整鏡頭角度，輔助主持人定點(diǎn)走位，以保證最佳呈現(xiàn)效果。同時(shí)，節(jié)目還借助多聲道揚(yáng)聲器和播控系統(tǒng)構(gòu)造出超高沉浸感的視聽系統(tǒng)，彌補(bǔ)了單一平面視頻無法呈現(xiàn)出的“聲”臨其境效果，為觀眾提供多方位視聽信息。

三、結(jié)語

新華社的創(chuàng)新嘗試將節(jié)目制作視角由二維屏幕轉(zhuǎn)向三維空間，實(shí)現(xiàn)了主流媒體與前沿科技的良性互動(dòng)。AI合成主播隊(duì)伍日益壯大，與真人主持配合默契，現(xiàn)場(chǎng)和外景分工明確，虛擬現(xiàn)實(shí)交錯(cuò)延伸。在三維立體報(bào)道方面，新華社全新搭建了“新立方”演播室，將兩地時(shí)空匯合到一處場(chǎng)景之中，突破了傳統(tǒng)訪談?lì)惞?jié)目的創(chuàng)作樣態(tài)，立體視效真實(shí)可感。新技術(shù)與新媒體的完美融合，為主流媒體創(chuàng)新出圈提供了范例。