手機(jī)AI的新奇玩法

包永剛

最近有一位叫作“喬碧蘿殿下”的神秘女子入侵了多個(gè)平臺(tái)的熱搜榜，只因?yàn)檫@位粉絲心目中聲音甜美的顏值主播在一次連麥PK大賽中，平時(shí)用于遮擋臉的GIF圖戲劇性地沒(méi)了，這一事件迅速成了關(guān)注的焦點(diǎn)。你是否想過(guò)，如果喬碧蘿殿下用的是當(dāng)下熱門(mén)的變臉軟件，結(jié)果會(huì)如何？如今，基于AI技術(shù)，具備一鍵變明星、一鍵男變女、一鍵步入老年功能的變臉APP非常火爆。比如Snapchat的性別交換濾鏡，不僅能在濾鏡開(kāi)啟后變換性別，而且濾鏡在不同角度以及各種光線下的表現(xiàn)都十分不錯(cuò)。不過(guò)，Snapchat的實(shí)時(shí)視頻變臉并非所有手機(jī)都支持，因?yàn)檫@一功能的實(shí)現(xiàn)一方面需要手機(jī)有較強(qiáng)的硬件性能；另一方面，對(duì)于網(wǎng)絡(luò)的要求也很高，要依靠云端訓(xùn)練和效果實(shí)施。這不僅帶來(lái)了隱私問(wèn)題，還限制了有趣AI應(yīng)用的普及。但情況正在改變，隨著手機(jī)處理器性能的提高，特別是AI性能的增強(qiáng)，手機(jī)AI不僅能拯救拍照手殘黨，改變購(gòu)物方式，還會(huì)改變你的生活方式。

AI通話降噪及超級(jí)夜景功能

手機(jī)最重要也是最基礎(chǔ)的功能無(wú)疑是通信，隨著通信技術(shù)的發(fā)展，手機(jī)通話質(zhì)量越來(lái)越高，但嘈雜環(huán)境下打電話聽(tīng)不清楚的問(wèn)題一直沒(méi)有被解決。目前，部分手機(jī)增加了通話降噪功能，比如中興、努比亞等。據(jù)了解，這些手機(jī)中的通話降噪的算法來(lái)自大象聲科（ELEVOC），算法基于計(jì)算聽(tīng)覺(jué)場(chǎng)景分析理論，應(yīng)用深度學(xué)習(xí)技術(shù)。而其中很重要的一點(diǎn)是，通話降噪的算法有了高通人工智能引擎AI Engine的支持，能夠?qū)崟r(shí)分離手機(jī)通話中的人聲和背景噪聲，使用者不論身處多么嘈雜的環(huán)境打電話，對(duì)方聽(tīng)到的始終是你清晰自然的聲音。通話降噪的應(yīng)用當(dāng)然不局限于語(yǔ)音通話，高通與大象聲科合作，在Skype視頻和語(yǔ)音通話中可以從呼叫方噪聲的背景中精確地提取使用者的聲音，并且這個(gè)功能只用一個(gè)麥克風(fēng)就能實(shí)現(xiàn)比多個(gè)麥克風(fēng)更加精確地噪聲抑制。有了AI通話降噪功能，以后無(wú)論是在體育賽事現(xiàn)場(chǎng)、音樂(lè)節(jié)還是家庭聚會(huì)，都可以獲得高質(zhì)量的通話，再也無(wú)懼嘈雜的環(huán)境。

對(duì)于部分人而言，語(yǔ)音和視頻通話是低頻使用功能，手機(jī)的拍照卻極為重要。但是，不少人因?yàn)槭謾C(jī)硬件本身或拍照技術(shù)等問(wèn)題，總會(huì)拍出一些模糊甚至扭曲的照片。比如拍食物的時(shí)候，很多人都遇到過(guò)把壽司拍模糊的情況，想拍一張滿意的照片需要耗費(fèi)不少時(shí)間?，F(xiàn)在，AI可以拯救拍照手殘黨。SensePhoto超分辨率功能可以對(duì)標(biāo)光學(xué)（物理）變焦鏡頭，用AI算法實(shí)現(xiàn)比肩光學(xué)變焦鏡頭的畫(huà)質(zhì)清晰度，這個(gè)功能來(lái)自高通的合作伙伴商湯科技。要拍出高清晰度的照片，夜晚的難度顯然更大，AI也可以讓夜間拍出好照片更加容易。AI超級(jí)夜景功能能夠進(jìn)行智能降噪以及防抖，結(jié)合傳統(tǒng)的計(jì)算機(jī)視覺(jué)和深度神經(jīng)網(wǎng)絡(luò)算法，可以讓用戶通過(guò)手持手機(jī)的方式或腳架模式（腳架效果更佳）以較長(zhǎng)的曝光模式拍攝出細(xì)節(jié)更多、更極致的超級(jí)夜景影像，這個(gè)技術(shù)來(lái)自高通的AI合作伙伴虹軟。高通的另一個(gè)AI合作伙伴曠視也有超畫(huà)質(zhì)功能，通過(guò)對(duì)原始圖像進(jìn)行處理，全新的超畫(huà)質(zhì)（Super IQ）技術(shù)能夠更好地降低圖片噪聲、保留畫(huà)面細(xì)節(jié)，優(yōu)化拍攝和影像處理的時(shí)間。手機(jī)拍照不僅追求更高畫(huà)質(zhì)，還在追求接近單反相機(jī)的效果。因此，如今手機(jī)攝像頭都是2個(gè)甚至5個(gè)，再匹配強(qiáng)勁的AI處理器能力和不錯(cuò)的AI算法，能夠?qū)崿F(xiàn)接近單反的效果。比如NALBI的圖像AI深度技術(shù)，能將數(shù)碼單反相機(jī)的虛化效果應(yīng)用于任何圖片，即使是來(lái)源于網(wǎng)絡(luò)甚至其他設(shè)備的照片。需要明白，以上這些功能的實(shí)現(xiàn)都是AI算法與AI硬件深度融合的結(jié)果。不同公司的AI算法各有特色，但它們都能在靈活且高性能的高通AI Engine的支持下，實(shí)現(xiàn)令人滿意的效果，特別是針對(duì)AI Engine優(yōu)化的算法。AI算法和AI Engine的深度融合不僅能拯救拍照手殘黨，讓手機(jī)拍照的質(zhì)量更好，還能讓拍照變得更加有趣。虹軟也推出了AI 智能雙攝視頻虛化功能，針對(duì)多攝像頭手機(jī)，可以在拍攝視頻時(shí)即時(shí)更改焦點(diǎn)區(qū)域，產(chǎn)生出色的景深效果與前后景虛化體驗(yàn)。

AI軟硬實(shí)力的展現(xiàn)

除此之外AI手游也廣受歡迎。報(bào)告顯示，2018年中國(guó)移動(dòng)游戲用戶規(guī)模為6.05億人，同比增長(zhǎng)9.2%。2018年中國(guó)移動(dòng)游戲市場(chǎng)實(shí)際銷(xiāo)售收入占全球移動(dòng)游戲市場(chǎng)比例約為30.8%。那AI和手機(jī)游戲能碰撞出什么火花？8月初，在2019 ChinaJoy的高通驍龍主題館開(kāi)館儀式上，《王者榮耀》的頂尖選手與AI 電競(jìng)戰(zhàn)隊(duì)——“SUPEX”進(jìn)行了一場(chǎng)1v1對(duì)戰(zhàn)，最終，AI 電競(jìng)戰(zhàn)隊(duì)一舉贏得比賽。這是SUPEX的移動(dòng)AI電競(jìng)首秀，也是iQOO聯(lián)合王者榮耀、騰訊 AI Lab 、高通驍龍為探索終端側(cè)AI性能而創(chuàng)建的“想象力工程”項(xiàng)目首次嘗試將移動(dòng)游戲的AI推理能力首次大規(guī)模從云端遷移至終端iQOO 產(chǎn)品上。四方的合作充分利用了第四代高通人工智能引擎AI Engine的強(qiáng)大異構(gòu)計(jì)算能力，為手機(jī)端帶來(lái)了不一樣的游戲體驗(yàn)。AI不僅能與玩家進(jìn)行游戲?qū)?zhàn)，還帶來(lái)了新游戲。比如SensePosture的人體骨架檢測(cè)（3D）技術(shù)，通過(guò)RGB和深度數(shù)據(jù)的輸入，可以檢測(cè)到3D的人體骨骼關(guān)鍵點(diǎn)和人體輪廓深度圖，并支持實(shí)時(shí)跟蹤，可以進(jìn)行體感游戲、體感交互等。同樣是高通AI合作伙伴的華捷艾米推出3D玩偶功能，在高通人工智能引擎AI Engine的支持下，用戶可以操控虛擬人偶、明星模型或卡通玩偶和被拍攝者做同樣的動(dòng)作，并錄制短視頻或者拍照。

無(wú)論是拍照、游戲、購(gòu)物在AI時(shí)代的新玩法，還是因?yàn)榻K端AI性能的提升帶來(lái)的新奇應(yīng)用，最為重要的還是軟件和硬件的結(jié)合。AI算法多樣，并且在不斷迭代，只有算力強(qiáng)、且兼具靈活性和功耗優(yōu)勢(shì)的手機(jī)SoC才能支撐AI應(yīng)用的普及和創(chuàng)新。AI近幾年備受關(guān)注，但高通在AI的基礎(chǔ)科技研發(fā)早在十多年前就已經(jīng)開(kāi)始，特別是在深度學(xué)習(xí)、神經(jīng)計(jì)算和豐富的AI算法等領(lǐng)域。從4年前的驍龍820開(kāi)始，高通就已經(jīng)在驍龍移動(dòng)平臺(tái)上實(shí)現(xiàn)了第一代人工智能引擎AI Engine的商用。最新的旗艦移動(dòng)平臺(tái)驍龍855集成了高通第四代多核人工智能引擎AI Engine。與前幾代AI Engine的理念相同，第四代AI Engine充分利用驍龍的異構(gòu)多核可編程架構(gòu)，對(duì)每個(gè)內(nèi)核進(jìn)行大幅優(yōu)化和提升，強(qiáng)調(diào)整體芯片面向AI計(jì)算的高效率和靈活性。值得注意的是，在驍龍855上，Hexagon進(jìn)化為更通用、更加強(qiáng)大的系統(tǒng)。不僅 DSP的功能得到了擴(kuò)展，更是新增了獨(dú)立的AI硬件核心HTA （Hexagon張量加速器），以綜合實(shí)現(xiàn)可編程的AI加速。此外，第四代高通人工智能引擎AI Engine軟件套件可以為高通神經(jīng)處理SDK、Google Android NN-API以及Hexagon NN和Qualcomm Math Library帶來(lái)一系列的提升。如今，利用第四代高通人工智能引擎AI Engine的AI軟件合作伙伴正在多個(gè)領(lǐng)域不斷拓展，為OEM廠商提供了支持下一代終端側(cè)AI特性的更多預(yù)優(yōu)化算法。AI Engine還能讓AI帶來(lái)更多的變革，比如汽車(chē)行業(yè)、工業(yè)、物流和零售等。