高通在ChinaJoy上的AI元素,讓我看到泛娛樂時(shí)代的美麗圖景

來源:IT之家
作者:汐元
時(shí)間:2021-08-09
2626
泛娛樂,是基于互聯(lián)網(wǎng)和移動互聯(lián)網(wǎng)多領(lǐng)域共生而形成的,泛娛樂時(shí)代,人們消費(fèi)的是娛樂內(nèi)容,但有一個領(lǐng)域同樣不容忽視,那就是承載豐富娛樂內(nèi)容的智能終端。

泛娛樂,是基于互聯(lián)網(wǎng)和移動互聯(lián)網(wǎng)多領(lǐng)域共生而形成的,泛娛樂時(shí)代,人們消費(fèi)的是娛樂內(nèi)容,但有一個領(lǐng)域同樣不容忽視,那就是承載豐富娛樂內(nèi)容的智能終端。

泛娛樂時(shí)代,人們娛樂的形式、內(nèi)容、時(shí)間地點(diǎn)變得豐富而多樣,對于智能硬件的要求也更多,不僅要求強(qiáng)大的性能,更要有良好的交互,豐富的功能……為了滿足這些需求,有一項(xiàng)技術(shù)受到各行各業(yè)的普遍關(guān)注,那就是AI。

342ac8b4-8a3a-418a-a7ff-610ca7d85886.jpg

當(dāng)智能終端融入了出色的AI能力,就能為廣大消費(fèi)者提供更加豐富有趣的智能泛娛樂體驗(yàn)。這一點(diǎn)在今年剛剛舉行的ChinaJoy上也有深刻體現(xiàn),作為移動連接技術(shù)提供商的高通,就通過豐富的AI技術(shù)演示,為我們展現(xiàn)了AI驅(qū)動的精彩的智能泛娛樂生活。

驍龍主題館,隨處可見的AI與娛樂

今年的ChinaJoy上,高通再次聯(lián)合眾多生態(tài)合作伙伴打造驍龍主題館。在巨大的驍龍主題館里,從智能手機(jī)到移動電競,從Wi-Fi路由器到極具沉浸感的AR設(shè)備,高通為廣大硬核玩家、游戲發(fā)燒友和驍龍粉絲打造了一個充滿科技感、智慧感、新鮮感的數(shù)字娛樂嘉年華,這其中就有很多基于AI技術(shù)實(shí)現(xiàn)的娛樂方式。

b3c6aeb2-a7fc-4db3-bf06-bfa695dfede8.jpg

比如,作為高通長期合作伙伴的虹軟,就在驍龍主題館現(xiàn)場展示了3D紙片人總動員的技術(shù),在演示中,我們看到,智能手機(jī)只需要拍攝平面上的一處繪畫內(nèi)容,這個二維圖像就可以快速化身3D“紙片人”,并且以AR的形式呈現(xiàn),用戶還可以與之互動,非常有趣。

b96366fbly1gt768py4cag20dc08ne82 (1).gif

3D紙片人總動員利用智能手機(jī)攝像頭的AI視覺技術(shù)識別平面中的圖案,然后通過算法將這個圖案轉(zhuǎn)換成3D模型,最后輸出3D立體的“紙片人”,這種創(chuàng)新的交互方式,可以讓我們使用智能手機(jī)增添許多樂趣,比如未來你就可以和小伙伴各自快速創(chuàng)建一個“紙片人”,然后用AR的形式彼此互動,妙趣橫生。

除了紙片人總動員,虹軟在現(xiàn)場還演示了單攝3D建模的黑科技,這個技術(shù)可以讓智能手機(jī)隨時(shí)隨地對現(xiàn)實(shí)對象進(jìn)行掃描,無論是人還是物體,都可以立刻生成同比例、高精度、高逼真度的3D虛擬模型。IT之家在現(xiàn)場能夠發(fā)現(xiàn),這個生成的虛擬模型具有精細(xì)的紋理和圖像采集,真實(shí)還原了原來物體的色彩和細(xì)節(jié),整體效果還是很出色的。

875d9d59-4f5d-498f-a030-c99137eeb7bf.jpg

并且,針對生成的人物、動物或者卡通3D模型,再結(jié)合AR算法和AI技術(shù),這個模型能夠觀察用戶的肢體動作或者手勢,和用戶進(jìn)行互動。這個技術(shù)將AI與建模、AR結(jié)合在一起,形成虛擬的立體形象,相信在未來數(shù)字娛樂領(lǐng)域會有很廣泛的應(yīng)用,比如利用很多個這種快速建模的形象進(jìn)行的游戲等等,可以大大豐富人們的娛樂生活。

更重要的是,完成3D建模的手機(jī)哪怕只有單攝像頭也能完成,這其中涉及到很強(qiáng)的AI識別能力,均是在于高通合作的基礎(chǔ)上實(shí)現(xiàn)的。

除了虹軟,在ChinaJoy驍龍主題館的現(xiàn)場,還有很多與AI相關(guān)的技術(shù)演示,都可以在智能泛娛樂領(lǐng)域發(fā)揮重要作用。比如下面這個來自相芯科技的AI虛擬形象技術(shù),你只需要站在攝像頭面前等待3秒,就可以在屏幕上看到卡通版的自己,這個卡通的虛擬形象會和你的外貌很相似,你的面部特征、頭發(fā)類型、胡子類型等等,都可以變成可愛又有趣的卡通形象,你的表情變化,卡通形象的表情動作也會隨之變化,看起來惟妙惟肖。這個技術(shù)在現(xiàn)場吸引了很多人駐足觀望,大家都很想知道自己在卡通世界里會是什么樣子,也覺得自己有一個虛擬版的形象是一件很酷的事情。

560bb53f-a40b-41bc-a85b-8fefa37927a4.jpg

現(xiàn)場的相關(guān)技術(shù)人員告訴小編,這個虛擬形象是通過云服務(wù)器在云端形成的,同時(shí)客戶端的SDK也會用于進(jìn)一步對虛擬形象進(jìn)行個性化定制和互動,這個過程借助了高通驍龍移動平臺的AI能力以及XR技術(shù),結(jié)合相芯科技自己的虛擬化身相關(guān)技術(shù),共同呈現(xiàn)了有趣的二次元風(fēng)格虛擬形象。

b96366fbly1gt768ql9alg20dc08nkjn.gif

目前這個技術(shù)已經(jīng)有了實(shí)際的應(yīng)用,比如小米上半年發(fā)布的小米11 Ultra內(nèi)置的萌拍Mimoji 3.0版本,就使用了相芯科技技術(shù)。驍龍888為萌拍Mimoji 3.0提供了強(qiáng)勁的AI算力和圖像信息處理技術(shù)的支撐,從而讓萌拍Mimoji 3.0能夠在較低功耗水平下的完成高質(zhì)量的面部二次元虛擬渲染。

7e9c2f90-75dd-416e-8c9a-689318b2b7d5.jpg

說到AI驅(qū)動攝像頭實(shí)現(xiàn)的趣味玩法,IT之家在驍龍主題館現(xiàn)場還看到了更多由驍龍888帶來的豐富的AI影像演示。

比如中興手機(jī)就在現(xiàn)場展示了搭載驍龍888移動平臺的三主攝影像旗艦Axon 30 Ultra,這款手機(jī)搭載了三顆同樣6400萬的超感光主攝、超人文主攝、超廣角主攝,巨大的像素量在進(jìn)行AI運(yùn)算時(shí)是一個巨大的考驗(yàn),驍龍888移動平臺搭載的第6代高通AI引擎則可以輕松應(yīng)對。

46c784f9-31fd-4d9e-adac-56c67df7e0e8.png

在驍龍888 AI能力的加持下,Axon 30 Ultra可以實(shí)現(xiàn)有趣的影像玩法,例如在現(xiàn)場你就可以體驗(yàn)一鍵拍攝全焦段照片的功能,照片在不同焦距間自由縮放,實(shí)現(xiàn)“先拍照、后變焦”,此外我們還看到了多攝同拍同錄、超級月亮Ultra模式、希區(qū)柯克變焦等創(chuàng)新影像玩法。無疑,這些由強(qiáng)大AI能力帶來的新鮮影像玩法,能夠讓消費(fèi)者們的娛樂生活更加多彩。

3d8280de-1628-44e3-880b-e5ecb54f2d75.jpg

還有更高階的AI應(yīng)用,比如小編在現(xiàn)場還看到了創(chuàng)屹科技Future Mind專業(yè)機(jī)器人與現(xiàn)場體驗(yàn)者進(jìn)行“AI乒乓球電競”對戰(zhàn),讓參與者領(lǐng)略數(shù)字競技體育的別樣魅力。

Future Mind專業(yè)機(jī)器人采用高通Cloud AI 100平臺,利用強(qiáng)大的的人工智能技術(shù)識別并捕捉、分析高速運(yùn)動狀態(tài)下乒乓球的位置,更與引入了高通的邊緣側(cè)運(yùn)算平臺進(jìn)行快速的AI運(yùn)算,最終能夠在于人類的較量中不落下風(fēng)。

5bddb241-d6be-49d5-8a23-79b17c05d65d (1).jpg

總之,今年ChinaJoy的驍龍主題館中,你可以處處感受到AI技術(shù)是如何極大豐富廣大消費(fèi)者的泛娛樂生活的,它通過在過去很難想象的智慧化能力,結(jié)合各種硬件終端,為我們娛樂生活開拓出很多新的場景,新的玩法。

而這些AI技術(shù)和能力的來源,大部分都來自高通驍龍移動平臺的AI引擎,特別是本屆ChinaJoy上隨處可見的驍龍888移動平臺,其第6代高通AI引擎正是一眾創(chuàng)新玩法的背后功臣。

應(yīng)用落地,不止于驍龍888的第6代高通AI引擎

在AI技術(shù)炙手可熱的今天,我們已經(jīng)聽過太多遍關(guān)于AI的美好暢想。但是將AI落地到實(shí)際應(yīng)用中卻并不是容易的事,不僅需要強(qiáng)大的算力、技術(shù)支撐,還需要有完整的解決方案,有終端承載,有聯(lián)動產(chǎn)業(yè)上下游的能力。而這些,對于驍龍888的第6代高通AI引擎而言,對于高通而言,都不是困難,而是優(yōu)勢。

高通很早就開始了對AI的研究,在終端側(cè)專門引入AI技術(shù)也是從驍龍820移動平臺這一代就開始了,到驍龍888,AI引擎已經(jīng)經(jīng)歷了6代的積累和發(fā)展,為智能手機(jī)向“智慧化”發(fā)展作出了重要的貢獻(xiàn)。

在第6代高通AI引擎上,高通將人工智能引擎的整體算力提高到了26TOPS,相比上一代的15TOPS有巨大的提升,如此強(qiáng)大的算力為終端在各種場景下的廣泛應(yīng)用提供了保障。

而第6代高通AI引擎算力提升的背后,包含了高通的眾多技術(shù)創(chuàng)新。首先我們知道,AI引擎并不是一個單獨(dú)的NPU單元,而是整合了CPU、GPU、Hexagon處理器等SoC的內(nèi)部運(yùn)算資源,并通過合理的實(shí)時(shí)調(diào)配機(jī)制實(shí)現(xiàn)的統(tǒng)一的AI框架。

ab816f0f-4521-4f9d-9b65-752880143976.png

在驍龍888移動平臺上,Kryo 680 CPU和Adreno 660 GPU都有顯著的升級。Kryo 680 CPU用上了全新CPU架構(gòu),是行業(yè)首個采用Arm Cortex-X1架構(gòu)的移動平臺,這令CPU整體性能提高25%,同時(shí)整個CPU叢集的整體功效也提高了25%。而Adreno 660 GPU的圖形性能相比上一代Adreno 650提升了35%,能耗相比于上一代則降低了20%。在參與AI運(yùn)算時(shí),Adreno 660 GPU的AI性能也有43%的提升。

4659fd38-5eb9-4845-b5e1-cb620993ba72.png

1e3cb604-894f-44b7-ac21-eab79bae3dbc.png

更重要的是驍龍888移動平臺采用的Hexagon 780處理器。這款張量處理器采用了融合AI加速器架構(gòu)。所謂的融合AI加速器架構(gòu),意思就是在之前驍龍865的Hexagon處理器中,有標(biāo)量、張量和向量加速器,但他們是分開的,而在驍龍888的Hexagon 780處理器中,這些加速器之間的物理距離幾乎消失了。

a3ed309b-c11d-4132-85af-9dc23bc53822.png

同時(shí),高通還在這三個不同加速器之間添加了很大的共享內(nèi)存,從而讓他們更快、更高效地共享和移動數(shù)據(jù)。高通稱,專用共享內(nèi)存的加入讓Hexagon 780在單一應(yīng)用中的性能提升16倍,在某些應(yīng)用中,數(shù)據(jù)交互時(shí)效最多可提高上千倍。

149bee1e-0015-4d1e-a44c-7172091c01d4.png

再具體到這些加速器自身,性能也得到了提升,標(biāo)量加速器的性能提升了50%,而張量加速器的處理速度是前代的2倍,更重要的是,在性能上漲的同時(shí),它們還提升了每瓦特性能,能效相比前代提升3倍之多。由此可見,全新的Hexagon 780處理器對第6代高通AI引擎性能躍遷貢獻(xiàn)極大。

除了這些提升算力的升級,在第6代高通AI引擎架構(gòu)中,高通還整合了第2代高通傳感器中樞。第2代高通傳感器中樞中,高通增加了一顆專用的、始終開啟的、低功耗的AI處理器,令傳感器中樞AI性能提升達(dá)5倍。這種額外的AI處理能力使Hexagon處理器可以將高達(dá)80%的工作負(fù)載分擔(dān)給傳感器中樞,從而做到更加省電。高通傳感器中樞進(jìn)行所有處理所需的功耗僅僅不到1毫瓦。

b0b1d39c-731a-43d7-a69e-b064bbc93142.png

全新第2代高通傳感器中樞的存在,讓搭載驍龍888移動平臺的終端能夠時(shí)刻保持AI處理能力的待命,讓智慧化的能力始終在線。

總之,驍龍888移動平臺搭載的第6代高通AI引擎已經(jīng)擁有頂尖的AI處理能力和完善的AI功能。當(dāng)然,只有這些還不夠,AI技術(shù)的落地還需要有承載它的終端。而根據(jù)高通中國區(qū)董事長孟樸的透露,到今年7月,全球已經(jīng)有130多款基于驍龍888的終端,終端廠商們充分利用了驍龍888旗艦平臺的領(lǐng)先AI特性,將他們應(yīng)用在智能手機(jī)的各個體驗(yàn)環(huán)節(jié)中,包括影像、游戲、音效等等,例如我們前面提到的小米11 Ultra內(nèi)置的萌拍Mimoji 3.0,還有紅魔游戲手機(jī)6R的TC游戲補(bǔ)幀技術(shù)等等,都通過AI技術(shù)為用戶的娛樂生活帶來了諸多樂趣。

c8c9d881-0337-4ecc-8385-9bab39435f97.jpg

除了與終端廠商的合作,高通還采取了更多措施方便開發(fā)者調(diào)用第6代高通AI引擎的能力,更積極與應(yīng)用軟件的開發(fā)商合作,推動更多AI娛樂應(yīng)用的落地。

比如說,在第6代高通AI引擎中,高通擴(kuò)展了用于AI加速器的開源編譯器TVM,支持Hexagon?,F(xiàn)在,開發(fā)者可以用幾行簡短的Python代碼編寫自定義算子,為Hexagon編譯,并直接插入高通AI引擎Direct框架。這無疑可以幫助開發(fā)者更方便、更全面地調(diào)用驍龍888第6代高通AI引擎的能力,創(chuàng)造出更多智能且實(shí)用的娛樂應(yīng)用。

a7cbbe5d-6e89-40fd-b4d9-31d64b7ba57e.png

再比如,高通還一直在和全球知名的社交應(yīng)用Snapchat合作,而Snapchat目前正在使用驍龍888的AI模型增效工具包,量化他們的一系列AI鏡頭模型,以提高人臉識別的準(zhǔn)確性和性能。這樣,用戶就可以即時(shí)應(yīng)用最新的濾鏡,在社交娛樂中獲得更多的樂趣。

873e0d8a-e125-4cb4-97e2-238b8fcf42d3.png

通過第6代高通AI引擎的強(qiáng)大性能,高通以驍龍888為整體解決方案,并借助智能手機(jī)等移動終端,將這種AI能力應(yīng)用于多樣化的泛娛樂場景中,并于產(chǎn)業(yè)上下游合作,真正將AI服務(wù)于普羅大眾的娛樂生活,令現(xiàn)實(shí)因?yàn)橛辛薃I的存在而更加五彩紛呈。

結(jié)語

如果把泛娛樂時(shí)代海量創(chuàng)新、好玩、豐富的娛樂場景比作春天土壤里開出的滿山坡的花朵,那么AI,就相當(dāng)于一場場春雨,潤物細(xì)無聲,將萬紫千紅爭奇斗艷的繁榮景象帶到人們面前。

而云聚成雨,高通就像催動春雷萌動的的云層,他們用自我在技術(shù)上的探索努力和廣泛的合作推動了AI的落地和應(yīng)用,讓技術(shù)真正能夠普惠大眾,讓泛娛樂時(shí)代的花園更加艷麗多姿,美不勝收。

立即登錄,閱讀全文
原文鏈接:點(diǎn)擊前往 >
文章來源:IT之家
版權(quán)說明:本文內(nèi)容來自于IT之家,本站不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。文章內(nèi)容系作者個人觀點(diǎn),不代表快出海對觀點(diǎn)贊同或支持。如有侵權(quán),請聯(lián)系管理員(zzx@kchuhai.com)刪除!
掃碼關(guān)注
獲取更多出海資訊的相關(guān)信息
優(yōu)質(zhì)服務(wù)商推薦
更多