阿里云肖文鵬：邊緣云創(chuàng)新場(chǎng)景探索與實(shí)踐

9月16日，Distributed Cloud|2021全球分布式云大會(huì)·上海站隆重召開。在全球分布式云大會(huì)不懈布道下，云計(jì)算行業(yè)對(duì)分布式云的關(guān)注度愈發(fā)高漲，以全球分布式云聯(lián)盟成員為代表，涌現(xiàn)出了大量分布式云技術(shù)和實(shí)踐成果，為分布式云計(jì)算發(fā)展夯實(shí)了基礎(chǔ)。

2021全球分布式云大會(huì)為分布式云計(jì)算發(fā)展再添強(qiáng)大推力，本次大會(huì)共設(shè)有分布式云主題報(bào)告會(huì)、邊緣云論壇、云原生專題論壇、分布式數(shù)據(jù)庫論壇四大論壇，圍繞分布式云、邊緣算力、云原生、分布式架構(gòu)等技術(shù)與實(shí)踐展開。全球分布式云聯(lián)盟聯(lián)合阿里云、騰訊云、Google Cloud、中興通訊、京東云、安邁云、網(wǎng)心科技等國內(nèi)外分布式云頂尖技術(shù)服務(wù)商，共話分布式云創(chuàng)新新趨勢(shì)，共謀云計(jì)算變革新未來，共享分布式云計(jì)算新紅利！

在9月16日下午召開的邊緣云論壇上，阿里云高級(jí)技術(shù)專家 肖文鵬發(fā)表了題為《邊緣云創(chuàng)新場(chǎng)景探索與實(shí)踐》的精彩演講。

中心+邊緣的新型云計(jì)算架構(gòu)體系

肖文鵬首先介紹了中心+邊緣的新型云計(jì)算架構(gòu)體系，目前阿里云有20多個(gè)數(shù)據(jù)中心，即傳統(tǒng)的中心云，這些中心具有較大的單點(diǎn)規(guī)模，并且擁有較強(qiáng)的計(jì)算以及存儲(chǔ)能力，但是距離終端較遠(yuǎn)。

相較于中心云，邊緣節(jié)點(diǎn)單點(diǎn)規(guī)模較小，能承載的計(jì)算以及存儲(chǔ)規(guī)模有限。但正是由于這一特性，使得邊緣節(jié)點(diǎn)能夠更加靈活快速的鋪開，目前阿里云已經(jīng)擁有超過2800個(gè)邊緣節(jié)點(diǎn)。這些節(jié)點(diǎn)遍布全球各地以及不同運(yùn)營(yíng)商，并且距離終端用戶更近。

中心和邊緣一起，面向各類應(yīng)用以及產(chǎn)業(yè)互聯(lián)網(wǎng)場(chǎng)景，提供一體化的解決方案。

在5G時(shí)代下，視頻和圖片因其強(qiáng)大的信息承載力，已經(jīng)成為數(shù)據(jù)內(nèi)容的主要載體和信息傳播的主要方式，根據(jù)愛立信最新報(bào)告顯示，76%的網(wǎng)絡(luò)數(shù)據(jù)為視頻和圖片，也就是視圖。而5G的大帶寬、低時(shí)延、廣連接的特性激活了視頻監(jiān)控、云游戲、物聯(lián)網(wǎng)等場(chǎng)景應(yīng)用，從消費(fèi)互聯(lián)網(wǎng)到產(chǎn)業(yè)互聯(lián)網(wǎng)的延伸，更加促進(jìn)了終端應(yīng)用和視圖數(shù)據(jù)的爆發(fā)。

這些終端和數(shù)據(jù)具有位置分散、規(guī)模大、以及價(jià)值密度相對(duì)較低等特點(diǎn)。以攝像頭為例，IHS的研究指出，目前全球有10億個(gè)監(jiān)控?cái)z像頭在持續(xù)的產(chǎn)生視圖數(shù)據(jù)。這個(gè)數(shù)據(jù)量是ZB級(jí)，但其中絕大部分?jǐn)?shù)據(jù)價(jià)值較低，我們更需要留存其中的關(guān)鍵片段以及其結(jié)構(gòu)化信息，這樣的場(chǎng)景和需求對(duì)計(jì)算和存儲(chǔ)的方式帶來了嚴(yán)峻挑戰(zhàn)和根本性變化

基于邊緣的新一代接入、計(jì)算以及存儲(chǔ)的分布式系統(tǒng)架構(gòu)有效的解決了這樣的問題。它能夠?qū)?0%以上的流量、計(jì)算以及數(shù)據(jù)收斂到本地，顯著的降低網(wǎng)絡(luò)傳輸以及存儲(chǔ)成本、提升計(jì)算效率，同時(shí)帶來超低延遲的體驗(yàn)。

在這樣的云計(jì)算體系之上構(gòu)建業(yè)務(wù)系統(tǒng)，其核心在于網(wǎng)、算、管、存四部分。

肖文鵬以城市大腦為例進(jìn)行了講解，他說，終端設(shè)備如攝像頭分布在全國各地，位置相對(duì)分散且流量分布不均。一些重計(jì)算如切片錄制、實(shí)時(shí)AI分析等需要回云后在中心完成。同時(shí)由于數(shù)據(jù)規(guī)模之大，對(duì)于終端設(shè)備管理、視圖內(nèi)容的檢索等，帶來很大的挑戰(zhàn)。最后，由于海量的數(shù)據(jù)需要回云，對(duì)成本、時(shí)延等等，都帶來很大的問題。

回到核心，如何提供一張就近、位置無感的接入、計(jì)算和存儲(chǔ)網(wǎng)絡(luò)，成為了視圖上云的首要任務(wù)。同時(shí)，由于不同業(yè)務(wù)需求以及資源的異構(gòu)，比如CPU、GPU、ARM陣列等，需要我們有按需的彈性計(jì)算能力，并且需要和接入網(wǎng)緊密結(jié)合。其次，面對(duì)海量的終端設(shè)備以及視圖數(shù)據(jù)，云邊一體的視圖管理以及安全的云邊通道，是數(shù)據(jù)流轉(zhuǎn)的關(guān)鍵。最后，由于視圖數(shù)據(jù)價(jià)值密度的差異，我們需要將大部分?jǐn)?shù)據(jù)在邊緣進(jìn)行卸載，同時(shí)經(jīng)過計(jì)算，將高價(jià)值以及序列化數(shù)據(jù)回云，其核心，就是解決如何存的問題。

邊緣云創(chuàng)新場(chǎng)景-視圖計(jì)算

綜合對(duì)上述問題的思考，邊緣創(chuàng)新團(tuán)隊(duì)基于阿里云廣覆蓋的ENS底座，孵化出視圖計(jì)算平臺(tái)。它主要面向視圖以及終端上云場(chǎng)景，如直點(diǎn)播、安防監(jiān)控、城市大腦、云游戲等，提供了位置無感的鏈接、計(jì)算以及周期性存儲(chǔ)服務(wù)。

視圖計(jì)算從基礎(chǔ)設(shè)施開始，通過資源納管、虛擬化以及資源切片，將資源進(jìn)行分池，并且提供多租隔離的能力。同時(shí)利用網(wǎng)、算、存一體化的調(diào)度，屏蔽底層異構(gòu)的資源以及物理位置，根據(jù)業(yè)務(wù)特性、終端位置和資源狀態(tài)，進(jìn)行協(xié)同調(diào)度，在保障業(yè)務(wù)低延時(shí)、高可用的同時(shí)，實(shí)現(xiàn)業(yè)務(wù)對(duì)計(jì)算、存儲(chǔ)和連接的位置無感。

應(yīng)用場(chǎng)景較為廣泛，比如在安防、交通物流等攝像頭上云場(chǎng)景，設(shè)備/流媒體接入和處理會(huì)綜合考慮節(jié)點(diǎn)算力、網(wǎng)絡(luò)帶寬和存儲(chǔ)容量等狀態(tài)，就近選取最匹配的節(jié)點(diǎn)，節(jié)點(diǎn)位置更靠近內(nèi)容的生產(chǎn)端，也就是視圖終端。而云游戲等場(chǎng)景，需要特定的渲染計(jì)算資源（如ARM板卡），同時(shí)也更靠近內(nèi)容的消費(fèi)端（手機(jī)端），當(dāng)需要多人觀戰(zhàn)直播時(shí)，又可以推流到CDN網(wǎng)絡(luò)進(jìn)行分發(fā)和異地觀看。

視圖計(jì)算云-邊-端協(xié)同架構(gòu)

肖文鵬表示，云、邊、端一體化的協(xié)同架構(gòu)是視圖計(jì)算的核心，也是未來邊緣計(jì)算的發(fā)展趨勢(shì)。

終端設(shè)備負(fù)責(zé)視圖內(nèi)容的生產(chǎn)、采集以及上傳，同時(shí)一些瘦終端也會(huì)負(fù)責(zé)視圖的解碼和播放。

視圖計(jì)算基于廣覆蓋的邊緣節(jié)點(diǎn)構(gòu)建了分布式接入網(wǎng)關(guān)，能夠與視圖終端快速構(gòu)建安全、低延遲的雙向通道，實(shí)現(xiàn)了多樣化的終端上云能力。同時(shí)也支持視頻以及圖片的快速上傳。這些視圖內(nèi)容會(huì)在邊緣就近進(jìn)行周期性存儲(chǔ)。同時(shí)也會(huì)與計(jì)算聯(lián)動(dòng)，在同節(jié)點(diǎn)或者臨近節(jié)點(diǎn)內(nèi)進(jìn)行計(jì)算，如錄制切片、AI處理等。計(jì)算的結(jié)果如AI序列化數(shù)據(jù)、有效視頻片段等，通過云邊安全、可靠的回云通道，實(shí)現(xiàn)快速回云。節(jié)點(diǎn)資源也會(huì)根據(jù)水位進(jìn)行彈性伸縮，同時(shí)節(jié)點(diǎn)間也會(huì)進(jìn)行協(xié)同和災(zāi)備。

視圖計(jì)算會(huì)在中心進(jìn)行統(tǒng)一的節(jié)點(diǎn)以及視圖管理，同時(shí)進(jìn)行一體化的服務(wù)編排以及Meta匯聚。視圖終端會(huì)在中心映射為一個(gè)影子設(shè)備，對(duì)影子設(shè)備的操作，都會(huì)通過信令通道快速的下發(fā)到終端執(zhí)行并得到反饋。

通過云、邊、端的協(xié)同，用戶不需要再關(guān)心云的具體位置，從而實(shí)現(xiàn)只有一個(gè)交互面，給用戶一朵云的體驗(yàn)。

位置無感的多點(diǎn)協(xié)同計(jì)算

在計(jì)算方面，視圖計(jì)算經(jīng)過多樣化的場(chǎng)景積累和打磨，提供了三種典型的計(jì)算能力。

第一種是基礎(chǔ)計(jì)算，主要面向直點(diǎn)播場(chǎng)景，它包含轉(zhuǎn)碼、錄制、截圖等。通過對(duì)編碼器的優(yōu)化，在相同畫質(zhì)下盡可能降低碼率，實(shí)現(xiàn)窄帶高清。同等畫質(zhì)可節(jié)省20%-40%的帶寬以及存儲(chǔ)空間。

第二種是視圖AI計(jì)算。結(jié)合達(dá)摩院在視覺算法上積累，視圖計(jì)算提供各種場(chǎng)景化、結(jié)構(gòu)化的AI分析能力，如移動(dòng)偵測(cè)、人臉識(shí)別、事件監(jiān)測(cè)等

第三種是自定義計(jì)算。視圖計(jì)算打破自身計(jì)算邊界，允許用戶自主上傳算子進(jìn)行托管，用戶可根據(jù)自身業(yè)務(wù)按需申請(qǐng)算力，極大降低業(yè)務(wù)接入成本。

這些計(jì)算最大的特征是算隨網(wǎng)動(dòng)。計(jì)算隨著數(shù)據(jù)的流動(dòng)而展開，在每個(gè)流轉(zhuǎn)節(jié)點(diǎn)進(jìn)行數(shù)據(jù)卸載和分流計(jì)算，避免全量數(shù)據(jù)回云，實(shí)現(xiàn)中心算力的下沉以及終端算力的上移。同時(shí)，由于計(jì)算節(jié)點(diǎn)更靠近終端，在計(jì)算時(shí)延、響應(yīng)速度等方面，都會(huì)有大幅提升。另外也避免的大量數(shù)據(jù)的回云，比如互聯(lián)網(wǎng)直播場(chǎng)景，對(duì)于80%無人或者極少人觀看的冷流，可以在邊緣直接收斂，從而極大降低回云帶寬。

可自定義的場(chǎng)景計(jì)算

在很多場(chǎng)景下，用戶可能已經(jīng)擁有了自己的算子或者應(yīng)用，這些可能是自研，也可能來自第三方。視圖計(jì)算提供了可自定義的場(chǎng)景計(jì)算能力，用戶可將算子托管到視圖計(jì)算。

肖文鵬以云游戲?yàn)槔v解道，游戲包就是一種算子或應(yīng)用。游戲廠商上傳游戲包后，會(huì)在云端發(fā)起算子托管的流程，視圖計(jì)算會(huì)內(nèi)部對(duì)應(yīng)用進(jìn)行審核并加入應(yīng)用市場(chǎng)

下一步配置好渲染規(guī)格后，云端會(huì)進(jìn)行兼容性適配，同時(shí)進(jìn)行算力評(píng)估來計(jì)算所需的資源。

接下來會(huì)進(jìn)行算子的編排以及部署，這時(shí)候，用戶無需關(guān)心計(jì)算資源的生產(chǎn)和管控，視圖計(jì)算會(huì)實(shí)現(xiàn)資源的彈性伸縮和多維度的負(fù)載均衡，并且保證就近接入。其中為了資源復(fù)用率的提升，視圖計(jì)算也會(huì)盡可能的將不同計(jì)算進(jìn)行混跑。

當(dāng)游戲開始運(yùn)行的時(shí)候，我們也會(huì)實(shí)時(shí)的對(duì)任務(wù)進(jìn)行畫像分析，動(dòng)態(tài)校準(zhǔn)資源消耗。比如游戲的接入人數(shù)、不同的分辨率、碼率和輸出規(guī)格等，都會(huì)一定程度上影響實(shí)際的資源消耗，整體的算力是動(dòng)態(tài)上下浮動(dòng)的，實(shí)時(shí)的動(dòng)態(tài)分析和校準(zhǔn)，可以保證調(diào)度的精準(zhǔn)度，最終帶來良好的游戲體感。

這種托管的模式，使終端不再需要具備復(fù)雜的計(jì)算能力，只需要簡(jiǎn)單的播放，即可享受超強(qiáng)的體驗(yàn)。對(duì)于云廠商來說能夠非常好的實(shí)現(xiàn)資源復(fù)用。同時(shí)對(duì)于客戶來說，可以更加靈活、敏捷的進(jìn)行部署和迭代，并且有效降低成本。

位置無感分布式協(xié)同存儲(chǔ)

視圖計(jì)算的另一個(gè)核心，是解決海量視圖數(shù)據(jù)的存儲(chǔ)問題。剛剛我們說到，終端上云往往具有位置分散、數(shù)據(jù)規(guī)模大、值密度極低的特點(diǎn)，同時(shí)還有一點(diǎn)就是帶寬反轉(zhuǎn)，上行帶寬遠(yuǎn)大于下行。長(zhǎng)期的回云會(huì)造成較大的帶寬壓力以及存儲(chǔ)成本，同時(shí)最重要的一點(diǎn)，無法保證就近、低延遲。

視圖計(jì)算提供了位置無感的分布式協(xié)同存儲(chǔ)。全球各地的數(shù)據(jù)源都可以通過視圖計(jì)算在邊緣節(jié)點(diǎn)就近存取，存儲(chǔ)的位置也會(huì)參考數(shù)據(jù)接入和計(jì)算的位置，確保整體親和性。

同時(shí)，視圖計(jì)算通過邊緣加速網(wǎng)絡(luò)解決了跨地域、跨運(yùn)營(yíng)商上傳延遲大、速度慢等問題，實(shí)現(xiàn)了回云的中轉(zhuǎn)加速，提供了高可靠的回云通路。

依靠新的協(xié)同存儲(chǔ)，我們可以將終端產(chǎn)生的大量視圖數(shù)據(jù)周期性的存儲(chǔ)在邊緣，比較典型的如攝像頭的周期錄像。同時(shí)依靠與計(jì)算相結(jié)合，我們可以將我們所關(guān)心的關(guān)鍵視頻片段以及AI分析等序列化的結(jié)果進(jìn)行回云，并長(zhǎng)期保存。

分布式協(xié)同存儲(chǔ)平臺(tái)

在整體架構(gòu)上，通過邊緣統(tǒng)一網(wǎng)關(guān)進(jìn)行異構(gòu)資源的適配，不管是從API、SDK還是授權(quán)體系，完全兼容現(xiàn)有的使用方式，這對(duì)于海量的存量設(shè)備來說，只需要簡(jiǎn)單配置，便可以快速將視圖數(shù)據(jù)上傳到協(xié)同存儲(chǔ)，從而確保給用戶云邊一體化的使用體驗(yàn)，并且整體傳輸速度提升40%以上。

基于多點(diǎn)協(xié)同調(diào)度的能力，它實(shí)現(xiàn)了視圖數(shù)據(jù)的就近存取，并且復(fù)用CDN場(chǎng)景下閑置的上行帶寬，從而最大限度的利用帶寬資源。同時(shí)它可以快速的根據(jù)單點(diǎn)水位進(jìn)行資源動(dòng)態(tài)規(guī)劃以及數(shù)據(jù)復(fù)制和遷移，實(shí)現(xiàn)服務(wù)的高可用和數(shù)據(jù)的高可靠，整個(gè)過程用戶無感知。

同時(shí)阿里云搭建了可靠、安全的數(shù)據(jù)回云通路，可以按需在閑時(shí)將數(shù)據(jù)中轉(zhuǎn)回云，從而實(shí)現(xiàn)數(shù)據(jù)的分級(jí)管理，用戶可以靈活調(diào)整數(shù)據(jù)價(jià)值和成本之間的平衡點(diǎn)。

視圖上云一站式PAAS服務(wù)

視圖計(jì)算提供了視圖上云的一站式PAAS服務(wù)，包括視圖數(shù)據(jù)的采集、計(jì)算、存儲(chǔ)以及內(nèi)容消費(fèi)。接下來我們將重點(diǎn)放到視圖終端的鏈接部分。

肖文鵬表示，鏈接的重心主要在于以下兩點(diǎn)：

第一，設(shè)備的接入和管控。如設(shè)備的錄入、認(rèn)證、事件采集等。同時(shí)也包含一些如語音對(duì)講、PTZ云臺(tái)、攝像頭機(jī)位控制等操作。

第二，視圖數(shù)據(jù)的接入和管理。如流媒體的接入、協(xié)議轉(zhuǎn)換、視圖上傳以及內(nèi)容檢索等。

鏈接是視圖上云的第一環(huán)，結(jié)合前面已經(jīng)介紹過的位置無感的計(jì)算平臺(tái)以及分布式協(xié)同存儲(chǔ)，共同構(gòu)成了視圖上云的一整套網(wǎng)、算、管、存體系。鏈接的易用性、安全性、可靠性等因素很大程度上決定了視圖上云的規(guī)模。

終端一鍵上云，引領(lǐng)行業(yè)從封閉走向開放

終端設(shè)備以及上云標(biāo)的準(zhǔn)具有多樣化的特性。以安防監(jiān)控領(lǐng)域?yàn)槔桶瑖鴺?biāo)28181、ONVIF等多種協(xié)議，同時(shí)很多設(shè)備廠商均創(chuàng)建了自己的私有協(xié)議，且協(xié)議相對(duì)各自封閉，這使得視圖上云增加了很大的適配難度，并且安全性、兼容性無法得到保障。

為了讓視圖終端更加便捷的一鍵上云，視圖計(jì)算推出了兩個(gè)安全、可靠的上云通道，即信令傳輸通道和數(shù)據(jù)傳輸通道。信令通道用于實(shí)現(xiàn)云與終端設(shè)備的信令控制和雙向通訊。數(shù)據(jù)通道用于流媒體等視圖內(nèi)容的接入與消費(fèi)。

同時(shí)我們也推出了開放設(shè)備上云協(xié)議ODCAP。它擁有多樣化的視圖終端適配性，支持主流信令傳輸如websocket、mqtt等。同時(shí)在數(shù)據(jù)傳輸上，支持rtmp、HLS、webrtc等流媒體傳輸協(xié)議。任何支持這類協(xié)議的終端，均可快速的使用開放協(xié)議一鍵上云。同時(shí)我們提供了透明的雙向通道，廠商和開發(fā)者也可按需自定義擴(kuò)展。

在安全性以及兼容性上，我們也做了一系列增強(qiáng)，保證了一鍵上云的開放性、易用性、安全性和靈活性。通過一鍵上云體系，我們希望能夠?qū)⒅盁o法上云的內(nèi)容快速上云，引領(lǐng)這些行業(yè)從封閉走向開放。

肖文鵬在研究最后表示，目前，視圖計(jì)算已經(jīng)在多樣化的場(chǎng)景下落地，持續(xù)為客戶提供優(yōu)質(zhì)、可靠的云服務(wù)。在未來，希望能夠和更多的行業(yè)伙伴一起持續(xù)探索，推動(dòng)整個(gè)邊緣云行業(yè)的快速發(fā)展，為客戶創(chuàng)造更大的價(jià)值！