
智東西(公眾號:zhidxcom)
作者 | 三北
編輯 | 漠影
視覺智能正為AIoT行業帶來「新故事」,也對通信連接技術提出「新要求」。
當下,視頻信息(xi)占據了(le)互聯網信息(xi)超82%,大(da)模型(xing)、泛智能的深化(hua)應用讓(rang)視頻場景(jing)變(bian)得更多元(yuan)復雜(za),AIoT產業關(guan)注(zhu)的焦點也不再是為攝像機(ji)、智慧屏幕、邊緣盒子等終(zhong)端和邊緣設備裝上「智能大(da)腦(nao)」,而是如(ru)何讓(rang)「智能大(da)腦(nao)」發揮效果(guo)。
用于支撐智能業務的底層網絡連接系統,正是迫切需要升級的一環。
10月24日,2023大華股份“星河璀璨 萬象新生”年度峰會在深圳圓滿結束。大華股份中央研究院、未來通信研究院院長鄧志吉在會上以《智融升級,視連未來》為主題發表演講,正式宣布未來通信研究院成立,并發布「3+N」融合連接能力體系,從端、云、網、智、生態全維度布局視覺智能新時代。
鄧(deng)志(zhi)吉告訴智東西,在(zai)傳統的視(shi)(shi)頻應(ying)用中,連(lian)接(jie)只需要保證設備在(zai)線(xian)、數據可連(lian)接(jie)就行了;但現在(zai),面向大(da)(da)規模視(shi)(shi)覺物聯的大(da)(da)算力、大(da)(da)模型應(ying)用,對網絡、數據獲取提出了更多需求,推動全連(lian)接(jie)技術實現跨(kua)代升級。
大模型時代,視覺智能對AIoT產業帶來了什么新變化?面向大規模視覺物聯的智能應用,又對通信技術提出哪些新需求?對此,大華股份有哪些獨特洞察和深遠布局?通過(guo)對(dui)(dui)話鄧志吉(ji),本文對(dui)(dui)這些問題(ti)進行了深入探討(tao)。
一、視覺智能帶來AIoT新故事,驅動未來網絡發展
AIoT行業的「新故事」在于視覺智能,視覺智能的進化正驅動未來網絡的發展。
鄧志吉告訴智東西,大模型等新技術已經在改變AIoT行業。在一些涉及較(jiao)不規則行為(wei)和事件的(de)(de)場(chang)景(jing)、素(su)材(cai)缺乏的(de)(de)識別(bie)場(chang)景(jing)、偏動態的(de)(de)復雜場(chang)景(jing)等,聚焦較(jiao)強推(tui)理能力(li)和泛化(hua)性(xing)的(de)(de)大模型已經發揮很多作用。大模型會大大提高(gao)數(shu)據(ju)的(de)(de)價值轉化(hua)率,形成一個遠大于原本視(shi)頻(pin)監控市(shi)場(chang)的(de)(de)數(shu)千億元級別(bie)新(xin)藍海。
回(hui)顧以(yi)(yi)前的(de)視(shi)覺(jue)智(zhi)能,更(geng)多(duo)是(shi)識(shi)別(bie)性(xing)應用。早期的(de)視(shi)覺(jue)智(zhi)能難(nan)以(yi)(yi)應對(dui)各種碎片(pian)化(hua)場景(jing),多(duo)用于替(ti)代人的(de)一些觀測性(xing)的(de)決策,智(zhi)能化(hua)程度有限。進入大(da)模型階(jie)段(duan),更(geng)多(duo)的(de)能力承載不(bu)是(shi)在識(shi)別(bie),而(er)是(shi)在認知,可以(yi)(yi)用來解決很多(duo)難(nan)做的(de)精(jing)準判斷(duan),行業價值不(bu)言而(er)喻。
“連接能力重要性此刻已經變得更強。”鄧志吉說:“機器決策的自主性增強(qiang)(qiang),要(yao)求數(shu)據在(zai)不同系統(tong)間動態交互的時效更(geng)強(qiang)(qiang)、可靠性更(geng)高,它就需要(yao)網絡(luo)體系要(yao)有一個新的能(neng)力架構。”
具體來看,面向大規模視覺物聯的智能應用,網絡需求至少發生了以下三大變化:
1、滿足海量和多種類數據連接需求。大規(gui)模數據量無需(xu)贅述,而大量的視(shi)(shi)覺(jue)內(nei)容通過邊緣端智能化識別(bie)之后,會產生很(hen)多結構化的感知數據,比如“讀表場景”中不是(shi)一(yi)個視(shi)(shi)頻傳回來(lai),而是(shi)表的數值,也要基于視(shi)(shi)覺(jue)網絡(luo)通路(lu)傳輸,要求連(lian)接能力增強。
2、需要它算得更快。因為智能(neng)化應(ying)(ying)用很難去建立(li)完(wan)整的邊(bian)緣計算(suan),更(geng)多還是(shi)云邊(bian)端協同的分布(bu)式(shi)算(suan)力應(ying)(ying)用,就(jiu)(jiu)需要(yao)數據(ju)(ju)在(zai)網絡中進行(xing)多次(ci)轉發(fa)。多次(ci)轉發(fa),就(jiu)(jiu)會(hui)導(dao)致(zhi)(zhi)數據(ju)(ju)延遲、丟包重傳(chuan)概率增大(da),導(dao)致(zhi)(zhi)數據(ju)(ju)傳(chuan)輸延遲變大(da)。
“你不知(zhi)道給一(yi)個結果(guo),它什么時候能算出來,有(you)可能是0.1秒(miao)(miao),也有(you)可能是2秒(miao)(miao)。所以它的波動會導致很多(duo)應用無法保證實(shi)時性。”鄧志吉(ji)說(shuo)。
3、要用得更好。這其實是涉及到打破「數據孤島」的問題。不同網絡系統的網絡協議是不同的,網絡數據格式也不同,需要網絡在處理數據時打通他們之間的信息解析力、互聯互通性和兼容性。所以,我們需要面向大規模視覺連接的大模型應用,打造所需要的「基礎承載網絡」。
值得一提的是,這里提到的「基礎承載網絡」,與我們常見的通用ICT網絡有所區別。傳統(tong)網絡系統(tong)主要的(de)(de)(de)功能是數(shu)據(ju)傳輸,對數(shu)據(ju)內容及數(shu)據(ju)應用意圖(tu)的(de)(de)(de)理解是沒有的(de)(de)(de)。所(suo)以大(da)華(hua)股份認為,其需(xu)要在(zai)ICT的(de)(de)(de)基礎設施(shi)網絡之上,對專用的(de)(de)(de)網絡系統(tong)做研究。
為此,大華股份面向大模型時代對網絡的特殊要求,通過創立未來通信研究院,以及構建體系化的全連接能力底座,來支撐未來的大規模視覺下的智能化應用。
▲大華股(gu)份中央研(yan)究(jiu)(jiu)院、未來通信研(yan)究(jiu)(jiu)院院長(chang)鄧(deng)志吉
二、從全連接到融合連接,「3+N」補齊視覺智能落地短板
構建(jian)未來智能網(wang)絡,是推動AI發(fa)展的重大需(xu)求(qiu)。
“我們(men)要讓網(wang)絡理解數據(ju),讓數據(ju)跟隨網(wang)絡進行動(dong)態地(di)適應。”鄧志吉談及大華股份未來通信研究院的研究重點時說,“以前是適應不同的網絡,現在是要跟不同的網絡進行融合增強。”
適應跟融合最大的區別是什么?
鄧志吉告訴智東西,流媒體過去的傳輸模式,對網絡的適用性極差。“發(fa)一(yi)個數據,等網絡確認(ren)一(yi)下(xia),你沒有收到就給說(shuo)一(yi)下(xia),或者(zhe)是超時了(le),然后就再(zai)重發(fa)一(yi)個。”
進入AIoT時代,大華股份推出的感知系統首先能夠“適應網絡”,簡單說,就是去根據對網絡的預測來調整收發策略。比如(ru),當發現網絡的帶寬已經開始下降(jiang),系統就會調整發送(song)序列及時發出(chu);如(ru)果網絡丟包(bao)率變(bian)高(gao)了,這(zhe)時就不(bu)進行重傳而是進行糾錯(cuo),把它恢復。這(zhe)樣(yang)就可以讓數(shu)(shu)據傳遞(di)過程更具(ju)有(you)適應能力,讓數(shu)(shu)據對(dui)網絡有(you)一定的抗(kang)性。
進入新的視覺智能時代,在適應網絡的基礎上,我們則需要進一步尋求融合連接。視覺類(lei)智(zhi)能(neng)應用(yong)對數(shu)據傳輸提出了一(yi)些特殊的(de)網絡性能(neng)要求,鄧志吉(ji)告訴智(zhi)東西,大華股份團隊在研(yan)發過程中(zhong)發現(xian),它不能(neng)按照功能(neng)性的(de)開發來作為(wei)能(neng)力承(cheng)載,而是需要系統級的(de)云(yun)-邊-端-網”的(de)協同(tong)能(neng)力提升,這就(jiu)是融合(he)連接。
比如大華股(gu)份重構了交換設備的底(di)層系統平臺,以此(ci)支持(chi)數據(ju)(ju)在網(wang)絡(luo)中(zhong)做預處(chu)理(li),交換機能(neng)理(li)解傳(chuan)入的數據(ju)(ju)是什么并(bing)進行一些處(chu)置(zhi),就能(neng)避免數據(ju)(ju)因為網(wang)絡(luo)傳(chuan)遞不好而出(chu)現大量的丟包、重傳(chuan)等(deng)故障。通過這樣的融合連接,我們能(neng)實(shi)現傳(chuan)輸速(su)度和算(suan)力(li)平臺壓力(li)紓解。
那么如何實現從適應網絡到融合增強的跨越?
大華股份推出了一個全新的「3+N」能力架構。鄧志吉談道,這是一個承載各種(zhong)網絡基礎設施的能(neng)力底(di)座。
這一能(neng)力底座可以用于交換機、網關、邊緣計算甚至是攝像機產(chan)品,讓這些網絡(luo)基礎設施(shi)就有很強(qiang)的(de)視覺適應性(xing)和智能(neng)增強(qiang)性(xing)。
具體來說,「3+N」中的「3」是指3個用于融合連接的重要技術基座:第一大技(ji)術底座是“多網(wang)(wang)(wang)融合,一網(wang)(wang)(wang)統(tong)管(guan)”,讓復雜的(de)(de)(de)網(wang)(wang)(wang)絡更簡單化的(de)(de)(de)管(guan)理:第二個技(ji)術底座是打(da)造了大華股份專用(yong)的(de)(de)(de)網(wang)(wang)(wang)絡操作(zuo)系統(tong);第三是構(gou)建了專用(yong)的(de)(de)(de)視網(wang)(wang)(wang)融合協議,使云邊(bian)端網(wang)(wang)(wang)實現貫通互聯(lian)。
「3+N」中的「N」是指N個面向視頻視覺智能應用的增強特性。通過在(zai)視(shi)頻領域的(de)(de)(de)多年積累和對(dui)視(shi)頻的(de)(de)(de)深(shen)入理解,大華股份構建了N項的(de)(de)(de)視(shi)頻增(zeng)強特性,讓(rang)整個網(wang)絡(luo)系(xi)統,在(zai)傳遞(di)視(shi)頻數據的(de)(de)(de)時(shi)候更加的(de)(de)(de)高效。
2021年,大華股份提出了全感知、全計算、全智能、全連接、全生態“五全”能力戰略定位。時隔一年,大華股份對「五全」進行了全新思考,使得“全連接”能力進一步升級為“融合連接”。
對于大華股(gu)份來說,全(quan)感知(zhi)一直都是(shi)其長板(ban)(ban),是(shi)立身(shen)之(zhi)本(ben)。全(quan)計算和全(quan)智(zhi)能,是(shi)其在(zai)發展過(guo)程中很重(zhong)要的(de)能力增強的(de)地方,是(shi)主要投入點。全(quan)連接(jie)的(de)升級,其實是(shi)隨著智(zhi)能和計算的(de)發展而提出來的(de),這個就(jiu)是(shi)新的(de)要求(qiu),大華股(gu)份要在(zai)它變成短(duan)板(ban)(ban)之(zhi)前就(jiu)把它補上去。
鄧志吉告訴智東西,隨時間變遷,大華股份始終堅持“五全”能力底座,同時具體內容填充發生了變化。“五個碗,以前我裝的是米,現在裝的是肉,以前是求飽,現在要吃的好。”「五全」的升級是木桶的短板和長板兩個效應的并發。
三、布局未來通信:業隨網動,網隨業優
大華股份未來通信研究院積極布局“融合連接”,是要用最懂視頻的網絡,讓數據連得更多、算得更快、用得更好。
按照大華股份的布局,融合連接主要在以下三個層次進行融合:
1、業網融合。要讓網(wang)絡(luo)理解當(dang)前(qian)的(de)業(ye)務(wu)意圖(tu)。比如(ru)當(dang)前(qian)的(de)業(ye)務(wu)意圖(tu)是決策(ce)(ce)性(xing)業(ye)務(wu),要時(shi)效(xiao)性(xing),網(wang)絡(luo)傳遞數(shu)據(ju)(ju)的(de)時(shi)候要進行優先(xian)級的(de)調(diao)度,保證決策(ce)(ce)數(shu)據(ju)(ju)的(de)優先(xian)傳輸。業(ye)務(wu)要實時(shi)根據(ju)(ju)網(wang)絡(luo)的(de)動(dong)(dong)態性(xing)調(diao)整數(shu)據(ju)(ju)傳遞的(de)一(yi)種策(ce)(ce)略,從而保證在動(dong)(dong)態網(wang)絡(luo)當(dang)中有(you)確定性(xing)的(de)業(ye)務(wu)延遲,做到「業(ye)隨網(wang)動(dong)(dong),網(wang)隨業(ye)優」。
2、數網融合。因為我們(men)(men)大部分復雜動態(tai)(tai)的(de)(de)分布式智能計(ji)算,都需要將數據進(jin)行不(bu)同網(wang)絡(luo)路徑的(de)(de)傳輸,對(dui)于網(wang)絡(luo)系統(tong)來說造(zao)成了很(hen)大的(de)(de)數據傳送壓力,并且因為網(wang)絡(luo)的(de)(de)擁堵網(wang)絡(luo)狀(zhuang)態(tai)(tai)的(de)(de)某一段(duan)不(bu)好,導致整個網(wang)絡(luo)出現(xian)重傳,因此在(zai)網(wang)絡(luo)當中(zhong)會出現(xian)很(hen)大的(de)(de)數據壓力。所以我們(men)(men)在(zai)網(wang)絡(luo)當中(zhong)數網(wang)融合就是做網(wang)絡(luo)計(ji)算,讓網(wang)絡(luo)進(jin)行標準化的(de)(de)處理。
大華股份前(qian)段(duan)時間發布了很核心(xin)的(de)(de)新技術,在網(wang)絡(luo)設(she)備(bei)內置(zhi)了流媒(mei)體調度引擎,可(ke)以監測網(wang)絡(luo)設(she)備(bei)連接的(de)(de)數(shu)(shu)據到底是不(bu)是流媒(mei)體的(de)(de)數(shu)(shu)據,并且根據流媒(mei)體數(shu)(shu)據的(de)(de)持續(xu)特征,對連接的(de)(de)視頻終端持續(xu)調整。
3、網網融合。在(zai)同(tong)(tong)一個場(chang)景(jing)當中,智能(neng)化會催生(sheng)多樣化的(de)(de)業務,在(zai)同(tong)(tong)一個場(chang)景(jing)有不同(tong)(tong)物理(li)場(chang)景(jing)的(de)(de)網(wang)(wang)(wang)絡同(tong)(tong)時(shi)部署,像對低功耗的(de)(de)大(da)概率用藍(lan)牙,對于低延(yan)遲的(de)(de)網(wang)(wang)(wang)絡可(ke)能(neng)選擇5G,大(da)帶寬的(de)(de)網(wang)(wang)(wang)絡可(ke)能(neng)選擇無線,這些不同(tong)(tong)的(de)(de)網(wang)(wang)(wang)絡如何進行統一的(de)(de)管(guan)理(li)、統一的(de)(de)部署和(he)統一的(de)(de)運維,在(zai)未來的(de)(de)復雜網(wang)(wang)(wang)絡當中對工程(cheng)化實施和(he)極簡化管(guan)理(li)提出了(le)重大(da)挑戰。
構(gou)建網網融合(he)(he)的統(tong)一管理架(jia)構(gou),是大華(hua)股份在(zai)融合(he)(he)連接(jie)能力(li)很重要的核心。通(tong)過構(gou)建融合(he)(he)連接(jie)的新能力(li),可以讓業務系(xi)統(tong)更精簡,業務應用更穩(wen)定,這就是大華(hua)股份最核心的全連接(jie)網網融合(he)(he)的能力(li)。
沿著融合連接的三大層次,大華股份未來通信研究院主要有三大研究主線:
第一條是連接能力研究,主要是面向新的網絡類型去構建所需的連接系統。第二條是在數據交換,主要從物理層、數據層和應用層,構建云邊端網的一體化交換能力。第三條是研究更前沿的新一代通信技術,比如說(shuo)通(tong)感一(yi)體化語義通(tong)信等。這塊是(shi)為了讓連接促進整個數字(zi)化系統的(de)顛(dian)覆(fu)式發展,它是(shi)螺旋(xuan)上升的(de)一(yi)個關鍵。
鄧志吉(ji)談道,在大模型時(shi)代做(zuo)通信(xin)研究(jiu),大華(hua)股(gu)份(fen)是(shi)最懂(dong)AIoT數據的團隊。
“這(zhe)么多年以(yi)來,我(wo)(wo)們(men)積累了對視頻數(shu)據(ju)(ju)和智能化應(ying)用的理(li)解(jie),所(suo)以(yi)對網絡傳輸業務的意(yi)圖有一(yi)定的理(li)解(jie)力(li)。在做通信能力(li)構建的時候,我(wo)(wo)們(men)更能讓通信能力(li)適用于業務所(suo)需的數(shu)據(ju)(ju)傳輸要求。所(suo)以(yi)我(wo)(wo)們(men)是最懂(dong)AIoT數(shu)據(ju)(ju)的連(lian)接(jie)系統構建廠家。”
可以看到,大華股份不僅要做大模型時代的智能感知龍頭,還要親自上陣做大模型時代的「水管工」,促進像水一樣的海量數據實現融合連接,打造視覺智能落地的「新管道」。
結語:從全連接到融合連接,推動視覺智能加速落地
隨著大(da)模(mo)型掀起AI新浪潮,作為AI落(luo)地一大(da)最佳場景的AIoT領(ling)域也有了「新故(gu)事(shi)(shi)」。「新故(gu)事(shi)(shi)」怎么講,這不僅涉及(ji)行(xing)業大(da)模(mo)型算法的研發(fa),還(huan)涉及(ji)端、邊、網(wang)、云(yun)、生態等各(ge)個維度能力(li)的配合,是一件長板和短板效應(ying)并發(fa)的事(shi)(shi)。
作為(wei)AIoT領域的(de)行業(ye)龍頭,大(da)(da)(da)(da)華股份從系統全面的(de)視角(jiao),更(geng)(geng)新其(qi)“五全”能(neng)力底座(zuo)(zuo)和(he)五大(da)(da)(da)(da)研(yan)究院體系,為(wei)大(da)(da)(da)(da)模型落(luo)地提供(gong)了制度(du)保障。大(da)(da)(da)(da)華股份未來通信研(yan)究院通過「3+N」架構打造融合(he)連接的(de)底座(zuo)(zuo)能(neng)力,有(you)望成(cheng)為(wei)其(qi)在(zai)視覺智能(neng)時(shi)代一道新的(de)技術(shu)護城河。與此同時(shi),這一領域當下尚且(qie)沒有(you)更(geng)(geng)多(duo)的(de)技術(shu)參考,需(xu)要大(da)(da)(da)(da)華股份克服更(geng)(geng)多(duo)未知的(de)挑戰。