BEV感(gan)(gan)知已成為引(yin)領(ling)高階(jie)自動駕駛量產的新范式。但是要實現BEV感(gan)(gan)知在車端的規模化部署和落(luo)地(di)，并非(fei)易事。
首先(xian)，BEV感知大模(mo)(mo)型(xing)的(de)訓(xun)練需要(yao)超大規(gui)模(mo)(mo)的(de)算力(li)和海量的(de)高(gao)(gao)質(zhi)量標注數據支持，成本高(gao)(gao)且耗時長(chang)。其次，由于(yu)車端(duan)(duan)資源和能(neng)耗的(de)限制，訓(xun)練好的(de)BEV感知大模(mo)(mo)型(xing)并不能(neng)直(zhi)接部署到車端(duan)(duan)，需要(yao)通過量化、壓縮等方式對模(mo)(mo)型(xing)進(jin)行優化，這(zhe)就要(yao)求開(kai)發人員具備極強的(de)專業(ye)能(neng)力(li)和豐富的(de)開(kai)發經驗。由此可見，BEV感知在車端(duan)(duan)規(gui)模(mo)(mo)化部署是一項(xiang)極其復雜的(de)系統性工程。
為了(le)幫(bang)助開發者(zhe)高效實現BEV感知(zhi)在車端的部署與(yu)落地，地平線早在2021年發布新一代征(zheng)(zheng)程5車載智能(neng)芯片之(zhi)時，就推出了(le)基于征(zheng)(zheng)程5的純視(shi)覺BEV感知(zhi)原型(xing)方案(an)。
征程5基于貝葉斯深度學習加速引擎打(da)(da)造，原生支持(chi)BEV感知所大量使用的Transformer模型。同時(shi)，征程5配備了(le)雙ISP、CV引擎、雙視覺(jue)DSP等(deng)豐(feng)富(fu)的異構(gou)(gou)計(ji)算(suan)資源，能夠對車(che)端(duan)多(duo)路(lu)攝像頭數據進行畸變(bian)校正、拼(pin)接、3D場景重(zhong)構(gou)(gou)等(deng)視覺(jue)預處(chu)理工作(zuo)，打(da)(da)破(po)了(le)BEV感知各個(ge)環節的計(ji)算(suan)瓶頸。此(ci)外(wai)，地(di)平線還提供芯片(pian)開發(fa)套件(jian)、域控(kong)參(can)考(kao)設計(ji)、芯片(pian)工具鏈(lian)及軟(ruan)件(jian)開發(fa)平臺等(deng)，以幫(bang)助(zhu)開發(fa)者充分利用征程5的計(ji)算(suan)資源，加速BEV感知算(suan)法在車(che)端(duan)的部署。
經(jing)過(guo)兩年的打(da)磨(mo)，地平線基(ji)于征程5芯(xin)片(pian)的BEV感知(zhi)方(fang)案有哪些(xie)最新進展(zhan)？又將(jiang)給業界帶來哪些(xie)驚喜(xi)呢(ni)？
8月24日19點，地平線聯合智東西公開課策劃推出的新一期地平線「你好，開發者」自動駕駛技術專場將開講，主題為《基于征程5芯片的BEV感知方案與部署實踐》，由地平線感知算法工程師朱紅梅主講。
朱紅梅(mei)博(bo)士首(shou)先會對(dui)(dui)BEV感(gan)(gan)知框架進行全面(mian)介紹，之后(hou)將講解時空融(rong)合模(mo)塊與(yu)芯片(pian)部署(shu)。接下(xia)來(lai)，她將分別對(dui)(dui)靜態(tai)與(yu)Occupancy感(gan)(gan)知要素、動態(tai)感(gan)(gan)知預測端(duan)(duan)到端(duan)(duan)與(yu)芯片(pian)部署(shu)進行深入(ru)解析。最后(hou)，朱紅梅(mei)博(bo)士還(huan)會對(dui)(dui)BEV感(gan)(gan)知方(fang)案的實車部署(shu)與(yu)閉環驗證進行解讀。
專場信息
主 題
《基于征程5芯(xin)片的BEV感知方案與部署實踐》
提 綱
1. BEV感知框架總體介紹
2. 時空融合模塊與芯片部署
3. 靜態與Occupancy感知要素解析
4. 動態感知預測端到端與芯片部署
5. 實(shi)車部署與閉(bi)環驗證
主 講 人
朱紅梅，地(di)平線感知(zhi)算法(fa)(fa)工程(cheng)師。博士畢(bi)業于(yu)北京航(hang)空航(hang)天大(da)學，研究方向為雙目(mu)(mu)立體視覺。2019年加入地(di)平線，先后主導掃地(di)機(ji)場景(jing)、車(che)載多視角深度估計算法(fa)(fa)研發、面向征程(cheng)5芯片的BEV感知(zhi)算法(fa)(fa)研發。目(mu)(mu)前(qian)負責推進基于(yu)征程(cheng)5的BEV感知(zhi)方案(an)量產(chan)落地(di)。
直 播 時 間
8月24日19:00-20:30
