BEV感(gan)知已成為引領高階自動駕駛(shi)量產的新范式(shi)。但(dan)是要實現(xian)BEV感(gan)知在車(che)端的規模(mo)化部署和落(luo)地(di)，并非易事。
首先，BEV感知(zhi)(zhi)大(da)(da)模型的(de)(de)訓(xun)練需(xu)要超大(da)(da)規(gui)模的(de)(de)算力和海(hai)量的(de)(de)高質量標注(zhu)數據(ju)支持，成本高且(qie)耗時長。其(qi)次，由于車(che)端資源和能耗的(de)(de)限(xian)制，訓(xun)練好的(de)(de)BEV感知(zhi)(zhi)大(da)(da)模型并不能直接部署到車(che)端，需(xu)要通過量化(hua)、壓(ya)縮等方式(shi)對模型進(jin)行優化(hua)，這(zhe)就(jiu)要求(qiu)開(kai)發(fa)人員具備極強的(de)(de)專業(ye)能力和豐富的(de)(de)開(kai)發(fa)經驗。由此(ci)可見(jian)，BEV感知(zhi)(zhi)在車(che)端規(gui)模化(hua)部署是一項極其(qi)復雜的(de)(de)系統性工程。
為了幫助開發者高效實(shi)現BEV感知在車端的部署與落地，地平線(xian)早在2021年(nian)發布新(xin)一代(dai)征程(cheng)(cheng)5車載智能(neng)芯片之時，就推出了基于征程(cheng)(cheng)5的純視覺BEV感知原型(xing)方案。
征程5基于貝葉(xie)斯(si)深(shen)度學(xue)習加(jia)速引(yin)擎打造(zao)，原生支(zhi)持BEV感(gan)知所大量使用(yong)的(de)Transformer模型。同時，征程5配備了(le)雙ISP、CV引(yin)擎、雙視覺DSP等豐富的(de)異構計(ji)算(suan)(suan)資源，能夠對(dui)車(che)端(duan)多(duo)路攝(she)像(xiang)頭數(shu)據進行(xing)畸變校正、拼接、3D場(chang)景重(zhong)構等視覺預處理工作，打破(po)了(le)BEV感(gan)知各個(ge)環節(jie)的(de)計(ji)算(suan)(suan)瓶頸(jing)。此外(wai)，地平(ping)線還提供芯片(pian)開(kai)發(fa)套(tao)件、域控(kong)參考設(she)計(ji)、芯片(pian)工具鏈及軟件開(kai)發(fa)平(ping)臺等，以幫(bang)助開(kai)發(fa)者充分(fen)利用(yong)征程5的(de)計(ji)算(suan)(suan)資源，加(jia)速BEV感(gan)知算(suan)(suan)法在車(che)端(duan)的(de)部署。
經(jing)過兩年的(de)(de)打(da)磨，地平線基于征程5芯(xin)片(pian)的(de)(de)BEV感知方案(an)有哪些最新進展？又將給業界帶來哪些驚喜呢(ni)？
8月24日19點，地平線聯合智東西公開課策劃推出的新一期地平線「你好，開發者」自動駕駛技術專場將開講，主題為《基于征程5芯片的BEV感知方案與部署實踐》，由地平線感知算法工程師朱紅梅主講。
朱紅梅博(bo)士首(shou)先會對(dui)BEV感知(zhi)框架進(jin)行(xing)全(quan)面介(jie)紹，之后將(jiang)講解(jie)時空融合模塊與(yu)芯(xin)片(pian)(pian)部署(shu)。接下來(lai)，她將(jiang)分別對(dui)靜態(tai)與(yu)Occupancy感知(zhi)要(yao)素、動態(tai)感知(zhi)預測端(duan)到端(duan)與(yu)芯(xin)片(pian)(pian)部署(shu)進(jin)行(xing)深入解(jie)析。最后，朱紅梅博(bo)士還會對(dui)BEV感知(zhi)方(fang)案的實車部署(shu)與(yu)閉環(huan)驗證進(jin)行(xing)解(jie)讀。
專場信息
主 題
《基于征程5芯片的BEV感知方案與部(bu)署實踐》
提 綱
1. BEV感知框架總體介紹
2. 時空融合模塊與芯片部署
3. 靜態與Occupancy感知要素解析
4. 動態感知預測端到端與芯片部署
5. 實車部署(shu)與閉(bi)環(huan)驗證
主 講 人
朱紅梅(mei)，地(di)平線感(gan)知(zhi)(zhi)算(suan)法工程(cheng)師。博士畢業(ye)于北京(jing)航空航天大學，研(yan)(yan)究方向為雙(shuang)目立(li)體視覺。2019年加入地(di)平線，先后(hou)主導掃地(di)機場景、車載多視角(jiao)深(shen)度估計算(suan)法研(yan)(yan)發、面向征(zheng)程(cheng)5芯片的BEV感(gan)知(zhi)(zhi)算(suan)法研(yan)(yan)發。目前負(fu)責推進基于征(zheng)程(cheng)5的BEV感(gan)知(zhi)(zhi)方案量產(chan)落地(di)。
直 播 時 間
8月24日19:00-20:30
