端到端自動駕駛目前逐漸被認為是實現完全自動駕駛的最優解,受到了學術界和產業界的廣泛關注。然而,最近的研究表明,近年來涌現的不少端到端自動駕駛模型,在規劃范式上存在一定問題。

近期,NVIDIA 研究團隊提出了一種新型的端到端自動駕駛框架 Hydra-MDP。在 CVPR 2024 NAVSIM(大規模端到端駕駛)挑戰賽中,Hydra-MDP 獲得了第一名和創新獎,并且在 nuPlan 基準測試中的表現優于當前最先進的規劃器。

Hydra-MDP 框架采用新穎的多教師、學生-教師知識蒸餾架構,整合了來自人類和基于規則的規劃器的知識。借助基于規則的教師知識,Hydra-MDP 可以學習環境如何以端到端的方式影響規劃,而不是求助于無差別的后處理,使其在不同駕駛環境和條件下的通用性有了顯著提高。

CVPR’24 Navsim挑戰賽冠軍方案!NVIDIA Hydra-MDP:端到端自動駕駛規劃新范式 | 公開課預告

有別于其他端到端模型所主要采用的“單模式規劃+單目標學習”或“多模式規劃+單目標學習”規劃范式,Hydra-MDP 開創了“多模式規劃+多目標學習”這一全新規劃范式。
Hydra-MDP 將為基于機器學習的規劃系統在自動駕駛中的應用開辟一條前景廣闊的道路,有望推動端到端自動駕駛的大規模實現。

為了幫助開發者深入了解 Hydra-MDP 這一通用的端到端規劃范式,智猩猩聯合 NVIDIA 策劃推出「猩猩公開課 NVIDIA 端到端自動駕駛專場」。公開課邀請到 Hydra-MDP 論文第一作者、NVIDIA 自動駕駛團隊深度學習和計算機視覺方向李臻欣于9月10日進行直播講解,主題為《探索端到端自動駕駛規劃新范式》。

在簡要概述端到端自動駕駛后,李臻欣將介紹CVPR 2024 NAVSIM挑戰賽的背景。接下來,他將對比分析端到端模型的規劃范式,重點探討如何運用Hydra-MDP這一新范式實現大規模端到端駕駛。最后會對可視化效果進行分析及總結。

CVPR’24 Navsim挑戰賽冠軍方案!NVIDIA Hydra-MDP:端到端自動駕駛規劃新范式 | 公開課預告

公開課信息

主 題?

《探索端到端自動駕駛規劃新范式》

提 綱?
1、端到端自動駕駛概述
2、CVPR 2024 大規模端到端駕駛挑戰賽背景
3、端到端模型的規劃范式對比及問題
4、借助 Hydra-MDP 新范式實現大規模端到端駕駛
5、可視化分析及總結

?主 講 人?

李臻欣,NVIDIA 自動駕駛團隊深度學習和計算機視覺方向

復旦大學碩士生在讀,師從吳祖煊教授與姜育剛教授。在 NVIDIA 的主要研究興趣方向為3D 視覺與自動駕駛。提出過 BEVNext、Hydra-MDP 工作。Hydra-MDP 方法在2024年的 CVPR Navsim 挑戰賽中獲得第一名。

?直 播 時 間?

9月10日 19:00

報名方式

對此次公開課感興趣的朋友,可以掃描下方二維碼添加小助手小艾進行報名。已經添加小艾的老朋友,可以給小艾私信,發送“端到端”即可報名。我們會為報名成功的朋友推送直播鏈接。

同時,本次公開課也組建了交流群,直播開始前會邀請相關朋友入群交流。

CVPR’24 Navsim挑戰賽冠軍方案!NVIDIA Hydra-MDP:端到端自動駕駛規劃新范式 | 公開課預告