FastBEV 作者首次公开解读---《中低算力平台友好的环视特征融合方案》完整视频版

文摘   2024-08-20 09:42   上海  

    不知不觉中自动驾驶之星社区群迎来了第一次线上分享讨论,很感谢斌哥(黄斌 FastBEV 作者)对社区的支持,在这里带来了他关于Fast BEV 对外的首次分享。

点击下方卡片,关注“自动驾驶之星


《中低算力平台友好的环视特征融合方案》完整视频版

1) 车端感知算法变迁的过程

      首先介绍了目前车端感知算法的变迁,每一代量产算法的变迁都是为了解决上一代算法的痛点问题。从2D方案,到单目3D,在到单帧环视3D,在到时序环视3D,到目前的夺传感器融合,以及目前大家期待的端到端方案。

2)BEV 网络与Occupancy 之间的关系

主要讲述了BEV 和Occupancy结构之间的联系,以及在BEV空间中遇到的耗时问题在Occupancy空间中显得更加严重,因此想在车端芯片上把网络跑到实时,加速是一个必然的事情。

3)  FastBEV 核心设计灵感来源

讲述了2D to 3D 特征是如何进行转换的,并分析了目前BEV网络结构中耗时的原因,通过对M2BEV 网络结构的分析,引出了当初设计FastBEV 查找表的设计思路,并分析了FastBEV查找表设计时遇到的一些问题,以及当时是如何思考的,并分享了FastBEV 落地的一些经验。本段是整个FastBEV 分享中的核心内容

4) FastBEV 网络的主要贡献

    在分享的最后,回顾了FastBEV 网络设计的主要贡献。

  1)FastBEV 论证了在对齐训练Trick 的情况下, 基于深度均匀假设的环视特征融合方案相比于其他dense 方案进度损失很小

  2)支持了查找表优化和多合一voxel 加速,可实现优异的跨平台&不同算力高效部署性能,使得在低算力平台快速部署环视BEV 模型成为可能

      3) 2D 转3D 算子作为环视感知方案的核心组建,其优化可赋能任何基于Dense BEV feature的下游任务

5)最后的彩蛋
    
关于FastBEV 我们还会有一个完整版的内容解读,望大家多多关注!
【自动驾驶之星】技术交流群
自动驾驶之星是面向自动驾驶&智能座舱量产向相关的交流社区,由业内顶尖的自动驾驶量产团队创办!聚焦端到端自动驾驶方案、时空BEV模型、重感知轻地图方案多传感器融合技术、云端数据挖掘、智能座舱技术方案求职交流等方向。扫码添加小助理微信邀请入群,备注:学校/公司+方向+昵称(快速入群方式)
【自动驾驶之星】知识星球

自动驾驶之星知识星球主打自动驾驶量产全技术栈学习,星球内部形成了BEV/车道线/Occ、端到端大模型、VLM大模型智能座舱大模型等等近8个全栈学习路线,并包括: 学习板块,求职面试,有问必答,论文速递,行业动态五大板块!以及三大专栏: 自动驾驶量产经历,360全景环视原理与代码实战,经典论文解读!每天分享干货、代码与论文,星球内嘉宾日常答疑解惑,交流工作与职场问题。

端到端自动驾驶
关注AD(Autonomous Driving)行业最前沿的人工智能解决方案,致力于打造为一个自动驾驶从业者及相关科研学者们的课外充电,技术分享,以及社区交流的服务平台!
 最新文章