编辑 | 地平线HorizonRobotics
点击下方卡片,关注“自动驾驶之心”公众号
ADAS巨卷干货,即可获取
点击进入→自动驾驶之心技术交流群
本文只做学术分享,如有侵权,联系删文
1月22日,地平线将业内领先的纯视觉自动驾驶算法——Sparse4D系列算法开源,推动行业更多开发者共同参与到端到端自动驾驶、稀疏感知等前沿技术方向的探索中。目前,Sparse4D算法已在GitHub平台上线,开发者可关注地平线GitHub官方账号“Horizon Robotics”获取源码。
Sparse4D是迈向长时序稀疏化3D目标检测的系列算法,属于时序多视角融合感知技术的范畴。面向稀疏化感知的行业发展趋势,Sparse4D搭建了纯稀疏的融合感知框架,让感知算法效率更高、精度更高,让感知系统更简洁。相比稠密BEV算法,Sparse4D降低了计算复杂度,打破了算力对感知范围的限制,在感知效果和推理速度上,都实现了对稠密BEV算法的超越。在nuScenes纯视觉3D检测和3D跟踪两个榜单上,Sparse4D均位列第一,成为SOTA,领先于包括SOLOFusion、BEVFormer v2和StreamPETR在内的一众最新方法。
Sparse4D算法架构
历经三版迭代,地平线Sparse4D团队接连攻克了提升稀疏算法性能、降低时序融合计算复杂度、实现端到端目标跟踪等技术难关,于近期发表了论文《Sparse4D v3: Advancing End-to-End 3D Detection and Tracking》。基于地平线业务数据,Sparse4D已完成性能验证,在地平线征程5计算方案上实现了部署。根据规划,Sparse4D将应用于地平线下一代产品中。
地平线副总裁兼软件平台产品线总裁余轶南博士认为:“行业已经进入感知端到端的时代,一个网络即可完成整个感知的任务。Sparse4D系列算法将稀疏类算法的性能提升到了一个新的高度,并实现了端到端的多目标跟踪,无论对于稀疏感知还是端到端自动驾驶都具有里程碑意义。地平线选择将Sparse4D开源给全行业,我们期待与行业的优秀开发者共同进步。”
传统感知系统和端到端感知系统的对比
此次Sparse4D系列算法的开源,是地平线积极参与智能驾驶开源软件生态建设的又一范例。在可预见的未来,Sparse4D有望得到行业开发者的广泛应用,极大推进纯视觉、端到端自动驾驶的落地进程。此外,地平线近期还开源了基于矢量化场景表征的端到端自动驾驶算法VAD、端到端矢量地图在线构建方法MapTR等领先技术,持续推动行业加速发展。
让技术的源头活水灌溉智能汽车产业生态的千亩良田,地平线致力于将自主创新的技术、突破性产品与解决方案转化为更多智能汽车产业生态合作伙伴的商业价值,与产业各方紧密协同、开放融合、合作创新。在自动驾驶量产的破局之路上,地平线将继续拥抱开源开放,让前沿技术更快走向量产落地,与行业共赢广阔未来。
投稿作者为『自动驾驶之心知识星球』特邀嘉宾,欢迎加入交流!
① 全网独家视频课程
BEV感知、毫米波雷达视觉融合、多传感器标定、多传感器融合、多模态3D目标检测、车道线检测、轨迹预测、在线高精地图、世界模型、点云3D目标检测、目标跟踪、Occupancy、cuda与TensorRT模型部署、大模型与自动驾驶、Nerf、语义分割、自动驾驶仿真、传感器部署、决策规划、轨迹预测等多个方向学习视频(扫码即可学习)
![b24d1ee3e0ea9c3932191027e8828fb4.png](https://i-blog.csdnimg.cn/blog_migrate/a81adc9a26fb05e584bf9da88147a6e0.png)
② 国内首个自动驾驶学习社区
近2400人的交流社区,涉及30+自动驾驶技术栈学习路线,想要了解更多自动驾驶感知(2D检测、分割、2D/3D车道线、BEV感知、3D目标检测、Occupancy、多传感器融合、多传感器标定、目标跟踪、光流估计)、自动驾驶定位建图(SLAM、高精地图、局部在线地图)、自动驾驶规划控制/轨迹预测等领域技术方案、AI模型部署落地实战、行业动态、岗位发布,欢迎扫描下方二维码,加入自动驾驶之心知识星球,这是一个真正有干货的地方,与领域大佬交流入门、学习、工作、跳槽上的各类难题,日常分享论文+代码+视频,期待交流!
![c834a5ae8fb3a2fb51425b3d311b1095.png](https://i-blog.csdnimg.cn/blog_migrate/64ffed84ad83020dd6d39c81d48718f2.png)
③【自动驾驶之心】技术交流群
自动驾驶之心是首个自动驾驶开发者社区,聚焦目标检测、语义分割、全景分割、实例分割、关键点检测、车道线、目标跟踪、3D目标检测、BEV感知、多模态感知、Occupancy、多传感器融合、transformer、大模型、点云处理、端到端自动驾驶、SLAM、光流估计、深度估计、轨迹预测、高精地图、NeRF、规划控制、模型部署落地、自动驾驶仿真测试、产品经理、硬件配置、AI求职交流等方向。扫码添加汽车人助理微信邀请入群,备注:学校/公司+方向+昵称(快速入群方式)
④【自动驾驶之心】平台矩阵,欢迎联系我们!