概念解析 | AutoFed:面向异构数据的联邦多模态自动驾驶的学习框架

AutoFed:面向异构数据的联邦多模态自动驾驶的学习框架

注1:本文系“概念解析”系列之一,致力于简洁清晰地解释、辨析复杂而专业的概念。本次辨析的概念是:面向异构数据的联邦学习在自动驾驶中的应用。
参考文献：Zheng T, Li A, Chen Z, et al. AutoFed: Heterogeneity-Aware Federated Multimodal Learning for Robust Autonomous Driving[J]. arXiv preprint arXiv:2302.08646, 2023.

背景介绍

自动驾驶技术正处于快速发展的阶段,目标是提供更高的安全性、更少的有害排放、更大的道路容量和更短的行程时间等广泛的好处。自动驾驶的核心是感知能力,即能够检测道路上的对象(如车辆、自行车、标志和行人等),这为路径规划和行动决策提供可解释的依据。正式来说,美国汽车工程师学会(SAE)要求3-5级自动驾驶系统能够在各种道路和天气条件下监控环境并检测对象。为达到这些目标,汽车上安装的多个传感器(如激光雷达、雷达和摄像头)可以协同工作,提供周边环境的互补和实时信息。

为了充分利用不同传感器提供的丰富多模态信息,许多之前的工作采用了深度学习进行多模态融合和模式识别,以进行准确可靠的目标检测。