Mobileye REM地图如何解决高精地图落地难点

已于 2024-12-23 09:56:51 修改
阅读量5.8k 收藏 27
点赞数 7
分类专栏： # 地图与定位 文章标签： 自动驾驶
于 2021-02-12 15:55:02 首次发布
原文链接：https://mp.weixin.qq.com/s/P-InX0BuLp1UIkuSFAyUBA
版权
本文探讨了高精地图在自动驾驶中的重要性，尤其是规模化、鲜度和精度的挑战，Mobileye通过众包和REM技术解决了这些问题，强调了局部精度和数据处理流程。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

图片

1. 为什么需要高精地图

理论上来讲，可以在车载系统检测和获取所有道路信息（可行驶路径、车道优先级、红绿灯与车道的关联关系、车道与人行横道与红绿灯的关系等），但是目前的AI能力无法保证实现很高的MTBF（Mean Time Between Failures，平均无故障时间），所以需要提前把这些信息都准备好。

图片

2. 高精地图的挑战

2.1. 规模化-Scale

如果自动驾驶车辆只在一个区域、一个城市、或者几个城市运营，那就不存在规模化的问题。但是2025年之后，自动驾驶会在消费者层面全面落地，用户需要驾车到任意想去的地方，在这种场景下，Scale是一个无法规避的问题。

2.2. 鲜度-Fresh

理想情况下，地图是在实时更新的。当物理环境发生变化时，需要实时反映到地图上。月级更新、甚至天级更新都是不够的，我们需要做到分钟级，甚至更短。

2.3. 精度-Accuracy

车载系统(OnBoard System)检测的车辆和行人需要与高精地图(High Definiation Map)实现厘米级精度的匹配，因此地图的精度至关重要。

图片

3. 通用高精地图制作方法的缺陷

图片

3.1. 全局坐标系下厘米级精度不是必需的

AV车辆行驶过程中只关注周围几百米范围即可，所以只要这个范围内的足够准确即可。至于几公里之外的全局精度，Who Care...

图片

3.2. 语义层数据生产难以自动化

图片

如下图所示，没有车道线的双向车道，单从图像观察，难以识别它的Drive Path。

图片

如下图所示，转向规则千奇百怪：禁止红灯右转，完全停车后允许红灯右转，绿灯禁止左转，绿灯Yield后允许左转...

图片

如下图所示，红绿灯异常复杂，识别车道、人行横道与红绿灯的关联关系难度很大...

图片

如下图所示，除非地图可以表达所有的3D要素，否则很难自动化的计算出车道的最优Stop/Yield Point。但是表达所有的3D信息对于地图来说又是不现实的...

图片

影响车辆行驶速度的因素有很多，道路几何、限速、文化等，难以量化，但它对Smooth Driving体验至关重要...

图片

4. Mobileye如何解决这些问题

scalability依赖众包数据生成Millions Map Agents；Accuracy不是全局的Accuracy，而是局部的Accuracy，相对于道路上的静态元素位置。

图片

REM的处理流程如下，首先从成百上千辆车获取检测信息（没有使用差分GPS，而是使用了普通的GPS），这些数据传送到云端；每辆车Detection的角度不同，由于遮挡等原因，每辆车检测的landmark也有差异，将这些数据进行Alignment处理，生成高精度的地图数据；最后，Modeling And Semantics负责生成地图的语义数据。

图片

4.1. Harvesting

下图中黄色的框是车辆检测的landmarks和lane marks，同时车辆会尝试检测driving path等语义信息，一辆车可能检测不准确，但是成百上千的过路车辆会让检测结果越来越好。

Mobileye Harvesting的数据量为10K/公里，这些检测的数据会被发送到云端。

图片

4.2. Aligning Drives

检测每个RSD中每个元素的6D Pose，然后对齐相同位置的元素，得到厘米度精度的driving path等信息。

图片

由于GPS存在误差，每个车辆检测的道路元素位置都存在噪声，所以只依靠简单的位置求均值是不可行的。

图片

Align之后可以明显的看到两条Driving Path（蓝色）和两侧的道路边界（红色）。对齐的过程是靠几何运算进行。

图片

仅仅靠聚类(Clustering)和Spline Fiting得到下图右上角的结果，这个结果不是特别理想。后来通过神经网络生成高精度地图，效果好了很多。

图片

5. 为什么语义理解离不开众包

如下左图所示，通过众包数据可以在没有Lane Marking的道路上获取Driving Path。

如下右图所示，众包数据提供了复杂场景下的所有可通行路径。

图片

如下图所示，通过众包数据可以获得红绿灯与车道的关联关系、Yield Sign的Stop Point、Crosswalk与红绿灯的关联关系等。

图片

如下左图所示，通过检测哪个Drive Path的Stop Point比较多，我们可以从众包数据中获取到没有Traffic Sign情况下各个道路的路权优先级。

如下中图所示，我们可以从众包数据学习到在路口其它司机的停车位置。

如下右图所示，从众包数据可以学习到，在无保护左转的场景下车辆的Stop Point。

图片

众包数据是获得各个道路Common Speed的唯一高效的方法，Common Speed提供了当道路没有车辆时候AV车的目标行驶速度。采用这种方法可以使得无论在哪个国家、地区，或者不同的道路类型，AV车都可以自然的融入车流。

图片

6. 总结

到目前为止，Mobileye与超过6家汽车制造厂商合作，每天可以覆盖800万公里的路网更新。预计到2024年，每天覆盖的路网会达到10亿公里。

图片

说明：本文所有内容都来源于Mobileye CEO Amnon Shashua教授在2021 CES的分享。

YouTube链接：https://www.youtube.com/watch?v=B7YNj66GxRA&t=301s

802.1Qvlan
weixin_34023863的博客
06-25 640
今天，温习了一下vlan的知识。以下是转载过来的一篇文章。说得比较透彻 802.1Q VLAN 技术原理 在数据通信和宽带接入设备里，只要涉及到二层技术的，就会遇到VLAN。而且，通常情况下，VLAN在这些设备中是基本功能。所以不管是刚迈进这个行业的新生，还是已经在这个行业打拼了很多年的前辈，都要熟悉这个技术。在论坛上经常看到讨论各种各样的关于VLAN的问题，在工...
VLAN间路由（三种方式介绍与配置）
yangchuang111213的博客
11-06 3900
简单来说，同一个VLAN中的用户间通信就和在一个局域网内一样，同一个VLAN中的广播只有VLAN中的 成员才能听到，而不会传输到其他的VLAN中去，从而控制不必要的广播风暴的产生。当接收到对端设备发送的不带Tag的数据帧时，会添加该端口的PVID，如果PVID在允许通过的VLAN ID列表中，则接收该报文，否则丢弃该报文。此时交换机连接主机和服务器的端口，以及交换机互连的端口都配置为Hybrid类型。交换机连接主机A的端口的PVID是2，连接主机B的端口的PVID是3，连接服务器的端口的PVID是100。
VLAN-802.1Q（access与trunk）
Adelais_Z的博客
04-19 4345
虚拟局域网是一组逻辑上的设备和用户，设备和用户不受物理位置的限制，可以根据功能、应用等因素将它们组织起来，VLAN可以隔离广播域、有效抑制广播风暴 接口类型：access、trunk、hybrid
一篇详解交换机接口类型Access / Trunk / Hybrid 及接口与端口的区别（内含本地VLAN问题详解）
最新发布
DreamCollector的博客
04-12 1069
一个接口只能属于一个 VLAN；只能发送/接收 Untagged 帧；通常连接终端设备，如 PC、打印机等。可允许多个 VLAN 通行；用于交换机与交换机、路由器等连接；支持 Tagged 帧，部分情况支持 Untagged（Native VLAN）。可属于多个 VLAN，允许接收和发送多个 VLAN 的 Tagged 与 Untagged 报文；适用于用户设备 + 多 VLAN 并存的混合环境。接口类型支持 VLAN 数量是否加/去 Tag接收 Untagged。
交换机三种端口模式Access、Hybrid和Trunk
Linux知识积累
07-11 4133
以太网端口有 3种链路类型：access、trunk、hybirdAccess类型端口：只能属于1个VLAN，一般用于连接计算机端口；Trunk类型端口：可以允许多个VL...
VLAN三个接口模式
weixin_64097979的博客
09-22 1593
2.接收数据时，若该帧不带vlan标签，用接口PVID数值作为标签，给数据帧打上标签，接收数据帧时如果携带vlan标签，判断是否与本接口一致，如果一致，则接受数据帧，如果不一致，则丢弃标签。3.接收数据帧，检查数据帧中的 vlan标签，判断是否允许这个vlan标签通过，如果允许则接收数据帧，如果不允许则丢弃数据。2.同时可以属于多个vlan，同一时间可以传递多个vlan的数据帧。2.可以像Access 接口一样，发送出去的数据不携带标签。可以像Trunk 接口一样，发送出去的数据携带标签。
802.1q VLAN
weixin_34256074的博客
04-07 665
VLAN（Virtual Local Area Network），是一种通过将局域网内的设备逻辑地而不是物理地划分成一个个网段从而实现虚拟工作组的技术。 以一个网络接口为主设备，可以创建多个虚拟网络接口，称为子接口（802.1q子接口），主设备称为主接口或父接口；每个子接口对应一个vlan id；当主接口接收报文时，如果为802.1q报文，则根据vlan id将报文分发的对应的子接口；当子接口需要...
VLAN的端口分三种类型
hugh9268的博客
08-18 1万+
VLAN的端口分三种类型:Aces端口、 Trunk端口、 Hybrid端口。 Access端口一般在连接PC时使用，发送不带标签的报文。一个 Access Port只属于一个 VLAN。缺省所有端口都包含在 VLANI中，且都是 Access端口。 Access 3端口的PVID 值和它所属的VLAN相关。 Trunk端口一般用于交换机级联端口传递多组VLAN信息时使用。一个 Trunk Port可以 属于多个VLAN。 Trunk端口的PVID与所属VLAN无关，缺省值为1。 Hybrid i端口是混
二层协议基本总结（二）--vlan总结
liboyang990814的博客
04-19 2610
vlan基础概念 vlan技术可以将一个物理局域网在逻辑上划分成多个广播域，实质时隔离广播域 冲突域： 连接在同一导线上的所有工作站的集合，，或者说时同一我物理网段上所有结点的集合或以太网上竞争同意贷款的节点集合。集线器连接的所有节点都可以被认为是2在同一冲突域内，它不会划分冲突域。而二层设备（网桥，交换机）三层设备（路由器）都可以划分冲突域，冲突域是基于第一层 物理层 广播域： 网络中某一设备同...
VLAN端口类型详解——Huawei、Cisco
2401_84008965的博客
04-21 592
pc1所发出的数据，由inter0/1所在的pvid vlan10封装vlan10的标记后送入交换机，交换机发现inter e0/2允许vlan 10的数据通过，于是数据被转发到inter e0/2上，由于inter e0/2上vlan 10是untagged的，于是交换机此时去除数据包上vlan10的标记，以普通包的形式发给pc2，此时pc1->p2走的是vlan10。Hybrid类型的端口可以允许多个VLAN通过，可以接收和发送多个VLAN的报文，可以用于交换机之间连接，也可以用于连接用户的计算机。
网络之Trunk端口配置
Linux运维老纪的博客
07-06 4949
Trunk端口一般用于交换机之间连接的端口，可以接收和发送多个VLAN的报文。 当Trunk端口收到数据帧时，如果该帧不包含802.1Q的VLAN标签，将打上Trunk端口的PVID；如包含，则不改变.本章教大家如何配置trunk链路。
Vlan通信原理
zhuying6666的博客
02-16 3912
VLAN工作原理（VLAN通信原理）详解 VLAN工作原理即VLAN通信原理 1、vlan基本通信原理 为了提高处理效率，交换机内部的数据帧一律都带有VLAN Tag，以统一方式处理。当一个数据帧进入交换机接口时，如果没有带VLAN Tag，且该接口上配置了PVID（Port Default VLAN ID），那么，该数据帧就会被标记上接口的PVID。如果数据帧已经带有VLAN Tag，那么，
802.1Q VLAN协议和802.1P协议的实现
网络精英-服务日
02-24 2713
802.1Q VLAN协议和802.1P协议的实现2004-03-05       打印自: 蓝色技术频道网络技术门户地址: http://www.17lan.com/article.php/506802.1Q VLAN协议和802.1P协议的实现本文主要介绍了802.1Q VLAN协议在以太网交换机中的实现，以及
VLAN接口类型
ShaShark0 的博客
04-13 4728
VLAN接口类型 1.Access 接入端口 用于和不能识别Tag 的用户终端相连，或者不需要区分不同VLAN成员时使用 Access端口是交换机上用来连接用户主机的端口，它只能连接接入链路，并且只能允许唯一的VLAN ID通过本端口。 Access端口收发数据帧的规则如下： 如果该端口收到对端设备发送的帧是untagged（不带VLAN标签），交换机将强制加上该端口的PVID。如果该端口收到对端设备发送的帧是tagged（带VLAN标签），交换机会检查该标签内的VLAN ID。当VLAN I.
香橙派配置 VLAN (802.1q)
穷人小水滴的博客
01-24 1505
VLAN 是一种网络虚拟化技术, 可以简单理解为网络的分身术或精神分裂术.窝家的局域网稍微有点复杂, 有 2 个网段. 想让香橙派能够同时直接访问这 2 个网段, 但是香橙派只有一个网口, 怎么办 ? VLAN !VLAN (虚拟局域网) 是一种网络 虚拟化 技术. 类似于虚拟机技术, 可以把一台物理计算机 (CPU, 内存, 硬盘等资源) 划分成多个虚拟机 (逻辑计算机). VLAN 可以把一个物理网络 (交换机, 网线, 网口等) 划分成多个互相隔离的逻辑网络.
vlan- 接口类型
Fe_smoothly的博客
01-30 1212
1、划分的接口类型access,trunk,hybrid应用场景2、接口类型的收方向和发送方向的判断原理3、链路聚合（eth-trunk)(1)、不同类型的接口适用于不同的场景：•Access类型的接口主要用来连接用户主机，一般用于接入链路，且接入链路上通过的帧为不带Tag的以太网帧。如果Access接口配置了缺省VLAN，则在该报文上加上Tag标记，并将Tag中的VID字段的值设置为接口所属的缺省VLAN编号，此时接入链路上允许与缺省VLAN Tag匹配的以太网帧通过。
谈谈交换机三种端口模式Access、Hybrid和Trunk
weixin_34414196的博客
01-15 843
　　以太网端口有 3种链路类型：access、trunk、hybird 　　Access类型端口：只能属于1个VLAN，一般用于连接计算机端口； 　　Trunk类型端口：可以允许多个VLAN通过,可以接收和发送多个VLAN 报文, 　　一般用于交换机与交换机相关的接口。 　　Hybrid类型端口：可以允许多个VLAN通过，可以接收和发送多个VLAN 报文， 　　可以用于交换机的间连接也可以用于连接...
802.1Q VLAN 简介
热门推荐
Hayden的技术博客
07-07 2万+
（一）vlan原理 首先说下802.1q协议（也叫dot1q），802.1q协议定义了vlan字段的结构和vlan字段在以太网帧中的位置。上一篇文章有介绍以太网帧的格式，传统的以太网数据帧在目的mac地址和源mac地址之后封装的是上层协议的类型字段，如图1-2所示。 其中DA表示目的mac地址，SA表示源mac地址，Type表示报文所属协议类型。 IEEE 802.1q协议规定在目的ma
VLAN的三种端口类型！Access、Trunk、Hybird
weixin_42283438的博客
04-15 1万+
​接上一期内容，本期将详细介绍VLAN的三种端口类型！在很多学校上课的过程中，发现很多学生未能真正掌握这一技术知识点，所以望读者用心领悟哦！ 标签的概念：数据在交换机传输的过程中，会打上tag标签，未打上tag标签的数据属于untag数据； 第一种类型：Access端口类型：（常用在交换机与主机之间连接） 在收数据方向：（1）如果收的是untag数据，会打上此A接口的vlan id进行接收，默认是vlan 1，可以修改。（2）如果是tag数据，比较tag数据vlan id与此A接口vlan id是否一
802.1q
03-19
### IEEE 802.1Q VLAN Tagging Protocol Standard IEEE 802.1Q 是支持虚拟局域网（VLAN）的标准协议之一，通常被称为 Dot1q。该标准定义了一种用于以太网帧的 VLAN 标记系统以及交换机和桥接器处理这些标记帧的操作流程[^2]。 #### 协议结构概述 IEEE 802.1Q 的核心功能在于通过在以太网数据帧中插入特定字段来实现 VLAN 标签的功能。这种标签使得网络设备能够识别哪些流量属于哪个 VLAN，并据此执行转发决策。具体来说： - **Tag Header**: 在原始以太网帧头部增加了一个额外的 4 字节字段作为 VLAN 标签头。这四个字节包含了以下部分： - **Priority Code Point (PCP)**: 使用 3 比特表示优先级级别，范围从 0 到 7，主要用于 QoS 控制。 - **Canonical Format Indicator (CFI)**: 这是一个单比特位，在传统以太网环境中设置为零。 - **VLAN Identifier (VID)**: 使用 12 比特标识具体的 VLAN ID，理论上可以支持多达 4096 个不同的 VLAN（编号从 0 至 4095），其中某些特殊值保留给内部用途或管理目的。 #### 数据包处理机制 当一个带有 VLAN tag 的数据包进入支持 IEEE 802.1Q 的交换机时，它会依据此标签决定如何路由或者过滤该数据流。如果目标端口不属于同一 VLAN，则不会传输至其他无关联的物理接口上；反之亦然——只有相同 VLAN 成员之间才允许互相通信除非经过路由器跨网段访问[^1]。 此外，为了简化管理和配置过程并增强互操作性，还引入了一些辅助性的子协议和服务组件比如 GARP（通用属性注册协议）。GARP 可帮助分发有关 VLAN 成员资格的信息到各个连接节点以便动态调整其行为模式而无需频繁手动干预[^3]。 以下是创建带 VLAN TAG 的 Python 示例代码片段展示如何模拟构建这样的 Ethernet Frame: ```python from scapy.all import Ether, Dot1Q, IP, sendp def create_vlan_packet(src_mac="00:aa:bb:cc:dd:ee", dst_mac="ff:ff:ff:ff:ff:ff", vlan_id=100, src_ip="192.168.1.1", dst_ip="192.168.1.2"): ether = Ether(src=src_mac, dst=dst_mac) dot1q = Dot1Q(vlan=vlan_id) ip_layer = IP(src=src_ip, dst=dst_ip) packet = ether / dot1q / ip_layer return packet packet = create_vlan_packet() sendp(packet, iface="eth0") # Replace 'eth0' with your network interface name. ``` 上述脚本利用 Scapy 库生成包含指定源地址、目的地址及所属 VLAN 编号的数据报文并通过选定的网卡发送出去测试实际效果。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值