3D车道线调研

车道线(非多摄)

为啥使用车道线?

车道线的识别后的功能演进顺序:
  1. 车道线偏离预警(L0)
    在这里插入图片描述

  2. 车道线保持(L1)在这里插入图片描述

  3. 车道线居中(L2)在这里插入图片描述

  4. 自动变道辅助(高阶)在这里插入图片描述

车道线输出的方法

车道线检测任务定义

车道线检测任务就是对当前行驶道路的车道线进行检测,给出自车道及左右两侧至少各一个车道的相关信息,如车道的ID、方向、曲率、类型(虚线、实线、黄线、白线等)、宽度、长度、速度等信息,并进行可视化输出

难点
  • 车道线一般为细长形的外观结构,需要强大的高低层次特征融合来同时获取全局的空间结构关系和细节处的定位精度;
  • 车道线的状态呈现具有不确定性,如被遮挡、磨损、道路变化时本身的不连续性、天气影响(雨、雪)等。需要网络针对不同情况具备较强的推理能力;
  • 车辆的偏离或换道过程会产生自车所在车道的切换,车道线也会发生左/右线的切换。一些提前给车道线赋值固定序号的方法,在换道过程中会产生歧义的情况;
当前方法

物体检测(Line-CNN、LaneATT)在这里插入图片描述
在这里插入图片描述

车道分类(行分类E2E-LMD、IntRA-KD、UFAST、UFLD
在这里插入图片描述

车道分割(yolop多任务)
在这里插入图片描述

存在问题

在这里插入图片描述

改进方案

其一,车道线具有细长的形态特征,这种形态要求追踪具备连续性,甚至包含一定的图像拼接技术。相应的检测手段需要参照不同的层次划分机制来获取全局空间结构关系,对于细节处的定位精度也可采用角点检测的方式进行。

其二,车道线的形态容易受到外界干扰(比如被遮挡,磨损,以及道路变化时本身的不连续性),存在较多不确定性。解决办法是采用较强推测能力的算法针对边缘情况进行推测。

其三,在启动驾驶辅助功能(如自动换道、车道保持期间)期间,自车会在车轮压线过程中发生车道线左/右切换的情况。解决办法除了设定滤波延迟外,也可以通过提前给车道线赋值固定序号的方法进行优化

3D车道线

误差分析
坐标误差(参数标定导致)

在这里插入图片描述

求解:

在这里插入图片描述

最终的预测3D坐标误差与动态外参关系如下:

在这里插入图片描述

结构化特征误差

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

3D车道线检测方法

对于上坡和下坡路口的坐标系:
在这里插入图片描述

没有地面模型gt和feature会不匹配:
在这里插入图片描述

模型结构上:
在这里插入图片描述

前视图片特征提取+俯仰角&相机安装高度预测,得到IPM的预测参数后,投影到bev空间完成检测相关任务

在这里插入图片描述

(1)使用图像语义分割网络预测车道线mask

(2)使用反透视映射(IPM)模块将mask转换为top-view(需要相机内参矩阵)

(3)在virtual top-view中预测车道线

在这里插入图片描述

地图语义信息+每个像素点的depth预测和offset

在这里插入图片描述

基于transformer方法:其核心是学习从前视图到BEV空间的空间特征转换,关注参考点周围的局部环境,在目标点生成的BEV特征将更具代表性;PersFormer由自注意模块组成,用于与本身BEV查询进行交互;交叉注意模块从基于IPM的前视图特征中获取key-value对,生成细粒度BEV特征。

在这里插入图片描述

img

img

Translateing images into maps 发现,无论深度如何,在图像上同一列的像素在 BEV 下均沿着同一条射线,因此,可以将每一列转换到 BEV 构建 BEV feature map。作者将图像中每一列 encode 为 memory,利用 BEV 下射线的半径 query memory,从而获得 BEV feature,最后通过数据监督使模型拥有较好的视角转换能力

代码链接:

代码链接:

  • 22
    点赞
  • 21
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
路沿检测是矿区无人驾驶的关键技术之一,所得路沿信息可用于辅助无人矿车的感知、规划和定位。准确的路沿检测与路沿图构建同时也是高精地图构建中的首要步骤,通过机器学的方法可以在现有路沿点的基础上初步构建道路结构拓扑。与传统的卡尔曼框架下的路沿跟踪所不同的是,本文提出了基于占用栅格思想的路沿跟踪方案。所谓占用栅格,即根据传感器感知到的障碍物信息来对全局范围内的场景进行构建的一种方法。由于矿区环境下的路沿具有高度不确定性,所以需要用一种由包含概率信息的模型找出最高可能性是路沿的位置,而基于八叉树的结构正好可以满足这一需求。本文通过将每一帧点云实时栅格化来筛选路面候选栅格,然后以环压缩为主进行多特征的路沿检测,其中栅格是一种应用已经非常广泛的点云结构,我们根据矿山道路本身具有的粗粒度特性,将特征检测扩展到以每一个扇形单元格为不可分割的基本单元,在提高了检测效率的同时,也避免了很多路面凹凸所带来的干扰。路沿的跟踪策略采用基于八叉树的三维占用栅格,融合多帧检测结果,建立全局路沿地图,将传统的二维的占用栅格图的概念扩展到了三维的仅包含路沿属性的全局障碍物图。实际矿区道路检测结果表明,本文提出的针对矿山非
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值