多个摄像头组成全景拼接_汽车新技术:360全景环视系统技术

1.背景介绍

随着图像和计算机视觉技术的快速发展,越来越多的技术被应用到汽车电子领域,传统的基于图像的倒车影像系统只在车尾安装摄像头,只能覆盖车尾周围有限的区域,而车辆周围和车头的盲区无疑增加了安全驾驶的隐患,在拥堵的市区和狭小的停车场容易出现碰撞及刮蹭事件。为扩大驾驶员视野,感知360°全方位的环境,需要多个视觉传感器相互协同配合,然后通过视频合成处理,形成全车周围一整套的视频图像,全景环视系统应运而生。

9f646f01946fea8add3e60c94c232d55.png

360全景环视技术总括图

2.技术优势:

beb38b871f11f0953e6d3c3abd8948d1.png

(1)360度全方位覆盖,减少盲点区域,提高安全性;

(2)前后广角视图,扩大视野,提高驾驶舒适性;

(3)精确识别车道,提高行车安全。

(4)实时行人检测,减少事故;

3.新技术特征

(1)结构:全景环视系统包括:安装于汽车四周的多个摄像头、图像采集部件、视频合成/处理部件、数字图像处理部件、车载显示器。

734a78b27363833628c293595cc30177.png

360全景环视技术结构图

(2)原理:摄像头分别拍摄汽车前后左右图像,图像被图像采集部件转换成数字信息送至视频合成/处理部件,视频合成/处理部件处理后的图像经由数字图像处理部件处理后转换成模拟信号输出,在安装于汽车内部的车载显示器上生成汽车及其周边环境的全景图像信息

1b8960e740232f8f7ca96825a3b49eb3.png

360全景环视技术原理图

(3)使用场景

场景1:狭窄道路辅助:路面坑洼或者障碍物及道路狭窄情况辅助,防擦碰、陷落;

50c85462c4c7e46b0ff71c92a70bc564.png

场景2:泊车场景辅助:倒车入库、侧方位,精准泊车,有效防停车过程刮蹭;

3db55718e33998b531ee7e26146c255e.png

场景3:车头有障碍物时,有效辅助提醒,防止碰撞和对车头的刮蹭;

52c51126daf1a94b7fd941f853517aa5.png

场景4:异形倒车场景,需精准判断倒车路线时,有效辅助防碰撞。

9ab59481ec1321d746be1b7e5f3a066b.png

4.发展趋势

随着图像和计算机视觉技术成熟度的提升,以及汽车电子领域技术的快速发展,同时结合其发展规律,当前应用的主流技术倒车影像系统、分屏显示360度、有缝拼接360度,将逐步被卫星全景行车安全系统所替代,未来车辆安全事故将极大程度被降低,确实达到保护生命与财产等安全的作用。

e3b061e3c8368b8413fe112d475cb91f.png
在视频监控应用中,如何有效实现宽视场范围视频的完整获取,是视频监控系统的关键功能之一。本文针对多摄像头硬件平台,重点研究 360 全景视频拼接实现技术。在保证高质量的拼接图像的前提下,满足实际应用场景的实时性要求是本文算法设计的主要目标。针对全景拼接在视频监控领域这一应用背景,本文对多摄像头系统全景拼接存在的一些优势和约束进行详细分析,并在此基础上,采用多个广角镜头进行视频图像采集,实现摄像头个数和单个镜头视角之间的合理折中。在控制成本的前提下,有效实现水平方向 360 无盲区监控。 针对全景视频拼接算法的实时性能和拼接效果,本文重点在以下几个方面开展了研究工作: 1、本文采用普通的监控 CCD 单板机和广角镜头组装摄像单元,对多个摄像单元通道采用多线程同步视频采集。针对普通监控镜头采集图像质量不高的问题,提出基于颜色校正板的颜色校正方法,对输入图像进行预处理,有效改善图像质量。并采用基于灰均值的方法,对相邻图像的重叠区域进行亮调整。 2、本文基于经典的直线标定法思想,提出两步法镜头矫正方案。通过所提出的直线标定法对镜头进行一次矫正,然后通过手动设置并调节畸变参数,对矫正后的图像进行二次矫正,所提出的算法能保证良好的镜头矫正效果。 3、研究了柱面投影模型的原理,提出将柱面映射的投影中心修正为镜头畸变中心,克服了由于畸变和透视失真等因素造成的重叠区物体成像尺寸不一致的问题。然后,利用所提出的坐标映射表的方式,一次性实现镜头畸变矫正和柱面映射,有效提高了算法执行速。 4、分析了基于 Harris 特征和 SIFT 特征的配准算法原理。SIFT 特征配准算法鲁棒性高,但难以满足硬件系统的实时性要求;基于 Harris 特征的配准算法复杂低,但难以应对广角镜头畸变引起的图像质量差的问题,匹配性能较差。最后采用了基于积分图像的快速归一化互相关配准方案,实验验证了算法的可行性和有效性。 5、此外,在图像融合方面,基于经典的多频带融合算法,结合线性融合的思想,优化了一种简单的多分辨率线性融合方法。在保证融合质量的基础上,提升了速。 关键字:多镜头多传感器;图像配准;全景拼接;实时监控;广角镜头
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值