双摄像头的实时视频拼接及目标跟踪（七）

最新推荐文章于 2024-07-29 09:36:41 发布
最新推荐文章于 2024-07-29 09:36:41 发布
阅读量6.7k 收藏 66
点赞数 10
分类专栏： 视频实时拼接 图像拼接 目标跟踪 文章标签： 实时视频拼接 目标跟踪 图像拼接 计算机视觉 图像处理
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_28901541/article/details/83446946
版权
本文介绍了双摄像头的实时视频拼接及目标跟踪系统实现，采用ORB特征点提取、柱面投影变换和图割法进行图像处理。在小场景下，1280*760分辨率时拼接质量高但帧率受影响，640*320分辨率则能提高速度。在大场景下，高分辨率确保了拼接质量，但处理速度下降。目标跟踪使用基于HOG特征的KCF算法，小场景表现优于大场景。通过已录制视频输入，能在视频拼接和目标跟踪的同时达到近似的实时性。
摘要由CSDN通过智能技术生成

系统实现

本文为CSDN原创文章，转载请注明出处
本文为CSDN原创文章，转载请注明出处
本文为CSDN原创文章，转载请注明出处

邮箱：yi_wei_jian@163.com 作者：Y.W.jian

考虑拼接速度以及拼接质量，默认选择ORB算法进行特征点提取，选择柱面投影进行图像投影变换，选择图割法进行最大流检测，渐入渐出法进行融合。根据实际场景出现的效果再做相应的方法调整。

流程图

系统流程图如下
在这里插入图片描述

程序流程图如下
在这里插入图片描述

小场景下的视频拼接与目标跟踪

输入图像的分辨率为1280*760，每帧的融合时间为0.040.06S，平均帧率为16FPS，画面清晰度比较高，拼接质量很完美，但是物体穿过缝合线时，由于更新背景模板导致帧率大幅度降低，帧率为23FPS，很大程度的影响了拼接的效果。

最低0.47元/天 解锁文章
Y.W.jian
关注
专栏目录
双摄像头的实时视频拼接及目标跟踪（三）
Y.W.jian的博客
10-27 4051
实时视频拼接 初步视频拼接虚影问题的探讨 经过上述方案处理之后的初步拼接视频，将会存在目前视频拼接技术中一个普遍的问题，即重合区域存在运动物体产生虚影。效果图如下， 产生伪影的图像帧 可以看到，重叠区域内，存在运动物体时，出现了虚影，并且都是出现在缝合线附近，由远及近存在不同的差异，经过仔细分析和观察，联系生活实际，类比到将人的双眼作为摄像头，双眼保证焦距不变，放一根笔在两眼...
双摄像头的实时视频拼接及目标跟踪（一）
热门推荐
Y.W.jian的博客
10-27 2万+
本章主要讲图像拼接算法的研究 先膜拜一下知乎大佬全面的叙述：https://www.zhihu.com/question/34535199/answer/135169187 本文图像拼接是基于opencv的图像拼接，流程分为以下几步 ...
图像拼接（九）：双摄像头实时视频拼接（单应变换模型）
czl389的专栏
03-07 1万+
单应变换相比平移变换，具有更广泛的场景适应性，但同时稳定性会有一定程度下降。设计到的技术细节有： 特征检测与描述 特征匹配与单应矩阵估计 opencv采集视频 渐入渐出图像融合 这个解决方案的硬件条件包括：有两个USB接口的计算机，两个合理放置的USB摄像头。合理放置是指：两个摄像头分割一定夹角，相机中心相距接近，所拍摄场景有足够的重叠部分。以上保证了单应变换的可用性。代码实现：#include "
图像拼接（四）：双摄像头实时视频拼接（平移模型）
czl389的专栏
01-18 1万+
假设两个摄像头平行固定，所拍摄的图像视差很小，可以通过“柱面投影+模板匹配+渐入渐出融合”的解决方案实现视频拼接。 关于这种方法的静态图像拼接，参考图像拼接（一）：柱面投影+模板匹配+渐入渐出融合 OpenCV双摄像头捕获视频并实时显示的代码，参见：图像拼接（三）：OpenCV同时打开两个摄像头捕获视频 将代码整合，实现双摄像头实时视频拼接：#include "opencv2/core/cor
多个视频怎么合成一个视频？7种视频合并方法教会你
最新发布
happy_prettygirl的博客
07-29 1836
文章介绍了七种视频合并方法，包括使用专业软件、在线工具、智能手机应用及电脑自带编辑器等，旨在帮助用户掌握视频合并技能，享受创作乐趣。
图像拼接（五）：双摄像头实时视频拼接（平移模型+多线程）
czl389的专栏
01-19 1万+
在双摄像头相对平行固定，所拍摄图像视差很小，可使用平移运动模型的情形下，我们提到了“柱面投影+模板匹配+渐入渐出拼接”的解决方案。不考虑多线程，参见图像拼接（四）：双摄像头实时视频拼接（平移模型） 可以看出，图像或视频拼接其实是一项”流水线”技术，包括：源图像数据获取（两幅源图像）、柱面投影、模板匹配、图像融合、输出或者是显示拼接后的图像。这个过程中每个步骤有先后，可以说是串行的，怎么能使用多线
双摄像头的实时视频拼接及目标跟踪（六）
Y.W.jian的博客
10-27 4126
对实时拼接好的视频进行实时目标跟踪 对拼接好的视频帧还需做目标跟踪处理，即画一个矩形框选定图像中目标，之后在每帧图像中，该矩形框都会出现在目标上。 目标跟踪算法现状 可参考该大神的文章https://www.zhihu.com/question/26493945/answer/156025576 目标跟踪分短期（Short-Term）跟踪、长期（Long-Term）跟踪，又可分为单目标跟踪和多目标...
视频拼接，可用于两摄像头采集视频的拼接
09-04
基于opencv的stitcher开发视频拼接，可用于两摄像头采集视频的拼接
基于opencv双摄像头的实时拼接
12-09
基于opencv与C++代码的双摄像头的拼接技术，通过获取两个摄像头的图像，将拼接后的图片存放于文件夹中
双摄像头的实时视频拼接及目标跟踪（五）
Y.W.jian的博客
10-27 3006
实时视频拼接速度的优化方案 优化方案，提高拼接速度 根据之前章节的方法，进行初步视频拼接得到的效果，其速度并不是最快，需要进行一定的优化。通过实验，得到下面几种优化方式。 1.代码运行的环境是在VS2017上运行的，其中有两种运行模式，分别为Debug模式和Release模式。由于Debug中包含了很多调试信息，会插入大量的检查，并且编译器编优化程度不一样，Realease模式的编译器优化程度远远...
360环视摄像头鱼眼四摄像头拼接算法
09-10
用于鱼眼摄像头的一个环视参考文档很不错，自己最开始做这个相关的项目就是参考这个文档，发现写的很是不错，非常值得参考特别有用的，哈哈哈哈哈哈哈哈哈哈
图像拼接算法及实现 图像拼接
03-24
图像拼接(image mosaic)技术是将一组相互间重叠部分的图像序列进行空间匹配对准,经重采样合成后形成一幅包含各图像序列信息的宽视角场景的、完整的、高清晰的新图像的技术。图像拼接在摄影测量学、计算机视觉、遥感图像处理、医学图像分析、计算机图形学等领域有着广泛的应用价值。
多路视频实时全景拼接融合算法
10-28
多路视频实时全景拼接融合算法
VideoStitching APAP视频拼接算法
01-04
APAP视频拼接算法，可以实现多路视频的同步拼接。
双摄像头的实时视频拼接及目标跟踪（二）
Y.W.jian的博客
10-27 5510
视频拼接算法 视频拼接思想及总体框图 图像拼接是视频拼接的基础，是将多张图像生成一张全景图，衡量的指标主要在于全景图的质量，而对拼接速度的要求并不高。对于视频拼接而言，视频流的输入是源源不断的，需要将多个摄像头采集的图片进行拼接，每个摄像头的图像帧序列必须一一对应（时间一致性），即保证每次输入的对应的待拼接图片是在同一时刻进行采集的， 图片之间几乎不存在时间差，否则，当有运动物体在待拼接图像帧的重...
两个摄像头合成一路_一种利用双路摄像头进行拼接画面的装置的制作方法
weixin_31893057的博客
12-23 7531
本发明涉及图像处理领域，具体涉及到一种利用双路摄像头进行拼接画面的装置。背景技术：在VR(虚拟现实)设备中需要两路显示屏作为显示设备，同时需要两路摄像头作为信号采集设备，而一般的CPU并不能让两路摄像头同时工作，并且在图像传输中若分两幅独立图像进行传输，必然引起同步问题和算法的困难，本发明是一种经济的方案将两路摄像头数据进行合并，在显示端进行分离。技术实现要素：本发明提供了一种利用双路摄像头进行拼...
双摄像头实时视频拼接（平移模型）
sinat_37281674的博客
07-27 3981
假设两个摄像头平行固定，所拍摄的图像视差很小，可以通过“柱面投影+模板匹配+渐入渐出融合”的解决方案实现视频拼接。 这种视频拼接的方法仅仅是使用模板匹配的方法，划定一个需要匹配的区域，然后水平和垂直方向查找相同的区域，然后对两张图片进行融合。 本文相机拼接的程序只是使用前3帧图像进行拼接，后面通过前三帧的匹配地方进行机械的拼接。 #include "opencv2/core/core.hpp" #include "opencv2/highgui/highgui.hpp" #include "opencv.
图像拼接（十一）：双摄像头实时拼接+stitching_detailed
czl389的专栏
03-07 1万+
OpenCV自带的stitching模块在追求拼接质量方面已经做得很好了，但是实时性不够，即使是拼接两幅图像。比如源程序拼接两幅640*480分辨率的图像，拼接时间为4.78″。对stitching_detailed.cpp源码进行改造，有利于提高实时性的举措有： 调节初始化参数。比如使用GPU，这个需要重新编译OPenCV库。 减少视频帧的分辨率。减少为320*240。 将特征提取、匹配、变换矩阵
评论 18
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值