三角测量—立体视觉中重建三维点坐标公式推导(有源码)

三角测量—立体视觉中重建三维点坐标公式推导(有源码)

通常在立体视觉三维测量的应用开发中,需要由左、右图像对应点计算出该点在相机坐标系下的坐标。在opencv中,提供了triangulatePoints函数用于计算立体矫正模式下的三维坐标的计算方法,而没有提供非矫正模式下的计算方法。本文将介绍非矫正模式下如何由图像对应点计算对应的三维点坐标。
关于针孔相机模型的讲解已有太多博文描述了,本文对它不做太多讲解,如果有不懂的朋友可以搜索其他相关博文。

相机内参矩阵

相机内参矩阵包括:

其中,fx,fy为焦距,x0,y0为主点坐标。 在标定好双目相机后,首先需要对图像进行去畸变,为后期计算相机坐标系下三维点坐标排除非线性因素。 去畸变完成后,相机的成像模型就可以简化为针孔成像模型,利用光学三角法建立线性方程组即可计算出空间坐标,以下为推导过程。
针孔成像过程

针孔成像过程描述的是世界坐标系到图像坐标系的转换过程,该过程中包含以下几个坐标系的转换。
1)世界坐标系–>相机坐标系
假设世界坐标系中一点的坐标为(Xw,Yw,Zw),经刚体变换后转到相机坐标系下:

2)相机坐标系–>成像平面坐标系

其中,s[u,v,1]为图像坐标系下的齐次坐标,[Xc,Yc,Zc,1]为相机坐标系下的坐标。

3)成像平面坐标系–>图像坐标系;

式中,[u,v,1]为成像平面坐标系下的坐标,sx,sy为像元在x,y方向上的像元大小,[x,y]为图像坐标系下的坐标。 因此,最终可以得到小孔成像模型的成像公式为:
立体视觉系统中计算三维点坐标(针孔模型)

由前面的推导可知,对于左、右相机分别有:

其中:
式中,flx,fly为左相机焦距,ul,vl为左相机主点坐标;frx,fry为右相机焦距,ur,vr为右相机主点坐标。 因此,综合左右两相机成像公式,可得:
对上面两矩阵方程进行化简,可得到如下方程组:
采用最小二乘法即可计算出世界点坐标。 下图为重建棋盘格标定板角点的三维点坐标。

源码下载方法:关注下方微信公众号回复关键字“triangulate”即可下载


另外,关于以上研究方向的任何问题都可以到我的知识星球进行提问,我将给大家满意的回答 !!!!

3D视觉QQ群:1012179080。

  • 3
    点赞
  • 40
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
<项目介绍> 该资源内项目源码是个人的毕设,代码都测试ok,都是运行成功后才上传资源,答辩评审平均分达到94.5分,放心下载使用! 该资源适合计算机相关专业(如人工智能、通信工程、自动化、软件工程等)的在校学生、老师或者企业员工下载,适合小白学习或者实际项目借鉴参考! 当然也可作为毕业设计、课程设计、课程作业、项目初期立项演示等。如果基础还行,可以在此代码基础之上做改动以实现更多功能。 双目测距理论及其python运用 一、双目测距基本流程 Stereo Vision, 也叫双目立体视觉,它的研究可以帮助我们更好的理解人类的双眼是如何进行深度感知的。双目视觉在许多领域得到了应用,例如城市三维重建、3D模型构建(如kinect fusion)、视角合成、3D跟踪、机器人导航(自动驾驶)、人类运动捕捉(Microsoft Kinect)等等。双目测距也属于双目立体视觉的一个应用领域,双目测距的基本原理主要是三角测量原理,即通过视差来判定物体的远近。 那么总结起来,双目测距的大致流程就是: **双目标定 --> 立体校正(含消除畸变) --> 立体匹配 --> 视差计算 --> 深度计算(3D坐标)计算** linux下安装opencv-python: ```python pip install opencv-python ``` 二、相机畸变 光线经过相机的光学系统往往不能按照理想的情况投射到传感器上,也就是会产生所谓的畸变。畸变有两种情况:一种是由透镜形状引起的畸变称之为径向畸变。在针孔模型,一条直线投影到像素平面上还是一条直线。可是,在实际拍摄的照片,摄像机的透镜往往使得真实环境的一条直线在图片变成了曲线。越靠近图像的边缘,这种现象越明显。由于实际加工制作的透镜往往是心对称的,这使得不规则的畸变通常径向对称。它们主要分为两大类,桶形畸变 和 枕形畸变(摘自《SLAM十四讲》)如图所示: <div align=center><img src="https://img-blog.csdnimg.cn/20190907184815326.PNG" width="324" height="100" /></div> 桶形畸变是由于图像放大率随着离光轴的距离增加而减小,而枕形畸变却恰好相反。 在这两种畸变,穿过图像心和光轴有交的直线还能保持形状不变。
在计算机视觉,通过计算图像的视差信息,可以推断出物体在三维空间坐标位置。Python提供了多种方法来实现这一过程。 视差是指在两个图像之间对应之间的水平偏移量,它可以用来衡量物体在不同视角下的位置差异。计算视差通常使用的方法是利用两个图像之间的像素匹配,首先从左右图像选取对应的像素,然后通过计算这些对应的水平偏移量来得出视差信息。 在Python,可以使用OpenCV库来进行视差计算。OpenCV提供了StereoSGBM(Semi-Global Block Matching)算法来实现视差计算。该算法首先通过匹配特征来进行初始视差估计,然后通过全局优化来获得更精确的结果。 利用StereoSGBM算法,可以将两个图像输入模型,并设置一些参数,例如窗口大小、最小和最大视差等。然后使用算法计算出视差图,其每个像素都对应了一个视差值。 然后,可以根据视差值来计算三维坐标。由于相机的内参和基线(两个相机之间的距离)已知,可以使用三角测量的方法来计算三维坐标。通过将视差值和相机参数代入三角测量公式,即可得到对应像素三维坐标。 总结而言,利用Python的OpenCV库的StereoSGBM算法,可以实现通过已知视差来求解三维坐标的问题。这个过程主要包括计算视差图和利用已知相机参数进行三角测量

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值