双目相机的标定 python_实战 | 相机标定

c78e78b241b25726961d1bd4ffe63a72.png

知乎的公式格式有点问题,请看原文链接:

实战 | 相机标定​mp.weixin.qq.com
1e827bd3538f49793c729baf829365c8.png

什么是相机标定?我们为什么需要相机标定?

相机标定就是确定相机内参和外参的过程,其结果精度会直接影响视觉系统后续工作的准确性。

坐标系

相机标定涉及到了四大坐标系,分别为:

像素坐标系

cd254ab183aab2c79c6c04cd4f8569e4.png

图像物理坐标系

a3f57c073a024609a9583622a6c35d7f.png

相机坐标系

095742c86999fc08e4b2d5f4bf8cf5b3.png

世界坐标系

ef640c3fde92aa2e8c391b9efefd004e.png

f644977d8d53f5b6278a5ad2f5b37cd0.png

为了进行相机标定,必须已知世界坐标系中足够多的三维空间点坐标,找到这些空间点在图像中投影点的二维图像坐标,并建立对应关系。世界坐标系中某个给定点投影到图像坐标系中被分为两个步骤:

bd1e0810c2d15b99ca6a26e36c37b869.png

机器视觉中常用的有两种不同类型的镜头:普通镜头和远心镜头。使用普通镜头时,世界坐标系到图像坐标系为透视投影;使用远心镜头时为平行投影。

相机标定方法分类

相机标定方法有:传统相机标定法、主动视觉相机标定法、相机自标定法。

标定方法优点缺点常用方法传统相机标定法可使用于任意的相机模型、 精度高需要标定物、算法复杂Tsai两步法、张氏标定法主动视觉相机标定法不需要标定物、算法简单、鲁棒性高成本高、设备昂贵主动系统控制相机做特定运动相机自标定法灵活性强、可在线标定精度低、鲁棒性差分层逐步标定、基于Kruppa方程

(左右滑动查看)

  1. Tsai两步法是先线性求得相机参数,之后考虑畸变因素,得到初始的参数值,通过非线性优化得到最终的相机参数。Tsai两步法速度较快,但仅考虑径向畸变,当相机畸变严重时,该方法不适用。
  2. 张氏标定法使用二维方格组成的标定板进行标定,采集标定板不同位姿图片,提取图片中角点像素坐标,通过单应矩阵计算出相机的内外参数初始值,利用非线性最小二乘法估计畸变系数,最后使用极大似然估计法优化参数。该方法操作简单,而且精度较高,可以满足大部分场合。详细原理见《从零开始学习「张氏相机标定法」(一)成像几何模型》。
  3. 基于主动视觉的相机标定法是通过主动系统控制相机做特定运动,利用控制平台控制相机发生特定的移动拍摄多组图像,依据图像信息和已知位移变化来求解相机内外参数。这种标定方法需要配备精准的控制平台,因此成本较高。
  4. 分层逐步标定法是先对图像的序列做射影重建,在重建的基础上进行放射标定和欧式标定,通过非线性优化算法求得相机内外参数。由于初始参数是模糊值,优化算法收敛性不确定。
  5. 基于Kruppa的自标定法是通过二次曲线建立关于相机内参矩阵的约束方程,至少使用3对图像来标定相机。图像序列长度会影响标定算法的稳定性,无法保证射影空间中的无穷远平面。

MATLAB相机标定应用程序

MATLAB自带相机标定应用程序,有camera calibrator和stereo camera calibrator两类相机标定应用程序。其操作简单、直观,能够获得相机的内、外参数以及畸变参数等。

a3b23a47d907207e88713b89df7f3c8f.png

其中,camera calibrator用于单目相机标定;stereo camera calibrator用于双目相机标定。两者操作方式相同,唯一区别在于stereo camera calibrator添加图片时会弹出添加两个相机图片的操作框。

e94b5c99b5e50f702e8e8c947ef4ad2b.png

标定板准备(实验室经费有限,只能自己制作)

平面标定板具有以下几个优点:

  1. 易于操作;
  2. 尺寸可以制作的非常精确;
  3. 非常方便应用在背光照明应用中,只需要使用透明材料制作放置标志点的底盘即可。

使用MATLAB编程进行棋盘标定板的制作,将图片打印后固定在一块平板上。程序如下:

J 

效果如图:(感觉有点寒酸呀,“但这不重要”,没条件自己创造)

7a1653ebbfea2854bec51d02a86d7f3a.png

Camera Calibrator应用程序

camera calibrator操作界面如下:

6c6b46faf254af432f46cbd89f1c1afa.png

对于标定图像数量,位姿越多,标定结果也会越精确,建议在10到20幅之间。按照上图中的1、2、3进行相机标定操作。我们可以选择径向畸变系数以及是否计算切向畸变和倾斜,通过优化选项可以设置内参矩阵以及径向畸变参数的输出形式。

1.添加标定图像后显示界面如下图:

b17bbc56fc1f36d9f463646071744e03.png

2.相机标定后显示界面会显示相机与标定板之间的位置关系。

a2caab453b676a0915d9a50a1ae89182.png

3.相机参数输出camera calibrator应用程序相机标定参数输出如图所示:

ada13cc680fdd4985ab18e9b957ec7ee.png

高亮:MATLAB相机标定结果中的内参矩阵默认格式为

b5c4726cbfa9a9e8c06c57090eb9700f.png

,其中,

5194e5d9b476b09ef8db96b9dcb49947.png

0cdd11b51b40b5da3dc2302408a50101.png

分别为

beab0e876faa330270b65ebabd7dc620.png

轴和

b5991c711f6b4377b45e504ad3e0fb88.png

轴的有效焦距;

0561e777f5c32fdf53c5092b40b01232.png

beab0e876faa330270b65ebabd7dc620.png

轴和

b5991c711f6b4377b45e504ad3e0fb88.png

轴的不垂直因子,一般令

c9ceb31a94907261db64f8310607ffd9.png

;

d6fa5a141630742e90cc4386bf96d350.png

是光学中心。注意事项:

  1. 制作棋盘格标定板时,黑色方格与白色方格尺寸需要相同,所有方格尺寸一致;
  2. 采集标定板图像时,应采集多幅不同位姿的标定板图像,采集图像数量不应太少,建议10~20幅为宜;
  3. 采集图像时,相机的焦距不能调节,否则会改变相机的内参数,导致标定失败;
  4. MATLAB相机标定程序能够自动计算重投影误差,重投影误差越小表示相机标定的精度越高。

相机标定参数的准确度

相机标定过程中如果标定板放置不适当的话将会导致相机参数中某个参数或某些参数不能得到唯一值。为了得到高准确度的相机参数必须避免这种情况的发生。除了这个影响外,影响相机参数准确度的主要因素就是用于进行相机标定的图像数量。下面显示了用于相机标定的图像数量对参数的影响。

9055e710e8ebd0248d334f13819c4273.png

从图中可以看出相机参数的准确度随使用图像数量的增加而明显增加。为什么使用相当多的标定图像可以提高相机标定精度?这主要是因为相机参数之间存在不容忽视的相关性,这些参数只能通过多次无关测量进行求解。为了得到更准确的相机参数,我们需要这样做:

  1. 标定板在图像中最好能够覆盖整个视野(覆盖图像的每个角落可以使得径向畸变系数更准确);
  2. 标定板覆盖较大的深度范围(将标定板绕它的x轴和y轴旋转或者放置在不同距离的位置上)。

相关文章

从零开始学习「张氏相机标定法」(一)成像几何模型

从零开始学习「张氏相机标定法」(二)单应矩阵

从零开始学习「张氏相机标定法」(三)推导求解

从零开始学习「张氏相机标定法」(四)优化算法前传

从零开始学习「张氏相机标定法」(五)优化算法正传

一次拍摄搞定多相机自动化标定

利用自识别标记实现复杂场景下相机标定

IMU标定 | 工业界和学术界有什么不同?

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值