halcon第二十四讲:手眼标定基本原理

24 篇文章 719 订阅 ¥9.90 ¥99.00
本文深入解析手眼标定的两种形式:相机固定(eye-to-hand)和相机在机械手工具上(eye-in-hand)。介绍了在不同模式下,如何通过坐标系转换矩阵,实现相机与机械手之间的精准定位,用于自动化抓取和操作任务。九点标定法作为相机固定情况下的简单标定方法也进行了说明。
摘要由CSDN通过智能技术生成

手眼标定涉及的坐标系有:

  • 工件坐标系
  • 工具坐标系
  • 相机坐标系(相机坐标系里又有图像坐标系和像素坐标系,这其实就是前面讲的单目标定的内容)
  • 基坐标系

手眼标定一般有两种形式:

1、相机固定(eye-to-hand)

我们需要的最终结果,即得到base 与 cam 的空间位置关系,即一个4*4的变换矩阵。这个可以通过移动tool带着标定板移动到相机下方不同位置角度,由相机多次拍摄标定板来计算得到。

每次移动tool,工件坐标系相对于工具坐标系的位置是一定的,设其变换矩阵为

工具坐标系到基坐标系的变换关系也是一定的,一般由机器人厂家给定,设其变换矩阵为

相机固定,所以相机坐标系相对于基坐标系的位置也是一定的,设其变换矩阵为

然后和单目标定一样,由标定板知道一个点在工件坐标系中的位置假设用cal表示,由相机又可得到这个点的像素坐标假设用cam表示,然后cal*H1*H2*H3 = cam,通过拍摄多组图,可以解得其中的三个矩阵方程。即可得到,即相机坐标系与基坐标系之间的位置关系。

实际拍摄抓取时,通过相机知道像素坐标后,再由上面公式可得到,然后左乘的逆,就可得到,即工件在基坐标系中的位置:

有些相机虽然固定在机械手上,但如果相机每次拍摄时都回到标定时的固定位置拍摄,这还是属于eye-to-hand模式,即相机固定不动。

对于相机固定不动模式,有一种简单的标定方法叫九点标定:摄像机和标定板不动,让机械手末端装上探针或者其它东西去走这九个点(接触),记录下这九个点在机械手基础坐标系中的位置Row1,column1,同时摄像机拍摄得到这九个点的像素坐标Row,Column,由vector_to_hom_mat2d得到工件在像素坐标系中的位置与工件在机械手基础坐标系中的位置的变换矩阵HomMat2D,假设下次一个物品过来相机拍摄得到其像素坐标,由该变换矩阵就可得到该工件在机械手基础坐标系下的坐标,进而控制机械手末端执行抓取或其它任务。

*【1】标定
*1、得到九点标定板在相机坐标系中的像素坐标
* area_center (SortedRegions, Area, Row, Column)
*2、通过机械手末端走这九个点,得到九点标定板在机械手基础坐标系中的位置
*Row1:=[55,50,45,5,0,-5,-50,-50,-50]
*Column1:=[375,325,270,380,330,280,395,340,290]
*3、得到变换矩阵
*vector_to_hom_mat2d (Row, Column, Row1, Column1, HomMat2D)

*【2】求解
*affine_trans_point_2d (HomMat2D, row2, column2, Qx, Qy)

 

2、相机固定在机械手工具上(eye-in-hand) 

我们需要的最终结果,即得到cam与 tool 的空间位置关系,即一个4*4的变换矩阵。这个可以每次移动tool即相机在不同位置角度多次拍摄标定板来计算得到。 

设定位姿后,工件坐标系相对于 基坐标系的位置是一定的,设其变换矩阵为

工具坐标系与基坐标系的变换关系也是一定的,一般由机器人厂家给定,设其变换矩阵为

相机绑定在工具上,所以相机相对与工具的位置也是一定的,设其变换矩阵为

然后和单目标定一样,由标定板知道一个点在工件坐标系中的位置假设用cal表示,由相机又可得到这个点的像素坐标假设用cam表示,然后cal*H1*H2*H3 = cam,通过拍摄多组图,可以解得其中的三个矩阵方程。即可得到,即相机坐标系和工具坐标系之间的位置关系。

实际拍摄抓取时可获得像素坐标,通过上面公式,就可得到 ,然后左乘以  的逆,再左乘以 的逆,就可得到。即工件在基坐标系中的位置:

 

### 回答1: Halcon手眼标定是一种常用于机器视觉系统中的技术,通过对相机和机器人手臂的关系进行准确建模,实现准确的图像处理和机器人控制。其原理主要分为以下几个步骤: 首先,需要收集包含机器人末端执行器的图像数据。这些图像应覆盖整个工作空间,并涵盖不同的姿势和角度。这些图像可以通过相机捕捉,并与机器人末端执行器的位置和姿态进行关联。 接下来,需要对捕获的图像进行特征提取。这些特征可以是图像中的特定点、线或边缘。通过在图像中识别和跟踪这些特征,可以将相机图像中的特征与机器人末端执行器的位置和姿态进行匹配。 完成特征提取后,可以采用数学模型对相机和机器人末端执行器之间的关系进行建模。这可以通过使用一些数学函数和算法来实现。通过这个数学模型,可以计算出相机图像特征和机器人末端执行器位置之间的变换矩阵。 最后,使用收集到的图像数据和建立的数学模型,可以通过标定算法计算出相机和机器人末端执行器之间的转换关系。该关系可以校准相机的内部参数(如焦距、畸变等),从而对实际工作环境中的图像进行准确的处理和测量。 总之,Halcon手眼标定通过收集图像数据、特征提取、数学建模和标定算法,实现了相机和机器人末端执行器之间的准确关系建模,从而确保在机器视觉系统中获得精确的图像处理和机器人控制。 ### 回答2: Halcon手眼标定是指使用Halcon软件来实现机器人和相机之间的标定过程。Halcon是一款专业的计算机视觉软件,能够实现图像处理、模式识别和机器视觉等多种功能。 手眼标定就是确定机器人工具坐标系与相机坐标系之间的关系,以便机器人能够准确地执行相机获取到的图像信息。手眼标定的原理是通过对机器人末端工具进行运动,同时采集不同位置下的相机图像,根据图像信息计算得到机器人工具坐标系和相机坐标系之间的转换关系。 具体实现手眼标定的步骤如下: 1. 准备标定板:将标定板固定在机器人工作区域内,并通过Halcon软件获取标定板角点的图像坐标。 2. 机器人运动:通过机器人控制软件控制机器人末端工具在不同位置进行运动,同时在每个位置下获取标定板的图像。 3. 提取角点:通过Halcon软件对每个位置下的标定板图像进行角点提取,并将角点坐标保存下来。 4. 标定计算:根据提取得到的角点坐标和机器人末端工具的运动轨迹,使用Halcon软件进行标定计算,从而得到机器人工具坐标系和相机坐标系之间的转换关系。 5. 验证:使用标定计算得到的转换关系,对新的图像进行坐标转换,判断标定结果的准确性。 6. 优化:如果标定结果不理想,可以选择一些不同的机器人工具姿态进行重新标定或者调整标定板位置进行优化。 通过Halcon手眼标定可以实现机器人与相机的精确配准,为机器人视觉应用提供准确的图像坐标信息,为后续的机器人操作和控制提供支持。 ### 回答3: Halcon手眼标定是一种用于机器视觉系统中手和相机之间的标定方法。它通过确定相机坐标系与机器手坐标系之间的转换关系,实现了对相机图像中检测物体位置的准确测量。 Halcon手眼标定的原理可以简要分为以下几个步骤: 1. 准备工作:需要使用的工具包括相机、机器手和标定板。标定板上通常有一些已知位置的标记点,用于提供已知的世界坐标系信息。 2. 数据采集:通过将标定板放置在不同位置、不同姿态下,采集相机图像和机器手坐标系下的位置数据。对于每一组数据,需要记录机器手的位置和姿态,以及相机图像中标记点的像素坐标。 3. 特征提取:使用Halcon软件对采集到的图像进行处理,提取出标记点的特征信息。这些特征可能包括角点、圆心等。 4. 坐标转换:根据已知的世界坐标系信息和提取出的特征信息,利用相机模型和机器手坐标系的转换关系,计算出相机图像中标记点的世界坐标。 5. 参数优化:通过最小化测量误差,使用数学优化算法计算出相机和机器手之间的标定参数,包括旋转矩阵和平移矢量。 6. 验证和调整:使用得到的标定参数对其他物体进行测量,验证标定结果的准确性。如果出现误差,可以通过调整参数进行重新标定。 总结起来,Halcon手眼标定通过收集相机图像和机器手坐标系下的数据,利用特征提取和坐标转换技术,计算出相机和机器手之间的准确转换关系,并最终优化标定参数,从而实现对相机图像中物体位置的精确测量。
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

东城青年

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值