ROS机械臂视觉抓取

ROS机械臂视觉抓取

一、总述

视觉抓取主要是通过改变机器人的tool坐标系或base坐标系来实现的。物体位置的变化主要是它位置的X,Y,Z 方向的变化。而base坐标系可根据需要定义用户坐标系。当机器人配备多个工作台时，选择用户坐标系可使操作更为简单 。
在实际应用中，我们通常需要将相机观察到的外界环境中物体的姿态从相机坐标系转换到机械臂的坐标系中，辅助机械臂规划一些后续动作（如抓取）。为了得到机器人坐标系和相机坐标系的转换矩阵，我们还需要对机器人进行手眼标定。

二、视觉抓取中的关键技术

众所周知，无论将摄像头安装在机械臂上，还是固定在周围环境中，都需要确定相机和机械臂本身的位置关系，视觉识别方面不仅要完成物体位置的识别，还需要分析抓取姿态。
而其中涉及的关键技术，主要是以下四个方面，与此同时ROS针对这些关键技术提供相应的功能包支持。
参考网址：https://zhuanlan.zhihu.com/p/63757762

1、手眼标定

手眼标定即相机内参和外参的标定，其中内参标定使用camera_calibration功能包实现相机内参标定的过程。可参考博客：https://blog.csdn.net/weixin_45661757/article/details/113256274
手眼标定外参标定分为两种方式：眼在手上(eye in hand)、眼在手外(eye to hand)。

• eye-in-hand 眼在手上：相机固定在机器人末端。这种情况下，需要将标