ROS——视觉抓取

最新推荐文章于 2024-09-07 21:06:58 发布
最新推荐文章于 2024-09-07 21:06:58 发布
阅读量118 收藏
点赞数 2
分类专栏： 机器人 数学 文章标签： 机器人
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Vodka688/article/details/141856349
版权

纲要

在这里插入图片描述
在这里插入图片描述

视觉抓取中的关键技术

在这里插入图片描述

内参标定

在这里插入图片描述

物体识别定位

在这里插入图片描述

抓取姿态分析

在这里插入图片描述

运动规划

在这里插入图片描述

外参标定

在这里插入图片描述

任意两个位姿之间的关系

眼在外

在这里插入图片描述

眼在内

在这里插入图片描述

在这里插入图片描述

手眼标定流程

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
robot 部分
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

标定效果

在这里插入图片描述

视觉抓取例程

在这里插入图片描述

grasping_demo.cpp

在这里插入图片描述

获取两个坐标系之间变换关系:waitForTransform 、 LookupTransform

在这里插入图片描述

求相机与机器人坐标系的变换关系

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

剖析

在这里插入图片描述
在这里插入图片描述

总结

在这里插入图片描述
在这里插入图片描述

Vodka~
关注
  • 2
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【论文笔记】基于 ROS 的送餐机器人自主抓取实现
m0_48948682的博客
07-12 1280
送餐机器人的出现可以为同属服务行业的餐饮业减轻大量用人成本，推动传 统餐厅向智慧餐厅的转变升级。本文主要研究如何利用搭载于送餐机器人上的六 自由度机械臂与摄像头，实现机器人自主抓取的功能，从而实现机器人的高度自动化与智能化。利用 ORB_SLAM 算法可以高效地建立三维空间模型，并且可以依据建模 结果获得某点的空间坐标值，传达至机器人主机进行后续处理。完成抓取动作过程如下。手眼标定法根据摄像头固定的位置可分为两种类型。过程如下。 （1）物体识别：在图像中检测到物体。 （2）位姿估计：得到物体在相机坐标系下的
机械臂视觉抓取学习（0）——手眼标定
weixin_64612422的博客
04-23 460
z一些要学的东西：视觉抓取涉及的技术：算法部分：目标定位、姿态估计（6D姿态估计）、抓取点检测（6自由度抓取）、运动规划（ROS或者Movelt）；视觉部分：图像预处理（opencv）、手眼标定（眼在手外，眼在手内）、相机内参；控制部分：上位机与机械臂通讯、运动学、轨迹规划、机械臂编程（python，torch）opencv返回参数到最终结果变换矩阵。欧拉角与旋转矩阵的变换。
ROS2——Service服务（九）
戚晨夕的博客
07-03 1667
话题通信可以实现多个ROS节点之间数据的单向传输，使用这种异步通信机制，发布者无法准确知道订阅者是否收到消息，本讲我们将一起学习ROS另外一种常用的通信方法——服务，可以实现类似你问我答的同步通信效果。从服务的实现机制上来看，这种你问我答的形式叫做客户端/服务器模型，简称为CS模型，客户端在需要某些数据的时候，针对某个具体的服务，发送请求信息，服务器端收到请求之后，就会进行处理并反馈应答信息。 这种通信机制在生活中也很常见，比如我们经常浏览的各种网页，此时你的电脑浏览器就是客户端，通过域名或者各种操作，向
计算机视觉——图像视觉显著性检测
热门推荐
转载请标明出处，完整项目/代码详见github：https://github.com/yiru1225
11-24 1万+
本篇博客主要介绍图像显著性检测（注意预测）定义、原理及其相关流程。探究并实践不同数据集、不同平台下传统显著性检测算法与深度学习的显著性检测算法，故选择了Matlab下的传统算法Fast and Efficient Saliency (FES)与Python下的深度学习算法MSI-Net进行实验。此外，还在部分开源平台进行了线上注意预测尝试，另外使用了不同的评价标准对效果进行评价与对比（内附数据、python、matlab代码）
【实战+源码】基于RGB-D（深度视觉）的具有机械臂抓取功能的自主规划移动服务机器人的设计与实现（一）——准备工作
走走走走走走你
01-07 1万+
目录 一，实物or仿真 1，实物或仿真的利弊 2，从哪些角度去考虑是选择实物还是仿真 二，环境准备 1，首推ROS 2，其他环境 三，理论学习 四，实物搭建 一，实物or仿真 我想这个问题是在开发之前最容易想清楚的，所以我先说！ 1，实物或仿真的利弊 对于做出实物，要比仿真耗费更多的时间，精力，物力，财力。 接触过硬件的...
五轴机械臂实现视觉抓取--realsense深度相机和五自由度机械臂
W809291634的博客
01-14 4401
我发誓沙发
机械臂视觉抓取学习笔记
minzufuxing1949的博客
10-02 2949
像素坐标系不利于坐标变换，因此需要建立图像坐标系，其坐标轴的单位通常为毫米（mm），原点是相机光轴与相面的交点（称为主点），即图像的中心点，轴、轴分别与轴、轴平行。像素坐标系中坐标轴的单位是像素（整数）。摄像头这种精密仪器对光学器件的要求较高，由于摄像头内部与外部的一些原因，生成的物体图像往往会发生畸变，为了避免数据源造成的误差，需要针对摄像头的参数进行标定。2）、对图像中的特征点如标定板角点进行检测，得到标定板角点的像素坐标值，根据已知的棋盘格大小和世界坐标系原点，计算得到标定板角点的物理坐标值；
机器人抓取—— 相机参数与标定 camera_calibration
qq_29462849的博客
01-29 2599
点击上方“计算机视觉工坊”，选择“星标”干货第一时间送达整理丨古月居相机的参数参考：https://blog.csdn.net/weixin_43206570/article/detail...
视觉伺服研究学习——2021年10月
weixin_42460825的博客
11-04 4422
一、基础学习课程 深度学习 计算机视觉 二、论文学习 1、室内动态视觉SLAM算法研究硕士学位论文 鲁棒性：鲁棒是Robust的音译，也就是健壮和强壮的意思。 它也是在异常和危险情况下系统生存的能力。 比如说，计算机软件在输入错误、磁盘故障、网络过载或有意攻击情况下，能否不死机、不崩溃，就是该软件的鲁棒性。 所谓“鲁棒性”，也是指控制系统在一定（结构，大小）的参数摄动下，维持其它某些性能的特性。 视觉里程计：当你进入陌生的屋子，你能够知道自己在屋子中的位...
基于ROS的移动操作机械臂底层规划 及运动仿真
05-10
在仿真实验环节，本文利用ROS及Gazebo仿真平台完成了基于Kinect传感器的抓取水杯实验以及开门实验。Kinect作为微软推出的一种深度摄像头，可以用于检测和识别物体的位置以及跟踪人体的动作，这些功能使得它在机器人...
Ubuntu18.04+ROS melodic+ moveit 机械臂仿真
GiGi_Princess的博客
08-21 2192
打开Moveit! roslaunch moveit_setup_assistant setup_assistant.launch 点击Generate Collision Matrix add add joint 选择1-8 add links 移动 add,调节1-7，右边机械臂会相对转动 add planing
开源机器人操作系统——ROS 简介和目录
ppp2006的专栏
11-16 6323
目前，ROS(robot operating system)逐步成为机器人研发领域的通用性软件平台。《开源机器人操作系统——ROS》是国内第一本全面介绍ROS的中文版图书。 ROS是开源的用于机器人的一种后操作系统，或者说次级操作系统。它提供类似操作系统所提供的功能，包含硬件抽象描述、底层驱动程序管理、共用功能的执行、程序间的消息传递、程序发行包管理，它也提供一些工具程序和库用于获取、建立、编写
挂轨巡检机器人在发电厂与煤矿皮带机场景的应用
jxlyyr的博客
09-06 1425
杭州旗晟智能科技有限公司的B3-111-A挂轨巡检机器人，以其高效、精准、安全的特性，为发电厂和煤矿的皮带机巡检提供了全新的解决方案。该机器人的应用，将大大提高巡检效率和质量，降低人工成本和安全风险，为工业企业的智能化升级和安全生产贡献力量。然而，皮带机往往处于高温、高湿、粉尘等恶劣环境中，传统的人工巡检难以长时间持续进行，且存在漏检、误检的风险。B3-111-A挂轨巡检机器人能够24小时不间断运行，自动完成皮带机的全面巡检任务。，以其高效、精准、安全的特性，为发电厂和煤矿的皮带机巡检带来了革命性的变革。
【机器人工具箱Robotics Toolbox开发笔记（十八）】SCARA机器人的gui界面：正运动学仿真实例
最新发布
m0_72676510的博客
09-07 67
本文通过机器人工具箱实现SCARA机器人的GUI界面以进行正运动学分析，主要涉及到MATLAB的Robotics Toolbox以及GUI工具箱的使用。
【机器人工具箱Robotics Toolbox开发笔记（十）】机器人微分运动学
m0_72676510的博客
09-07 79
机器人工具箱中，可用函数SerialLink.jacob0（）求出对应某个位姿下绝对坐标系中的雅可比矩阵，用SerialLink.jacobn（）求出对应某个位姿下工具坐标系中的雅可比矩阵。
论文速读|BiGym：一款基于演示的移动双手操作机器人基准
2301_81924597的博客
09-04 588
BiGym 是一个针对移动双手操作的机器人学习基准，包含 40 个在家庭环境中进行的任务，如简单的目标接近到复杂的厨房清洁。BiGym 提供了人类收集的演示，反映了现实世界中机器人轨迹的多模态特性。该基准支持多种观察空间，包括机器人的 orszens 感知数据和视觉输入，如来自三个相机视角的 RGB 和深度图像。BiGym 支持两种操作模式：整体模式和双手操作模式，分别考虑和不考虑移动基体的控制。此外，BiGym 还提供了一个标准的 Gymnasium API 接口，用于训练和评估强化学习和模仿学习算法。
机器人助力上下料搬运，加速仓库转运自动化
uwei0512的博客
09-07 204
近年来，国内制造业领域掀起了一股智能化改造的浪潮，众多工厂纷纷采纳富唯智能提供的先进物流解决方案，这一举措显著优化了生产流程，实现了生产效率的飞跃式增长。得益于这些成功案例，某信息技术服务企业在工厂智能物流建设的进程中，也选择了与富唯智能合作。
论文速读|重新审视奖励设计与评估：用于强健人型机器人站立与行走控制的方法
2301_81924597的博客
09-04 468
这篇论文为类人机器人站立和行走（SaW）控制器的持续可衡量改进奠定了基础。通过引入一套定量实际基准测试方法，作者展示了现有控制器的优缺点，并通过基准测试指导新控制器的训练，最终实现了增强的控制器，成功处理了所有测试的扰动。结果表明，当前的RL控制器在能量效率和仿真到现实差距方面存在局限性。未来的工作应专注于在不牺牲其他指标性能的情况下优化能量效率，以及提高运动的平稳性。
ros机械臂视觉抓取
08-23
ROS机械臂视觉抓取是通过ROS（机器人操作系统）实现带有机械臂的移动机器人进行物体抓取的过程。这可以通过使用开源的ROS软件包来实现，例如提到的move_and_grasp软件包。 在机械臂完成视觉抓取任务的过程中，通常会有以下几个步骤： 1. 首先，机械臂处于使能但未运动的状态，准备执行抓取任务。这个初始状态可以在图4.6（a）中示意图中看到。 2. 然后，机械臂会移动到适合深度相机拍摄清晰图像的抓取姿态。这个过程可以在图4.6（b）中看到。 3. 接下来，机械臂使用视觉识别技术来检测并识别目标物体。在这个例子中，机械臂会识别红色长方体作为目标物体。 4. 一旦目标物体被识别出来，机械臂会执行抓取操作，将目标物体抓取起来。这一步骤在图4.6（c）中展示出来。 5. 最后，机械臂会将目标物体放置到预设的码垛区，完成抓取任务。这个过程可以在图4.6（d）中看到。 总之，ROS机械臂视觉抓取是通过使用ROS和相关软件包实现机械臂进行物体抓取的过程，包括姿态规划、视觉识别和抓取动作执行等步骤。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [【Ubuntu&ROS】干货！小伙伴们快来拿，超全机械臂抓取开源项目！](https://blog.csdn.net/weixin_45087775/article/details/105587752)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* [基于机器视觉的ROS机械臂抓取实验](https://blog.csdn.net/Yong_Qi2015/article/details/128310565)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值