给自己的机器人部件安装单目摄像头并实现gazebo仿真功能

最新推荐文章于 2024-04-27 08:21:11 发布
最新推荐文章于 2024-04-27 08:21:11 发布
阅读量845 收藏 22
点赞数 26
分类专栏： 科研 文章标签： 机器人 ubuntu gazebo rviz
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_39568387/article/details/137728328
版权

手术执行器添加摄像头

手术执行器文件夹surgical_new内容展示

在这里插入图片描述
进入src文件夹下选择进入vision_obliquity文件夹
在这里插入图片描述
选择launch
在这里插入图片描述
有两个可用gazebo中rviz展示的launch文件，robot.launch是添加有摄像头的手术执行器文件，robot_env.launch进一步添加有环境信息的手术执行器文件
在这里插入图片描述
下图是robot.launch展示（红色方块是我们添加的摄像头）：
在这里插入图片描述
下图是robot_env.launch展示：
在这里插入图片描述

如何添加单目摄像头

参考b站学习视频的添加摄像头部分内容: https://www.bilibili.com/video/BV1Ci4y1L7ZZ?p=263&vd_source=9e3999ac88af2c6889c5f00cccc8d215
对应课程文档链接：http://www.autolabor.com.cn/book/ROSTutorials/
实现为我们自己的机器人添加摄像头功能：
实现流程:
摄像头仿真基本流程:
已经创建完毕的机器人模型，编写一个单独的 xacro 文件，为机器人模型添加摄像头配置；
将此文件集成进xacro文件；
启动 Gazebo，使用 Rviz 显示摄像头信息。

  1. 摄像头 xacro 文件
    camera.xacro，代码内容如下:
    camera link、将相机作为一个link添加到机器人上的部件link2，于是便有个camera2link2的关节，type为固定的fixed
<!-- 摄像头相关的 xacro 文件 -->
<robot name="my_camera" xmlns:xacro="http://wiki.ros.org/xacro">
    <!-- 摄像头属性 -->
    <xacro:property name="camera_length" value="0.001" /> <!-- 摄像头长度(x) -->
    <xacro:property name="camera_width" value="0.00025" /> <!-- 摄像头宽度(y) -->
    <xacro:property name="camera_height" value="0.00025" /> <!-- 摄像头高度(z) -->
    <xacro:property name="camera_x" value="0" /> <!-- 摄像头安装的x坐标 -->
    <xacro:property name="camera_y" value="0" /> <!-- 摄像头安装的y坐标 -->
    <xacro:property name="camera_z" value="0.02" /> <!-- 摄像头安装的z坐标:底盘高度 / 2 + 摄像头高度 / 2  -->
    

    
    <!-- Create laser reference frame -->
    <link name="camera">
        <visual>
            <origin xyz="0.000198755346578818 -0.000268944626068074 -0.0105330004865362" rpy="0 0 0" />
            <geometry>
                <box size="${camera_length} ${camera_width} ${camera_height}" />
            </geometry>
            <material name="red"/>
        </visual>

        <collision>
            <origin xyz="0.000198755346578818 -0.000268944626068074 -0.0105330004865362" rpy="0 0 0" />
            <geometry>
                <box size="${camera_length} ${camera_width} ${camera_height}" />
            </geometry>
        </collision>
    </link>
    
    <!-- 关节 -->
    <joint name="camera2link2" type="fixed">
        <parent link="link2"/>
        <child link="camera" />
        <!-- 需要计算两个 link 的物理中心之间的偏移量 -->
        <!-- 设置joint相对于父节的偏移量 -->
        <origin xyz="-0.00028 -0.0003 0.0102" rpy="0 0 0" />
        <!-- 设置关节旋转参考的坐标轴,0表示不绕该轴旋转，1表示绕该轴旋转 -->
        <axis xyz="0 0 1" />
    </joint> 
</robot>
  1. Gazebo 仿真摄像头
    通过 Gazebo 模拟摄像头传感器，并在 Rviz 中显示摄像头数据
    新建 xacro 文件命名为cameraz_gazebo.xacro，配置摄像头传感器信息:
<?xml version="1.0"?>
<robot xmlns:xacro="http://www.ros.org/wiki/xacro" name="my_sensors">
        <gazebo reference="camera">
            <material>Gazebo/Red</material>
        </gazebo>

        <gazebo reference="camera">
            <sensor type="camera" name="camera_node">
                <update_rate>30.0</update_rate>
                <camera name="head">
                    <horizontal_fov>1.3962634</horizontal_fov>
                    <image>
                        <width>1280</width>
                        <height>720</height>
                        <format>R8G8B8</format>
                    </image>
                    <clip>
                        <near>0.02</near>
                        <far>300</far>
                    </clip>
                    <noise>
                        <type>gaussian</type>
                        <mean>0.0</mean>
                        <stddev>0.007</stddev>
                    </noise>
                </camera>
                <plugin name="gazebo_camera" filename="libgazebo_ros_camera.so">
                    <alwaysOn>true</alwaysOn>
                    <updateRate>0.0</updateRate>
                    <cameraName>/camera</cameraName>
                    <imageTopicName>image_raw</imageTopicName>
                    <cameraInfoTopicName>camera_info</cameraInfoTopicName>
                    <frameName>camera</frameName>
                    <hackBaseline>0.07</hackBaseline>
                    <distortionK1>0.0</distortionK1>
                    <distortionK2>0.0</distortionK2>
                    <distortionK3>0.0</distortionK3>
                    <distortionT1>0.0</distortionT1>
                    <distortionT2>0.0</distortionT2>
                </plugin>
            </sensor>
        </gazebo>
</robot>

1.2摄像头 xacro 文件
camera.xacro，代码内容如下:
camera link、将相机作为一个link添加到机器人上link2，于是便有个camera2link2的关节，type为固定的fixed

<!-- 摄像头相关的 xacro 文件 -->
<robot name="my_camera" xmlns:xacro="http://wiki.ros.org/xacro">
    <!-- 摄像头属性 -->
    <xacro:property name="camera_length" value="0.001" /> <!-- 摄像头长度(x) -->
    <xacro:property name="camera_width" value="0.00025" /> <!-- 摄像头宽度(y) -->
    <xacro:property name="camera_height" value="0.00025" /> <!-- 摄像头高度(z) -->
    <xacro:property name="camera_x" value="0" /> <!-- 摄像头安装的x坐标 -->
    <xacro:property name="camera_y" value="0" /> <!-- 摄像头安装的y坐标 -->
    <xacro:property name="camera_z" value="0.02" /> <!-- 摄像头安装的z坐标:底盘高度 / 2 + 摄像头高度 / 2  -->
    

    
    <!-- Create laser reference frame -->
    <link name="camera">
        <visual>
            <origin xyz="0.000198755346578818 -0.000268944626068074 -0.0105330004865362" rpy="0 0 0" />
            <geometry>
                <box size="${camera_length} ${camera_width} ${camera_height}" />
            </geometry>
            <material name="red"/>
        </visual>

        <collision>
            <origin xyz="0.000198755346578818 -0.000268944626068074 -0.0105330004865362" rpy="0 0 0" />
            <geometry>
                <box size="${camera_length} ${camera_width} ${camera_height}" />
            </geometry>
        </collision>
    </link>
    
    <!-- 关节 -->
    <joint name="camera2link2" type="fixed">
        <parent link="link2"/>
        <child link="camera" />
        <!-- 需要计算两个 link 的物理中心之间的偏移量 -->
        <!-- 设置joint相对于父节的偏移量 -->
        <origin xyz="-0.00028 -0.0003 0.0102" rpy="0 0 0" />
        <!-- 设置关节旋转参考的坐标轴,0表示不绕该轴旋转，1表示绕该轴旋转 -->
        <axis xyz="0 0 1" />
    </joint> 
</robot>

封装惯性矩阵算法的 xacro 文件，内容如下的my_head.xacro文件书写，这个文件复制于链接http://www.autolabor.com.cn/book/ROSTutorials/di-6-zhang-ji-qi-ren-xi-tong-fang-zhen/66-urdfji-cheng-gazebo/662-urdf-ji-cheng-gazebo-xiang-guan-she-zhi.html的6.6.2 URDF集成Gazebo相关设置这一小节，将标准的球体、圆柱与立方体的惯性矩阵公式封装成xacro实现：

<robot name="base" xmlns:xacro="http://wiki.ros.org/xacro">
    <!-- Macro for inertia matrix -->
    <xacro:macro name="sphere_inertial_matrix" params="m r">
        <inertial>
            <mass value="${m}" />
            <inertia ixx="${2*m*r*r/5}" ixy="0" ixz="0"
                iyy="${2*m*r*r/5}" iyz="0" 
                izz="${2*m*r*r/5}" />
        </inertial>
    </xacro:macro>

    <xacro:macro name="cylinder_inertial_matrix" params="m r h">
        <inertial>
            <mass value="${m}" />
            <inertia ixx="${m*(3*r*r+h*h)/12}" ixy = "0" ixz = "0"
                iyy="${m*(3*r*r+h*h)/12}" iyz = "0"
                izz="${m*r*r/2}" /> 
        </inertial>
    </xacro:macro>

    <xacro:macro name="Box_inertial_matrix" params="m l w h">
       <inertial>
               <mass value="${m}" />
               <inertia ixx="${m*(h*h + l*l)/12}" ixy = "0" ixz = "0"
                   iyy="${m*(w*w + l*l)/12}" iyz= "0"
                   izz="${m*(w*w + h*h)/12}" />
       </inertial>
   </xacro:macro>
</robot>

组合执行器与摄像头

<!-- 组合执行器与摄像头 -->
<robot name="my_robot" xmlns:xacro="http://wiki.ros.org/xacro">
    <xacro:include filename="myhead.xacro" />
    <xacro:include filename="vision_obliquity_gazebo.xacro" />
    <xacro:include filename="camera.xacro" />

    <xacro:include filename="camera_gazebo.xacro" />
</robot>

这里的vision_obliquity_gazebo.xacro是我们自己的机器人xacro文件，也就是手术执行器，替换成你们自己的机器人描述文件。

下载现成的机器人环境文件

1.下载官方模型库
https://github.com/osrf/gazebo_models
2.将模型库复制进 gazebo
将得到的box_hours.world文件复制到 /urdf/worlds下
在这里插入图片描述

启动仿真环境

  1. 进入到手术执行器文件夹surgical_new文件夹路径下
    执行如下命令，启动gazebo：
catkin_make
source devel/setup.bash
roslaunch vision_obliquity robot_env.launch

在这里插入图片描述

  1. 进入到手术执行器文件夹surgical_new文件夹路径下
    另起一个终端terminal，执行命令，就可以看到摄像头环境信息
rqt_image_view

在这里插入图片描述

double_c之
关注
  • 26
    点赞
  • 踩
  • 22
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
教程 | 阿克曼结构移动机器人的gazebo仿真（二）
TIANBOT的博客
04-08 2001
第二章、配置xacro文件（张宇星投稿）
阿克曼结构移动机器人的gazebo仿真（二）
qq_48427527的博客
04-03 3372
阿克曼结构移动机器人的gazebo仿真（二） 第二章、配置xacro文件 0.前言 上一节已经将urdf导出来了，这一节需要配置一下xacro文件。先看一下导出的功能包在gazebo以及rviz中显示的效果。 将功能包放进工作空间进行编译，source一下环境，先看gazebo: roslaunch tianracer_description gazebo.launch 可以看到模型已经加载到gazebo中的empty_world中了，此时模型还是白板，稍后可对颜色进行配置。 再看rviz,先修改tia
小车yolo机械臂（一）ros下gazebo搭建小车（可键盘控制）安装摄像头仿真 加载yolo检测识别标记物体
热门推荐
WhiffeYF的博客
10-22 1万+
需要用到的代码我已经上传到github上面，有两个包，第一个是darknet_ros（用于yolo的目标检测），第二个是mrobot_gazebo（在ros下小车的仿真）。 下载地址：github项目 我们先看看整体的一个目录架构： 首先，我们先实现ROS下darknet_ros(YOLO V3)检测。 参考博客：ROS下实现darknet_ros(YOLO V3)检测 在github讲darknet_ros下载在src目录后，在ROS工作空间目录下打开终端 然后执行命令： catkin_make -D
阿克曼结构移动机器人的gazebo仿真（五）
qq_48427527的博客
04-06 5824
阿克曼结构移动机器人的gazebo仿真（五） 第四章、用xacro优化URDF并配置gazebo仿真插件 0.前言 上节用简易模型写了一个小车的URDF代码，这一节将用xacro对其进行优化，这里我并不打算用宏对参数进行封装，因为我个人觉得这样看起来会比较直观，方便读者阅读。 1.配置主xacro文件 新建racecar.xacro文件，将上一节racebot.urdf中的代码复制过来并进行修改，整体代码如下： <?xml version="1.0" encoding="utf-8"?> &l
Gazebo机器人仿真环境搭建包.zip
03-25
该工程包用于嵌入式ROS学习上面的Gazebo机器人仿真搭建包，将该工程包导入ROS的工作环境，我们就可以进行ROS的机器人仿真开发
自定义移动机器人模型Gazebo仿真
04-15
ROS学习（九）自定义移动机器人模型Gazebo仿真，对应源码。博客地址：https://blog.csdn.net/u011832219/article/details/115035134
用于水下机器人仿真的GazeboROS软件包
12-23
用于水下机器人仿真的GazeboROS软件包
gazebo机器人仿真与编程abel05
09-03
gazebo机器人仿真与编程入门教程
基于Matlab和gazebo实现联合仿真（模型）.rar
03-23
1、资源内容：基于Matlab和gazebo实现联合仿真（模型）.rar 2、适用人群：计算机，电子信息工程、数学等专业的学习者，作为“参考资料”参考学习使用。 3、解压说明：本资源需要电脑端使用WinRAR、7zip等解压工具...
发那科FANUC机器人R-2000iB平衡缸维修攻略
gzzirui2020的博客
04-26 595
作为精密设备的核心部分，其维护和机械臂平衡缸修理对于整个系统的稳定运行至关重要。它通过内部的压力调节来平衡负载，保证机器人的精准定位和平稳操作。6. 功能测试：完成装配和调整之后，进行系统的功能测试，确保一切工作正常。3. 细致检查：对拆卸下的部件进行检查，确认磨损程度和更换需求。进行检查，以确定问题的确切所在是维修流程中不可或缺的一步。FANUC发那科电源模块A06B-6110-H006维修。发那科喷涂机器人电路板A20B-1007-0680维修。或损坏，机器人的性能可能会大打折扣，因此及时且正确的。
机器人前馈控制MATLAB实现
FL1717的博客
04-26 309
但在实际工程中并不是所有的对象都是可得到精确模型的，而且很多控制对象在运行的同时自身的结构也在发生变化。这时就需要加入反馈，反馈的特点是根据偏差来决定控制输入，不管对象的模型如何，只要有偏差就根据偏差进行纠正，可以有效的消除稳态误差。在机器人控制中，前馈控制是一种常用的方法，用于补偿系统中的已知动态。前馈-反馈综合控制结合二者的优点，可以提高系统响应速度。从前馈控制角度看，由于增加了反馈控制，降低了对前馈控制模型精度的要求；从反馈控制角度看，前馈控制作用对主要干扰及时进行粗调，大大减少反馈控制的负担。
商用清洁机器人的工作原理介绍
weixin_43802726的博客
04-23 474
其工作原理是，首先进行手动建图，app上进入建图模式，手动模式推动机器对整个场景进行建图，边走边建图，可以app实时查看建图效果，看是否有叠图歪图现象，同时app上也可以远程遥控控制小车进行行走建图。地图建完后，可以在线用app修改地图添加虚拟墙，擦除错误地图点，也可以离线修改地图。之后可以选择清扫区域，执行清扫任务，机器会自动规划清扫路线，清扫的同时可以执行避障功能，临时规划避障路线。底部有防撞条，内置地磁传感器。商用清洁机器人是清洁机器人的一种，其主要应用于大型商场，办公室，医院，政府部门等。
人工智慧时代的引擎：揭开机器人核心零部件的奥秘
最新发布
04-27 847
人工智慧时代的引擎：揭开机器人核心零部件的奥秘
YASKAWA安川机器人DX100轴板维修故障细节分享
gzzirui2020的博客
04-24 594
利用安川机器人自带的诊断系统读取故障代码，根据故障代码进行初步分析。安川机器人DX100轴控制基板/轴板SRDA-EAXA01A维修。下面将和大家探讨一下。YASKAWA安川机械手基板JZNC-NIF02-1 维修。YASKAWA安川机器人控制基板JANCD-NCP01维修。YASKAWA机械手控制基板JANCD-YCP01-E维修。安川工业机器人弧焊基板JANCD-YEW01-E 维修。安川机械臂人基板 JANCD-YBK01-1E 维修。安川弧焊机器人基板 JANCD-XEW01-2维修。
星尘智能 AI 机器人 S1——国产机器人的巅峰之作
文浩Marvin的博客
04-26 504
在演示视频中，它以 1 倍速运行，却几乎与人类的速度同步，甚至有些动作还被放慢了展示。它可以超高速完成各种复杂任务，比如玩叠杯游戏、倒红酒、削黄瓜、操作机器、修理凳子，还能自己使用吸尘器等电子产品，甚至可以写毛笔字！大家不妨去官网 astribot.com 看看，感受一下这个机器人的神奇之处！它无疑是国产机器人领域的一项重大突破，也让我们对未来的科技发展充满了期待！更让人惊讶的是，公司官网虽然没有提供太多详细信息，但给出的一组对比数据却显示它全方位超越人类！最近发现了一个国产的机器人，真的让人惊叹不已！
2、选择什么样的机器人本体
04-25 297
如果说世界是物质的，那么应该先制造出机器人的本体，再让她产生灵魂。如果是精神的呢，世界是无中生有的呢，那就先在仿真中研究算法吧。 而我比较崇尚初中哲学的一句话，世界是物质的，物质是运动的，运动是有规律的，规律是可以认识的。所以我先选择了本体。
机器人技术概述_3.机器人的分类
huaqianzkh的专栏
04-26 606
由于机器人的用途广泛，有许多种分类。行业不同，机器人的应用场景不一样，由于要求的不同，机器人的控制方式也存在许多差异，这里简要描述按控制方式和按应用行业两种分类。
机器人系统开发ros2-基础实践01-学会自定义一个机器人动作aciton实体类
小海聊智造
04-23 1275
您之前在了解操作教程中了解了action。与其他通信类型及其各自的接口（主题/消息和服务/srv）一样，您也可以在包中自定义操作。本教程向您展示如何定义和构建可与您将在下一个教程中编写的action服务器和action 客户端一起使用的操作。需要理解action 可以回到这篇文章。
fanuc 机器人gazebo仿真环境配置
05-11
要在 Gazebo 中模拟 Fanuc 机器人，需要进行以下步骤： 1. 安装 ROS 和 Gazebo：首先，需要安装 ROS 和 Gazebo。ROS 是一个机器人操作系统，Gazebo 是一个机器人仿真环境。你可以按照 ROS 和 Gazebo 的官方文档进行安装。 2. 安装 Fanuc 机器人的 ROS 包：在 ROS 中，有一些 Fanuc 机器人的 ROS 包可用于仿真。你可以从 GitHub 上下载这些包，然后将它们放在你的 catkin 工作区中的 src 文件夹中。 3. 编译 ROS 包：在安装了 Fanuc 机器人的 ROS 包之后，需要使用 catkin_make 命令编译这些包。在 catkin 工作区的根目录中运行 catkin_make 命令。 4. 启动 Gazebo：在编译成功之后，需要启动 Gazebo。你可以使用 roslaunch 命令启动 Gazebo 和 Fanuc 机器人的模型。例如，可以使用以下命令启动 Gazebo 和 Fanuc 机器人模型： ``` roslaunch fanuc_description fanuc.launch ``` 5. 控制机器人：在 Gazebo 中，你可以使用 ROS 控制器控制机器人。可以使用 rostopic 命令发布控制命令，例如： ``` rostopic pub /fanuc/joint1_position_controller/command std_msgs/Float64 "data: 1.0" ``` 这将使机器人的第一个关节转动到 1.0 弧度的位置。 以上就是在 Gazebo 中模拟 Fanuc 机器人的基本步骤。需要注意的是，Fanuc 机器人的 ROS 包可能需要进行一些配置，才能正确地在 Gazebo 中运行。你可以参考官方文档或者其他教程进行配置。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值