YOLOv8多模态(RGB+红外)

YOLOv8多模态,可加加载双图片输入(一般为可见光+红外光),项目代码基于官方ultalytics的最新版本实现,适用任意魔改

可直接使用现有v8环境,无需重新配环境

------------------------------------------

代码有偿,需要请私信

项目包含:

1. YOLOv8多模态(包含下面介绍的3种融合方式,本博文所有图片均来自该项目,所见即所得)

2. YOLOv8多模态UI界面实现(可选,可定制)

送:1000张RGB+红外数据集,拿到代码即可跑

------------------------------------------

1、前端融合

278c0951f551440297cd1052aefa86b2.png

2、中间融合

c46dd80f78444242a0949ba5cc12e6f4.png

3、后端融合(双路)

9dd46ee4ae4547cdb0d843ca9e5830a8.png

前端融合网络信息打印:c12999f5514f4d13be283dea46124082.png

一、多模态数据集结构

        |-datasets
                        |-images
                                  |-train
                                            |-a.jpg
                                  |-val
                                            |-b.jpg
                        |-image  # 额外的图片文件夹,放红外图,名称与原图对应
                                  |-train
                                            |-a.jpg
                                  |-val
                                            |-b.jpg        
                        |-labels  # 双模态共用一个标签
                                  |-train
                                            |-a.txt
                                  |-val
                                            |-b.txt

二、训练结果

蓝色为双模态RGB+IR,红色为单模态RGB

d99d65eab4994885a3ccb86858df4aa3.png

95a0930473d2490e874db35818e4e81c.pnga7251cf2c4244c1a8ef85cac9a567610.png

2fdd1051d6964e5b8745c69e30ffa1cd.png

三、多模态检测UI实现

56d55b0368004331aa5de0fd941e30f0.jpeg

  • 17
    点赞
  • 52
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 19
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 19
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Dneccc

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值