小知识点系列(二) 本文(8万字) | 解读数据增强 | Mosaic | MixUp | CutOut | CutMix | HSV | Albumentation |

已于 2024-01-04 17:16:46 修改
阅读量664 收藏 12
点赞数 10
文章标签： 人工智能 深度学习
于 2023-12-25 19:45:42 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44302770/article/details/135207447
版权
人工智能专栏计划 专栏收录该内容
141 篇文章 7 订阅

已下架不支持订阅

点击进入专栏：
《人工智能专栏》 Python与Python | 机器学习 | 深度学习 | 目标检测 | YOLOv5及其改进 | YOLOv8及其改进 | 关键知识点 | 各种工具教程

文章目录

数据增强介绍

1. 前言

这篇文章主要参考 A survey on Image Data Augmentation for Deep Learning， 总结了常用的传统扩增方法及其应用时的注意事项。这里的传统方法指不包括基于深度学习（比如 GAN）等新的扩增方法。

另外需要注意的是，虽然对于不同的任务，比如对于分类，检测任务，不同的任务在采用某一个具体的扩增方法的时候会有所不同，比如对于检测任务需要考虑对 bounding box 进行相应的操作，但是这里仅仅从扩增方法的角度来说是没有区别的。

最后， 数据扩增的具体方法非常多，而且除了各个训练框架提供的方法之外还有很多第三方库，这里仅仅是整理了一些比较常见的扩增方法。更多的扩增方法可以参考第三方库 imgaug,

了解本专栏 已下架不支持订阅
小酒馆燃着灯
关注
  • 10
    点赞
  • 踩
  • 12
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
专栏目录

已下架不支持订阅

人工智能训练数据增强Mosaic Mixup
07-14
人工智能训练数据增强Mosaic Mixup 1、test_load_mosaic_mixup，使用mosaic_mixup方法增强数据； 2、test_replace_black_block,替换混合增强数据中的黑色块 └── test_thread_fun ,多线程进行替换 └── test_...
多图混合数据增强（CutMix、mosaic、stitcher）
weixin_51015047的博客
06-26 1719
前言 参考文章[1]2(https://blog.csdn.net/weixin_39558804/article/details/110856146?utm_medium=distribute.pc_relevant.none-task-blog-baidujs_title-1&spm=1001.2101.3001.4242) 三者都是多张图片混合成一张的形式来进行数据增强，都对数据集性能有一定提升 一、cutmix（仅混合两张图） CutMix的处理方式比较简单，对一对图片做操作，简单讲就是随机
Python库 | mosaic-music-0.14.2.tar.gz
04-11
资源分类：Python库 所属语言：Python 资源全名：mosaic-music-0.14.2.tar.gz 资源来源：官方 安装方法：https://lanzao.blog.csdn.net/article/details/101784059
PyPI 官网下载 | k2mosaic-3.0.0.tar.gz
01-28
资源来自pypi官网。 资源全名：k2mosaic-3.0.0.tar.gz
用Mosaic数据增强怎么得到图片和xml
09-21
Mosaic数据增强返回图片和xml Mosaic数据增强返回图片和xml Mosaic数据增强返回图片和xml
睿智的目标检测28——YoloV4当中的Mosaic数据增强方法
12-20
睿智的目标检测28——YoloV4当中的Mosaic数据增强方法学习前言什么是Mosaic数据增强方法实现思路全部代码 学习前言 哈哈哈！我又来数据增强了！ 什么是Mosaic数据增强方法 Yolov4的mosaic数据增强参考了CutMix数据...
武汉星起航：挂牌上海股权中心，资本赋能共绘跨境电商繁荣新图景
m0_74145751的博客
06-22 581
同时，公司的品牌效应也将助力其在亚马逊市场上树立更加专业的形象，提升客户的信任度和忠诚度。这一里程碑式的举措不仅彰显了公司的雄厚实力，更为其在亚马逊市场的发展带来了诸多优势。武汉星起航的成功挂牌标志着其发展的新起点，凭借资本市场的强大支持，公司必将持续强化自身实力，扩大市场影响力，为客户提供卓越服务。展望未来，武汉星起航将继续引领行业创新，为亚马逊市场的繁荣贡献源源不断的动力，共同书写跨境电商的新辉煌篇章。这不仅为公司带来了更为充足的资金流，也为其在亚马逊市场的持续投入和快速发展提供了坚实的保障。
Midjourney绘画提示词精选：提升AI艺术创作的秘诀
weixin_42132035的博客
06-22 1965
在AI艺术创作领域，MidJourney作为一款强大的绘画生成工具，受到了越来越多艺术家和设计师的青睐。通过提供简洁但富有创意的提示词，可以帮助MidJourney生成令人惊叹的艺术作品。在本文中，我们将分享一些精选的MidJourney绘画提示词，助你在AI艺术创作中取得更好的效果。
clion调试opencv程序时，查看内存中图像的方法
yangpan011的博客
06-25 297
clion调试opencv程序时，查看内存中图像的方法
SOBEL图像边缘检测器的设计
zzhao2580的博客
06-27 815
在过去的20年里产生了许多边缘检测器，而Sobel算法只涉及加法操作，但却可以得到很好的划分效果，因而是图像处理系统中最常用的边缘检测算法。（3）如果使用CPLD/FPGA进行自行设计，通过采用并行流水线技术假设使用50M的系统时钟，处理完一个像素点的时间为 4×1/(50M)=80ns，处理完一帧图像的时间为 800×600×80ns＝38.4ms，结果处理速度比DSP高了大约两个数量级，从上可以看出，使用CPLD/FPGA进行自行设计有关图像处理模块，对整个系统速度的改善是很非常明显的。
Oracle新特性速递：未来数据库技术的无限可能
程序边界
06-28 928
Oracle从入门到精通（第5版）》从初学者角度出发，通过通俗易懂的语言和丰富多彩的实例，详细介绍了使用Oracle 19c进行数据管理的各方面技术。
mindspore打卡第几天 DDPM 之Unet 网络解析
qq_39306047的博客
06-27 373
网络获取了一批`(batch_size, num_channels, height, width)`形状的噪声图像和一批`(batch_size, 1)`形状的噪音水平作为输入，并返回`(batch_size, num_channels, height, width)`形状的张量。- `ops.concat((x, h[len_h]), 1)`：这是关键的跳跃连接步骤，将当前解码器层的输出`x`与对应编码器层的特征图`h[len_h]`沿通道维度（维度1）拼接，从而传递并合并局部细节信息。
“人工智能+”带来新变化
RongdaTEC的博客
06-24 630
麦当劳一直在开发和推广AI语音点餐技术，此前与IBM合作测试聊天机器人，提高免下车点餐服务效率，并于去年12月宣布与谷歌建立合作伙伴关系，共同部署生成性AI技术。报告指出，AIGC具有巨大潜力，能够促进生产力增长和推进公共服务的可及性，但AI技术的大范围应用也可能更加频繁地影响高技能劳动者和白领群体，这就要求劳动者提高学习和使用AI应用的能力。AI可将开放水域的近距离碰撞降低33%，航线减少偏差可帮助船舶每年减少约7075万公里的航程，平均每艘船可节省约10万美元的燃料成本，助力航运业实现减排目标。
聚观早报 | 真我GT6官宣；iQOO 13参数细节曝光
Juguan365的博客
06-26 1020
聚观早报每日整理最值得关注的行业重点事件，帮助大家及时了解最新行业动态，每日读报，就读聚观365资讯简报。整理丨Cutie6月26日消息真我GT6官宣iQOO 13参数细节曝光苹果iPadOS 18 Beta 2更新一加Ace 3 Pro散热细节曝光亚马逊秘密研发聊天机器人Metis。
Nemotron-4
ZONGDAOFU的专栏
06-26 332
4. **合成数据生成**：Nemotron-4系列包含基础、Instruct和Reward模型，形成一个完整的pipeline，专门用于生成高质量的合成数据，这对于那些难以获取真实数据或者涉及隐私问题的领域尤为重要，可以有效降低数据成本并加速模型迭代。7. **经济效益**：由于采用了高效的MOE（专家混合）架构，Nemotron-4相比传统Transformer模型可能展现出更高的效率和更低的运行成本，这对于企业来说，意味着在保证性能的同时，能有效控制计算资源的投入。
Gradio官方教程一：Gradio生态系统、主要组件及Interface class简介
qq_56591814的博客
06-25 795
Gradio 是一个用于快速构建机器学习模型界面的 Python 库，使用 Gradio 内置的共享功能，您可以在几秒钟内分享您的演示或网络应用程序链接，无需任何 JavaScript、CSS 或网页托管经验！
如何实现HPC数据传输的高效流转，降本增效？
文件数据安全交换
06-26 437
飞驰云联是中国领先的数据安全传输解决方案提供商，长期专注于安全可控、性能卓越的数据传输技术和解决方案，公司产品和方案覆盖了跨网跨区域的数据安全交换、供应链数据安全传输、数据传输过程的防泄漏、FTP的增强和国产化替代、文件传输自动化和传输集成等各种数据传输场景。飞驰云联主要服务于集成电路半导体、先进制造、高科技、金融、政府机构等行业的中大型客户，现有客户超过500家，其中500强和上市企业150余家，覆盖终端用户超过40万，每年通过飞驰云联平台进行数据传输和保护的文件量达到4.4亿个。
AI大模型企业应用实战(25)-为Langchain Agent添加记忆功能
JavaEdge全是干货的技术号
06-26 405
在开发复杂的AI应用时,赋予Agent记忆能力是一个关键步骤。这不仅能提高Agent的性能,还能使其在多轮对话中保持上下文连贯性。本文将详细介绍如何在Langchain框架中为Agent添加记忆功能,并深入解析每个步骤的原理和最佳实践。tools,llm,: 这种Agent类型特别适合使用OpenAI的function calling特性。: 启用详细输出,有助于调试。: 自动处理解析错误,提高Agent的稳定性。: 将我们之前定义的记忆组件传递给Agent。
WebKit简介及工作流程
最新发布
cybtec的博客
06-28 696
WebKit是一个开源的浏览器引擎，最初由苹果公司开发，用于其Safari浏览器。随着时间的推移，WebKit也被广泛应用于其他多个平台和应用中，包括Google Chrome（桌面版）、Chromium（一个开源项目，用于构建Chrome等浏览器）、Android浏览器以及多种移动设备和嵌入式系统中的浏览器。WebKit以其高性能、低内存占用和高度可移植性而闻名。它支持HTML5、CSS3和其他现代Web技术，使得开发者能够创建更加丰富和互动的网络应用。
Mosaic和MixUp数据增强
06-17
Mosaic和MixUp是两种常用的图像数据增强技术，它们用于训练深度学习模型时增加数据的多样性，提高模型的泛化能力。 1. **Mosaic**[^4]: Mosaic是一种组合增强技术，它将四张随机裁剪的图像拼接在一起，形成一个新的大图像，四个小图像的位置是随机的，通常不重叠。这样可以模拟更大的场景和不同的上下文关系。例如，在COCO数据集中，这种增强方式被广泛使用[^5]。 ```python # 假设我们有四个图像 images = [img1, img2, img3, img4] mosaic_image = torchvision.transforms.functional.mosaic(images) ``` 2. **MixUp**[^6]: MixUp是一种线性组合的方法，它将两个样本及其对应的标签以一定的比例混合在一起，生成新的合成样本和标签。这个过程可以表示为： ```python lambda_param = np.random.beta(alpha, alpha) # alpha是一个超参数 x_mix = lambda_param * x1 + (1 - lambda_param) * x2 y_mix = lambda_param * y1 + (1 - lambda_param) * y2 ``` 这个过程有助于模型学习到输入之间的线性关系，从而提升泛化能力。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小酒馆燃着灯

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值