OpenMMLab简介

已于 2023-06-01 13:53:06 修改
阅读量571 收藏 3
点赞数 1
文章标签： 深度学习 人工智能
于 2023-06-01 13:43:27 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_38655947/article/details/130985876
版权

Github链接https://github.com/open-mmlab官网链接https://openmmlab.com

目录

目标检测算法库MMDetection

目标检测算法库MMYOLO

 文字检测识别算法库MMOCR

3D目标检测算法库MMDetection3D

旋转目标检测算法库MMRotate

图像分割算法库MMSegmentation

图像分类+预训练+多模态算法库MMPretrain

姿态估计算法库MMPose

三维人体姿态估计算法库MMHuman3D

视频动作识别算法库MMAction

目标追踪MMTracking

生成模型+底层视觉+AIGC算法库MMagic

模型部署工具箱MMDeploy

趣味应用游乐场Playground

算法库详解

目标检测算法库MMDetection

MMDetectionhttp://github.com/open-mmlab/mmdetection

MMDetection 支持了各种不同的检测任务，包括目标检测，实例分割，全景分割，以及半监督目标检测。可以按照自己需求做自己的数据集并使用现有的框架快速训练、推理。

 算法框架

Object DetectionInstance SegmentationPanoptic SegmentationOther

模块组件

BackbonesNecksLossCommon

目标检测算法库MMYOLO

MMYOLO 中目前实现了目标检测和旋转框目标检测算法，但是相比 MMDeteciton 版本有显著训练加速，训练速度相比原先版本提升 2.6 倍。

MMYOLOhttps://github.com/open-mmlab/mmyolo

 文字检测识别算法库MMOCR

MMOCRhttps://github.com/open-mmlab/mmocr

专注于文本检测，文本识别以及相应的下游任务，如关键信息提取。 它是 OpenMMLab 项目的一部分。兼容中文，英文和数字。

 3D目标检测算法库MMDetection3D

MMDection3Dhttps://github.com/open-mmlab/mmdetection3d

面向 3D 检测的平台

 旋转目标检测算法库MMRotate

适合目标检测的框有方向的任务
GitHub - open-mmlab/mmrotate: OpenMMLab Rotated Object Detection Toolbox and BenchmarkOpenMMLab Rotated Object Detection Toolbox and Benchmark - GitHub - open-mmlab/mmrotate: OpenMMLab Rotated Object Detection Toolbox and Benchmarkhttps://github.com/open-mmlab/mmrotate

图像分割算法库MMSegmentation

 语义分割，适合街景，无人驾驶，理疗影像等任务GitHub - open-mmlab/mmsegmentation: OpenMMLab Semantic Segmentation Toolbox and Benchmark.OpenMMLab Semantic Segmentation Toolbox and Benchmark. - GitHub - open-mmlab/mmsegmentation: OpenMMLab Semantic Segmentation Toolbox and Benchmark.https://github.com/open-mmlab/mmsegmentation

 图像分类+预训练+多模态算法库MMPretrain

GitHub - open-mmlab/mmpretrain: OpenMMLab Pre-training Toolbox and BenchmarkOpenMMLab Pre-training Toolbox and Benchmark. Contribute to open-mmlab/mmpretrain development by creating an account on GitHub.https://github.com/open-mmlab/mmpretrain

  • 图像分类：输入图像，AI给出类别的概率，概率最高的就是最后的类型
  • 图像描述（Image Caption）：输入图片，AI使用文字描述图片
  • 视觉问答（Visual Question Answering）：输入图片，问AI一个问题，AI根据图片给出答案
  • 视觉定位（Visual Grounding）：输入图片，给出提示提，AI根据提示词换出框
  • 检索（图搜图，图搜文，文搜图）

 姿态估计算法库MMPose

GitHub - open-mmlab/mmpose: OpenMMLab Pose Estimation Toolbox and Benchmark.OpenMMLab Pose Estimation Toolbox and Benchmark. Contribute to open-mmlab/mmpose development by creating an account on GitHub.https://github.com/open-mmlab/mmpose

 除了人体关键提检测也可以做自己标注数据的关键点检测

 三维人体姿态估计算法库MMHuman3D

GitHub - open-mmlab/mmhuman3d: OpenMMLab 3D Human Parametric Model Toolbox and BenchmarkOpenMMLab 3D Human Parametric Model Toolbox and Benchmark - GitHub - open-mmlab/mmhuman3d: OpenMMLab 3D Human Parametric Model Toolbox and Benchmarkhttps://github.com/open-mmlab/mmhuman3d

 视频动作识别算法库MMAction2

动作识别，时序动作检测，时空动作检测以及基于人体姿态的动作识别

GitHub - open-mmlab/mmaction2: OpenMMLab's Next Generation Video Understanding Toolbox and BenchmarkOpenMMLab's Next Generation Video Understanding Toolbox and Benchmark - GitHub - open-mmlab/mmaction2: OpenMMLab's Next Generation Video Understanding Toolbox and Benchmarkhttps://github.com/open-mmlab/mmaction2

无法通过单帧画面，需要结合上下文判断

目标追踪MMTracking

 支持视频目标检测，多目标跟踪，单目标跟踪和视频实例分割等多种任务和算法。

GitHub - open-mmlab/mmtracking: OpenMMLab Video Perception Toolbox. It supports Video Object Detection (VID), Multiple Object Tracking (MOT), Single Object Tracking (SOT), Video Instance Segmentation (VIS) with a unified framework.OpenMMLab Video Perception Toolbox. It supports Video Object Detection (VID), Multiple Object Tracking (MOT), Single Object Tracking (SOT), Video Instance Segmentation (VIS) with a unified framework. - GitHub - open-mmlab/mmtracking: OpenMMLab Video Perception Toolbox. It supports Video Object Detection (VID), Multiple Object Tracking (MOT), Single Object Tracking (SOT), Video Instance Segmentation (VIS) with a unified framework.https://github.com/open-mmlab/mmtracking

生成模型+底层视觉+AIGC算法库MMagic

支持了流行的图像修复、图文生成、3D生成、图像修补、抠图、超分辨率和生成等任务的应用。 支持 Stable Diffusion 的微调和ControlNet 动画生成。也支持 GANs 的插值，投影，编辑和其他流行的应用。

  • 文生图，图生图，图像填充（inpainting）
  • 图像去噪，重建，超分辨率，去雾
  • 视频插帧，超分辨率
  • 黑白老照片上色
  • Matting（抠人）

GitHub - open-mmlab/mmagic: OpenMMLab Multimodal Advanced, Generative, and Intelligent Creation Toolbox. Unlock the magic 🪄: Generative-AI (AIGC), easy-to-use APIs, awsome model zoo, diffusion models, image/video restoration/enhancement, etc.OpenMMLab Multimodal Advanced, Generative, and Intelligent Creation Toolbox. Unlock the magic 🪄: Generative-AI (AIGC), easy-to-use APIs, awsome model zoo, diffusion models, image/video restoration/enhancement, etc. - GitHub - open-mmlab/mmagic: OpenMMLab Multimodal Advanced, Generative, and Intelligent Creation Toolbox. Unlock the magic 🪄: Generative-AI (AIGC), easy-to-use APIs, awsome model zoo, diffusion models, image/video restoration/enhancement, etc.https://github.com/open-mmlab/mmagic

模型部署工具箱MMDeploy

为各算法库提供统一的部署体验

open-mmlab/mmdeploy: OpenMMLab Model Deployment Framework (github.com)https://github.com/open-mmlab/mmdeploy

趣味应用游乐场Playground

一个用于收集和展示 OpenMMLab 相关前沿和有趣应用的项目

https://github.com/open-mmlab/playgroundhttps://github.com/open-mmlab/playground

skyeKing_trueKing
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
【mmlab2.0】二十分钟入门计算机视觉开源神器OpenMMLab
yikshing的博客
06-01 453
从mmlab到innolab、xedu、mmedu，一站式了解
OpenMMLAB实战系列视频教程
09-13
OpenMMLAB实战系列视频教程是一套专注于深度学习与计算机视觉技术的教程资源，由MMLAB（多媒体计算与学习实验室）提供。这套教程旨在帮助学习者深入理解并掌握OpenMMLAB这一最大最全的开源视觉代码库，涵盖了深度...
Open-MMLab介绍
m0_62931218的博客
03-13 507
用tesorRT可以部署在英伟达的开发板上，ONNX RUNTIME可以放在本地PC或者树莓派上，OPenVINO可以部署在intel的神经网络计算棒、服务器上。无人驾驶中车道线检测，视觉的辅助驾驶，结合摄像头本身的特征，还要进行各种传感器的融合，激光雷达、毫米波雷达、红外传感器，目前车上标配的传感器。算法框架包括：分类、检测、分割、3D检测、OCR、人体关键点检测、光流估计、目标跟踪、小样本学习。利用图像分类预测模型的骨干网络接一个检测头、分割头、关键点预测头，就可完成后续任务。
OpenMMlab AI实战营Day5 MMDtetection教学
一只大憨憨的博客
02-08 749
OpenMMlab AI实战营Day5 MMDtetection教学
满足你一切需求的 MMYOLO/MMDet 可视化 (一)
qq_39967751的博客
01-09 4353
可视化在深度学习时代算是核心需求，借助可视化功能，研究者可以快速定位分析模型以及排查问题。在 OpenMMLab 2.0 时代，MMEngine 对常用的可视化需求进行了设计和实现，其具备如下功能：
分割一切？手把手教你部署SAM+LabelStudio实现自动标注
热门推荐
m0_47026232的博客
04-28 2万+
最近Open-mmlab开源了Playground项目，将最近引起CV界轰动的SAM(Segment Anything Model)模型和Open-mmlab多个视觉框架相结合，可实现多种视觉任务的自动标注，本文将采用Open-mmlab的Playground开源项目，使用SAM和LabelStudio，实现分割任务的半自动标注。
OpenMMLab 开源体系揭秘.pdf
02-27
OpenMMLab 开源体系揭秘 OpenMMLab 是一个开源的计算机视觉算法开放平台，由商汤科技发起，旨在提供高质量的代码框架和完善的科研平台，减少算法复现难度，促进产学研打通。该平台涵盖多个研究热点方向，包括目标...
通用视觉框架OpenMMlab课程01计算机视觉与OpenMMLab概述
11-27
通用视觉框架OpenMMlab课程01计算机视觉与OpenMMLab概述通用视觉框架OpenMMlab课程01计算机视觉与OpenMMLab概述通用视觉框架OpenMMlab课程01计算机视觉与OpenMMLab概述通用视觉框架OpenMMlab课程01计算机视觉与Open...
交大PPT通用视觉框架OpenMMlab课程02图像分类与MMClassification
11-27
【交大PPT】通用视觉框架OpenMMlab课程02图像分类与MMClassification【交大PPT】通用视觉框架OpenMMlab课程02图像分类与MMClassification【交大PPT】通用视觉框架OpenMMlab课程02图像分类与MMClassification【交大...
mmdetection-中文文档(自己翻译).pdf
02-10
由mmdetection英文文档翻译，主要有五章内容，分别介绍了安装、使用、技术细节、模型库以及更新的日志，对于初学者有一定的帮助，要深入理解，下一步就是解毒源码了。
mmsegmentation
04-04
文档： ： 介绍 MMSegmentation是基于PyTorch的开源语义分割工具箱。 它是OpenMMLab项目的一部分。 master分支可与PyTorch 1.3至1.6一起使用。 主要特点 统一基准 我们为各种语义分割方法提供了一个统一的基准测试工具箱。 模块化设计 我们将语义分割框架分解为不同的组件，并且可以通过组合不同的模块轻松地构建自定义的语义分割框架。 开箱即用的多种方法支持 该工具箱直接支持流行的和当代的语义分割框架，例如PSPNet，DeepLabV3，PSANet，DeepLabV3 +等。 高效率 训练速度比其他代码库快或可比。 执照 该项目是根据。 变更日志 v0.11.0于02/02/20发布。 有关详细信息和发行历史，请参考 。 基准和模型动物园 结果和模型可在。 支持的骨干网： ResNet ResNeXt 支持的方法：
mmdetection3d:OpenMMLab的下一代通用3D对象检测平台
03-17
它是MMLab开发的OpenMMLab项目的。主要特点开箱即用地支持多模态/单模态检测器它直接支持多模态/单模态检测器，包括MVXNet，VoteNet，PointPillars等。 支持开箱即用的室内/室外3D检测它直接支持流行的室内和室外3D...
MMSegmentation官方使用文档记录
Thinkobj的博客
12-20 1932
mmsegmentation官方使用文档记录
MMDeploy快速安装及使用说明
a486259的博客
06-22 3345
官网原文详细地址 快速上手 — mmdeploy 0.4.0 文档 在这里对快速上手进行简单说明，mmdeploy支持open-mmlab旗下的多个开源框架中模型的部署，具体如下图所示。我们为 OpenMMLab 各算法库提供了统一的模型部署工具箱。已支持的算法库如下所示，未来将支持更多的算法库MMClassification MMDetection MMSegmentation MMEditing MMOCR MMPose模型可以导出为多种推理引擎文件，并在对应的后端上进行推理。 如下后端已经支持，后续将
day1-OpenMMLab概述
最新发布
kkz2756275580的博客
06-01 256
部署框架MMDeploy算法框架MMPretrain：预训练+多模态MMDetection：目标检测MMDetection3D：3D目标检测MMRotate：旋转目标检测MMSegmentation：语义分割MMPose：姿态估计MMAction2：视频动作分析MMOCR：光符识别MMagic：底层视觉+AIGCMMYOLO：目标检测MMFlow：光流估计MMTracking：目标跟踪MMHuman3D：人体参数化模型。
open-mmlab (segmentation) 开源框架
Eric_Evil的博客
08-09 4376
最早一直想把mmdetection吃掉，但是一只拖延没有搞定，趁着最近休息，从mmsegmentation切入，记录一下学习过程。算了，先记录CVPR2021-SETR的code（https://github.com/fudan-zvg/SETR）吧，他这个是基于老版本的mmsegmetation的主要模块开发的，后续官方有少量变化或未用到的再补充。 1 overview 先上代码结构，主要使用时用到mmseg，tools，configs。 注：mmcv是应该装到本地的，是mm系列的基础库。但是我看代
开年福利！OpenMMLab 全新企划，等你来
我爱计算机视觉
02-19 272
本文为开源组织 OpenMMLab 小编投稿~Hello 大家好，我是 OpenMMLab 的 PM 小编。2021 即将全面铺开，向我们走来呐。小编在此谨代表 OpenMMLab 全体成...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值