ViTDet 项目推荐

ViTDet 项目推荐

ViTDet Unofficial implementation for [ECCV'22] "Exploring Plain Vision Transformer Backbones for Object Detection" ViTDet 项目地址: https://gitcode.com/gh_mirrors/vi/ViTDet

1. 项目基础介绍和主要编程语言

ViTDet 是一个非官方的 PyTorch 实现项目,旨在探索用于目标检测的普通视觉 Transformer 骨干网络。该项目的主要编程语言是 Python,并且依赖于 PyTorch 框架。

2. 项目核心功能

ViTDet 项目的主要功能是实现了一种基于视觉 Transformer (ViT) 的目标检测模型。该模型能够在不重新设计分层骨干网络的情况下,对原始 ViT 架构进行微调,从而实现高效的目标检测。项目中还包含了多种预训练模型和配置文件,支持在 COCO 数据集上的训练和评估。

3. 项目最近更新的功能

  • 2022-04-18: 探索使用小型 1K 监督训练模型(20M 参数)进行 ViTDet 的实现,结果显示在 COCO 数据集上达到了 45.6 mAP。此外,使用多阶段结构的结果显示,Swin-T 模型达到了 46.0 mAP,而 ViTAEv2-S 模型达到了 47.8 mAP。
  • 2022-04-17: 发布了在 MS COCO 数据集上预训练的 ViT-B 和 ViTAE-B 模型的权重和日志。这些模型完全使用 PyTorch 在 GPU 上进行训练。
  • 2022-04-16: 发布了 ViTDet 的初始非官方实现,使用 ViT-Base 模型,在目标检测和分割任务上分别达到了 51.1 mAP 和 45.5 mAP。预训练权重和日志即将上传。

ViTDet Unofficial implementation for [ECCV'22] "Exploring Plain Vision Transformer Backbones for Object Detection" ViTDet 项目地址: https://gitcode.com/gh_mirrors/vi/ViTDet

回答: 本文探索了将普通的Vision Transformer (ViT)作为目标检测的骨干网络。通过对ViT架构进行微调,而无需重新设计分层骨干进行预训练,我们的普通骨干检测器可以取得竞争性的结果。研究发现,只需从单尺度特征图构建简单的特征金字塔(无需常见的FPN设计),并使用窗口注意(无需移动)辅助少量的跨窗口传播块即可。通过使用预先训练的纯ViT主干作为Masked Autoencoders (MAE),我们的检测器ViTDet可以与之前基于分层骨干的领先方法竞争,在COCO数据集上达到61.3 APbox的性能。我们希望这项研究能够引起对普通骨干检测器的关注。\[1\]\[2\]\[3\] #### 引用[.reference_title] - *1* [论文阅读-ViTDet:Exploring Plain Vision Transformer Backbones for Object Detection](https://blog.csdn.net/qq_37662375/article/details/126675811)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* *3* [ViTDet:Exploring Plain Vision Transformer Backbonesfor Object Detection(arXiv 2022)](https://blog.csdn.net/qq_54828577/article/details/127262932)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

乌富昆Exalted

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值