- 博客(24)
- 收藏
- 关注
原创 书生大模型笔记5
本文是openmmlab在b站上传视频“LMDeploy 大模型量化部署实践”的视频笔记,仅作为个人笔记与参与书生大模型实战营第五课笔记作业使用,部分图片出自原视频截图。
2024-01-13 20:27:14 409
原创 书生大模型笔记2
同前一篇笔记,均作为openmmlab上海人工实验室举办的活动,部分图片可能来自官方视频https://www.bilibili.com/video/BV1Ci4y1z72H/?vd_source=f753dc086b25de1e8b0c8a5a886bcd83。
2024-01-06 18:04:02 1074
原创 mmagic代码实践
Edit Anything 的修改结果也太帅了!未知的科技真的无异于魔法~生成式模型、底层视觉、AIGC算法目前都归类于mmagic。
2023-06-16 09:54:38 176
原创 mmseg库理论基础
还有一个问题——不能用全连接层进行分类,因为语义分割任务对于multi-scale有要求 -》 使用卷积层代替全连接层(论文:VGG):全连接层里的一个神经元换成一个卷积层,输出一个张量而不是向量。同样是fcnn尝试解决的一个问题(现在这个手法很常见了,其实类似于res操作):基于顶层特征预测,再升采样32倍得到的预测图会较为粗糙;还有问题——图像分类模型使用降采样层(步长卷积或者池化)来获得高层次特征,导致全卷积网络输出尺寸小于原图,而分割任务要求同尺寸输出;)---可学习的升采样层。
2023-06-14 21:38:33 143
原创 mmdet目标检测部分
基本范式:sliding windows, conv based dense detection, bounding box, multi-sacle detection and FPN;单阶段&无锚框detector选讲:RPN, YOLO, SSD, focal loss与 retinanet 技术, fcos
2023-06-09 23:11:15 98
原创 mmpretrain实战体验
然后是pretrain情况下,dataloader部分有些不同于之前的mmcls,具体来说就是data_prefix,data_root,ann_file组成dataset文件路径;使用list_model 命令可以快速渣朝model zoo中已有的带有相应关键词的model们,格式如下:list_models(task='Image Classification',pattern='resnet18') ,task可以选择不同的任务,例如:image caption。
2023-06-06 23:37:21 163
原创 mmpretrain库理论叙述
mmpretrain主要处理以下任务:图像分类(lmage Classification)、图像描述(lmage Caption)、视觉问答(Visual Question Answering)、视觉定位 (Visual Grounding)、检索(Retrieval,lmage-To-lmage, Text-To-lmage,lmage-To-Text)。拉进正样本文本对(eg. I_1 & T_1),推远负样本文本对(eg. I_3 & T_N),以此来完成文本侧和图像侧结合后的特征表达优化。
2023-06-05 23:51:01 351
原创 mmseg直播笔记
2023.2.10 openmmlab ai训练营 mmsegmentation直播笔记,了解不多就不多写东西了,主旨是完成笔记打卡,与仅供自己看的。
2023-02-10 20:38:37 106
原创 2023.2.3 openmmlab ai训练营直播笔记(未美化条理完整)
昨天的直播内容笔记,因为这个第一次作业还没弄好所以没时间先整理笔记了,等弄好了看看要不要修整一下。
2023-02-04 17:52:38 65
原创 图像分类任务要点节点简述
openmmlab ai训练营 2023.2.2直播回顾;充斥着大量个人感兴趣的点与可能不是方便阅读得断句,已尽可能修改,如有疑问可以评论。图片全部出自openmmlab的课程ppt。
2023-02-03 09:55:04 448
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人