- 博客(10)
- 收藏
- 关注
原创 Datawhale X 李宏毅苹果书AI夏令营进阶 Task 3 笔记
概念:批量归一化:在一个批量上做特征归一化,让不同维度的数据范围相同特征归一化:将数据的特征值进行标准化处理,使得不同特征在相似的尺度范围内。
2024-09-03 23:47:45 1114
原创 Datawhale X 李宏毅苹果书AI夏令营进阶 Task 2 笔记
梯度大小和损失大小没有关联:在训练网络时,起初损失较大,随后随着参数更新损失逐渐减小,最后停滞,不再下降。此时,尽管损失不再降低,但梯度的范数实际上并未真正变小。随着迭代次数增多,这种情况依然存在,即损失不再下降,而梯度的范数也没有变小。概念:梯度的范数(norm):梯度这个向量的长度前述方法训练到参数在临界点附近,再根据特征值的正负号判断该临界点是鞍点还是局部最小值。实际上,要走到一个临界点其实是比较困难的,多数时候训练在还没有走到临界点的时候就已经停止了。
2024-08-31 23:36:47 1343
原创 Datawhale -- cv方向 task 2 笔记
cv 方向的 task 2 教程超级详细,在此对其做一个梳理教程:Datawhale 物体检测算法主要分为 One-Stage(一阶段)和 Two-Stage(两阶段)模型,它们在检测原理、特点、优势和适用场景等方面存在显著差异。代表算法:YOLO(You Only Look Once)和 SSD(Single Shot Detection)检测原理:直接在单次网络评估中预测图像中所有物体的类别和位置信息。它将物体检测视为一个单一的回归问题,从输入图像直接预测边界框坐标和类别概率,无需中间的区
2024-08-29 23:57:13 1356
原创 Datawhale X 李宏毅苹果书 AI夏令营进阶 Task 1 笔记
Q:理解为什么优化会失败?A:收敛在局部极限值与鞍点会导致优化失败概念:鞍点:梯度是零且区别于局部极小值和局部极大值(localmaximum)的点。红色的点在 y 轴方向是比较高的,在 x 轴方向是比较低的,这就是一个鞍点。鞍点的叫法是因为其形状像马鞍。鞍点的梯度为零。临界点(critical point):梯度为0的点走到临界点时:1)如果损失收敛在局部极小值,我们所在的位置已经是损失最低的点2)如果损失收敛在鞍点,逃离鞍点,就有可能让损失更低。
2024-08-27 23:23:57 885
原创 Datawhale — cv方向 task 1 笔记
针对 cv 方向的 task 1 记录了一点教程之外的东西教程里很详细,只在做的过程中几个小瞬间记录一下 (可以直接划到后面开始阅读哦)
2024-08-26 17:59:01 848
原创 Datawhale X 魔搭 AI夏令营 - AIGC文生图方向Task3笔记
翻译:“SCEPTER 是一个开源代码库,致力于生成式训练、微调与推理,涵盖了诸如图像生成、迁移、编辑等一系列下游任务。SCEPTER 整合了热门的社区驱动实现以及阿里巴巴集团通义实验室的专有方法,为 AIGC 领域的研究人员和从业者提供了一个全面的工具包。这个多功能的库旨在促进创新,并加速生成式模型这一快速发展领域的发展。GUI 是 "Graphical User Interface"(图形用户界面)的缩写。简单来说,GUI 就是你在电脑屏幕上看到的那种有图标、按钮和菜单的交互方式。ComfyUI。
2024-08-17 11:42:26 1279
原创 Datawhale X 魔搭 AI夏令营 - AIGC文生图方向Task2笔记
首先,我们来看下它的自我介绍。通义千问是具有信息查询、语言理解、文本创作等多能力的AI助手。我们可以看到,编程与技术支持能力是它的强项之一。接下来我们把场景聚焦到编程与技术支持这个方向,让他详细介绍下自己可以如何帮助大家编程。话剧场景结合AI内容,自己在AI结果上做一些调整,最终整理出来场景表格图片编号场景描述正向提示词反向提示词图片1女主正在上课古风,水墨画,一个黑色长发少女,坐在教室里,盯着黑板,深思,上半身,红色长裙丑陋,变形,嘈杂,模糊,低对比度图片2开始睡着了。
2024-08-14 17:16:59 1465
原创 Datawhale X 魔搭 AI夏令营 - AIGC文生图方向Task1笔记
文生图主要以SD系列基础模型为主,以及在其基础上微调的lora模型和人物基础模型等。
2024-08-11 16:12:09 943
原创 Datawhale AI夏令营第四期魔搭-大模型应用开发方向Task1笔记
为了对人类语言的内在规律进行建模,研究者们提出使用语言模型(language model)来准确预测词序列中下一个词或者缺失的词的概率。如下图所示,截止到目前,语言模型已经演化了四代,分别是:统计语言模型(Statistical Language Model, SLM):使用马尔可夫假设(Markov Assumption)来建模语言序列的 𝑛 元(𝑛-gram)语言模型。
2024-08-10 15:39:45 1009
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人