【Datawhale X 魔搭 AI夏令营 task3】

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档


一、Lora是什么?

LoRA (Low-Rank Adaptation) 微调是一种用于在预训练模型上进行高效微调的技术。它可以通过高效且灵活的方式实现模型的个性化调整,使其能够适应特定的任务或领域,同时保持良好的泛化能力和较低的资源消耗。这对于推动大规模预训练模型的实际应用至关重要。

二、task3完成步骤展示

Step1: 在魔塔社区中,找到左侧任务栏中“我的Notebook”选项
选择“魔塔平台免费案例”,选择方式二,启动GPU环境
在这里插入图片描述

Step2:粘贴以下代码,下载ComfyUI →
“git lfs install
git clone https://www.modelscope.cn/datasets/maochase/kolors_test_comfyui.git
mv kolors_test_comfyui/* ./
rm -rf kolors_test_comfyui/
mkdir -p /mnt/workspace/models/lightning_logs/version_0/checkpoints/
mv epoch=0-step=500.ckpt /mnt/workspace/models/lightning_logs/version_0/checkpoints/

当看到左侧出现这三个文件时,证明下载成功
在这里插入图片描述

Step3: 双击进入ComfyUI文件
在这里插入图片描述

Step4:一键运行
在这里插入图片描述

这个过程会有点漫长,需要耐心等待
在这里插入图片描述

Step5: 当出现URL链接时,复制到浏览器页面打开,不要关闭当前的窗口
在这里插入图片描述

Step6: 进去之后就是这个页面
在这里插入图片描述

Step7: 下载脚本,这里先运行没有Lora的
在这里插入图片描述

Step8:点击右方工具栏的 Load

在这里插入图片描述

Step9: 在prompt以及其下方,分别输入正向描述词与反向描述词
在这里插入图片描述

本人输入提示词如下:
在这里插入图片描述

Step10: 点击右上方Queue Prompt,生成图片
在这里插入图片描述

生成图片如下:
在这里插入图片描述

Step11: 接下来下载带有Lora的,用同样的关键词生成图片,观察一下区别
在这里插入图片描述
在这里插入图片描述

区别一:我们提示词是泳衣,带有Lora的输出图片能够更清晰的区分穿的是泳衣
区别二:没有Lora的图片中二次元少女的照片只突出了头部,并没有Lora输出的联想到了泳池

Step12:将先前训练好的图片放进数据集,在魔塔社区进行模型训练
在这里插入图片描述

自己的模型正在加载:
在这里插入图片描述

以下训练完成
在这里插入图片描述

点击一键生成,生成图片
在这里插入图片描述

Step13: 自定义一些关键词,生成图片
在这里插入图片描述

记得选择自己刚才创建的模型
在这里插入图片描述

生成的结果图没有代码写的好

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值