提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档
一、Lora是什么?
LoRA (Low-Rank Adaptation) 微调是一种用于在预训练模型上进行高效微调的技术。它可以通过高效且灵活的方式实现模型的个性化调整,使其能够适应特定的任务或领域,同时保持良好的泛化能力和较低的资源消耗。这对于推动大规模预训练模型的实际应用至关重要。
二、task3完成步骤展示
Step1: 在魔塔社区中,找到左侧任务栏中“我的Notebook”选项
选择“魔塔平台免费案例”,选择方式二,启动GPU环境
Step2:粘贴以下代码,下载ComfyUI →
“git lfs install
git clone https://www.modelscope.cn/datasets/maochase/kolors_test_comfyui.git
mv kolors_test_comfyui/* ./
rm -rf kolors_test_comfyui/
mkdir -p /mnt/workspace/models/lightning_logs/version_0/checkpoints/
mv epoch=0-step=500.ckpt /mnt/workspace/models/lightning_logs/version_0/checkpoints/
”
当看到左侧出现这三个文件时,证明下载成功
Step3: 双击进入ComfyUI文件
Step4:一键运行
这个过程会有点漫长,需要耐心等待
Step5: 当出现URL链接时,复制到浏览器页面打开,不要关闭当前的窗口
Step6: 进去之后就是这个页面
Step7: 下载脚本,这里先运行没有Lora的
Step8:点击右方工具栏的 Load
Step9: 在prompt以及其下方,分别输入正向描述词与反向描述词
本人输入提示词如下:
Step10: 点击右上方Queue Prompt,生成图片
生成图片如下:
Step11: 接下来下载带有Lora的,用同样的关键词生成图片,观察一下区别
区别一:我们提示词是泳衣,带有Lora的输出图片能够更清晰的区分穿的是泳衣
区别二:没有Lora的图片中二次元少女的照片只突出了头部,并没有Lora输出的联想到了泳池
Step12:将先前训练好的图片放进数据集,在魔塔社区进行模型训练
自己的模型正在加载:
以下训练完成
点击一键生成,生成图片
Step13: 自定义一些关键词,生成图片
记得选择自己刚才创建的模型
生成的结果图没有代码写的好