(赛题链接:可图Kolors-LoRA风格故事挑战赛_创新应用大赛_天池大赛)
(学习指南:从零入门AI生图原理&实践)
按照教程新建终端,粘贴命令回车执行,这一步是为了拉取远程的baseline文件,需要等待一段时间。
git lfs install
git clone https://www.modelscope.cn/datasets/maochase/kolors.git
拉取baseline后,可以在右侧文件中看到kolor文件夹,双击进入可以看到后缀.ipyhb的baseline文件,点击打开。
接下来执行运行环境的代码块,安装 Data-Juicer 和 DiffSynth-Studio
- Data-Juicer:数据处理和转换工具,旨在简化数据的提取、转换和加载过程
- DiffSynth-Studio:高效微调训练大模型工具
安装完成后,重启kernel,不重启容易爆显存影响baseline运行
接下来请依次执行下载数据集、数据处理
接下来开始进行模型微调训练,训练完成后,调整prompt,设置你想要的图片风格,依次修改8张图片的描述。
最后修改prompt生成自己想要的图片: