Bella12123-Datawhale AI夏令营第四期魔搭- AIGC文生图方向 task01笔记

比赛要求：

1. 参赛者需在可图Kolors 模型的基础上训练LoRA 模型，生成无限风格，如水墨画风格、水彩风格、赛博朋克风格、日漫风格......

2. 基于LoRA模型生成 8 张图片组成连贯故事，故事内容可自定义；基于8图故事，评估LoRA风格的美感度及连贯性 样例：偶像少女养成日记

promt:

提示词很重要，一般写法：主体描述，细节描述，修饰词，艺术风格，艺术家

Step0：开通阿里云PAI-DSW试用

Docs

Step1：报名赛事！(点击即可跳转)

赛事链接：https://tianchi.aliyun.com/competition/entrance/532254

Step2：在魔搭社区创建PAI实例！（点击即可跳转）

Docs

Step3：30 分钟体验一站式 baseline！

1. 下载baseline文件（大约需要2分钟）

   git lfs install git clone https://www.modelscope.cn/datasets/maochase/kolors.git

1. 进入文件夹，打开baseline文件

1. 安装环境，然后重启kernel

   安装 Data-Juicer 和 DiffSynth-Studio

   Data-Juicer：数据处理和转换工具，旨在简化数据的提取、转换和加载过程

   DiffSynth-Studio：高效微调训练大模型工具

1. 调整prompt，设置你想要的图片风格，依次修改8张图片的描述（可选）

   正向描述词：你想要生成的图片应该包含的内容

   反向提示词：你不希望生成的图片的内容

1. 依次顺序运行剩余的代码块，点击代码框左上角执行按钮，最终获得图片（大约需要20分钟）

   下面的代码块按照功能主要分成这几类

   1. 使用Data-Juicer处理数据，整理训练数据文件

   2. 使用DiffSynth-Studio在基础模型上，使用前面整理好的数据文件进行训练微调

   3. 加载训练微调后的模型

   4. 使用微调后的模型，生成用户指定的prompt提示词的图片

Step4：微调结果上传魔搭（点击即可跳转）

链接：https://www.modelscope.cn/models/create

1. 移动结果文件

   创建terminal，粘贴如下命令，回车执行

   mkdir /mnt/workspace/kolors/output & cd cp /mnt/workspace/kolors/models/lightning_logs/version_0/checkpoints/epoch\=0-step\=500.ckpt /mnt/workspace/kolors/output/ cp /mnt/workspace/kolors/1.jpg /mnt/workspace/kolors/output/

2. 下载结果文件

   双击进入output文件夹，分别下载两个文件到本地

3. 创建并上传模型所需内容

     点击魔搭链接，创建模型，中文名称建议格式：队伍名称-可图Kolors训练-xxxxxx

这样就算创建完成并发布在创空间讨论区了。

1. 来到创空间，查看自己的模型是否发布

关闭PAI实例！！！！（点击即可跳转）

Dcs

🎉 恭喜你生成了自己的第一个图片

👍🏻 快来给自己点赞！

我的图：

两个热爱乒乓球的10岁小孩在球馆认识

五年前，小女孩就开始了刻苦的训练

五年前，小男孩也开始了训练，那时候他还不怎么喜欢乒乓球，爱坐在台上发呆

但是小男孩在教练和妈妈的劝说下，坚持了下来

在这两个小孩11岁的时候，获得了青年乒乓球奥运的金牌

他们也成为了最有默契的乒乓球搭档

今年，他们来到了巴黎，参加奥运，第一次来奥运会的他们，在埃菲尔铁塔前合了影

二人组合也取得了最终混双的胜利！