Datawhale AI夏令营第四期 魔搭-AIGC方向 task01笔记

这个笔记呢也是运行出来刚就开始写的

Datawhale点击进去就可以跟着步骤走了，前面的比较简单

1.先登陆阿里云阿里云免费试用 - 阿里云

这个链接教程上就有，直接按照上面的走就行

2.在魔搭社区进行授权

• 链接：魔搭社区

  如果这一步授权失败，可跳过此步骤，继续往下进行

也是按照上面的走，都比较简单

3.完成赛事报名可图Kolors-LoRA风格故事挑战赛_创新应用大赛_天池大赛-阿里云天池的赛制

4.在魔塔社区创建PAI实例魔搭社区

5.30 分钟体验一站式 baseline！

1. 下载baseline文件（大约需要2分钟）

   1. git lfs install
      git clone https://www.modelscope.cn/datasets/maochase/kolors.git

2. 进入文件夹，打开baseline文

3. 安装环境，然后重启kernel

   1. 安装 Data-Juicer 和 DiffSynth-Studio

   2. Data-Juicer：数据处理和转换工具，旨在简化数据的提取、转换和加载过程

   3. DiffSynth-Studio：高效微调训练大模型工具（在这几个上面我是多刷新了几次才成功的）

   4. 1. 调整prompt，设置你想要的图片风格，依次修改8张图片的描述（可选）

         1. 正向描述词：你想要生成的图片应该包含的内容

         2. 反向提示词：你不希望生成的图片的内容

   5. 依次顺序运行剩余的代码块，点击代码框左上角执行按钮，最终获得图片（大约需要20分钟）

      1. 1. 使用Data-Juicer处理数据，整理训练数据文件

         2. 使用DiffSynth-Studio在基础模型上，使用前面整理好的数据文件进行训练微调

         3. 加载训练微调后的模型

         4. 使用微调后的模型，生成用户指定的prompt提示词的图片

      2. 下面的代码块按照功能主要分成这几类

   6. 6.链接：魔搭社区

   7. 1. 移动结果文件

         1. 创建terminal，粘贴如下命令，回车执行

            mkdir /mnt/workspace/kolors/output & cd 
            cp /mnt/workspace/kolors/models/lightning_logs/version_0/checkpoints/epoch\=0-step\=500.ckpt /mnt/workspace/kolors/output/
            cp /mnt/workspace/kolors/1.jpg /mnt/workspace/kolors/output/

      2. 下载结果文件

         1. 双击进入output文件夹，分别下载两个文件到本地

      3. 创建并上传模型所需内容

         1. 点击魔搭链接，创建模型，中文名称建议格式：队伍名称-可图Kolors训练-xxxxxx

   8. 7.关闭PAI实例

   9. Docs