Datawhale X 魔搭 AI夏令营-AIGC文生图 Task3笔记

关于Task3的学习中我们简单的了解了comfyUI

⁠‌‌‌​​‌‬‍‬​​‍​‍‬​​‌​‍​‍​​​‬​​⁠​‬⁠‌​​​​‍Task3：进阶上分-实战优化 - 飞书云文档 (feishu.cn)https://datawhaler.feishu.cn/wiki/QHSTwBPFKiZxqfkA1INc1u4fn0f当然也可以在这里学习其他的一些夏令营的活动

首先来了解一下ComfyUI的魔搭要求和运行效果

comfyUI的git下载与运行

 首要的是我们在魔搭上运行，是要PAI- DSW的GPU环境才好下载，comfy UI和相关数据。而阿里云弹性加速计算EAIS在下载comfy UI和相关数据时会有些内容下载不了。

 下载安装ComfyUI的执行文件和Task1中微调完成的Lora文件

git lfs install git clone https://www.modelscope.cn/datasets/maochase/kolors_test_comfyui.git

mv kolors_test_comfyui/* ./

rm -rf kolors_test_comfyui/

mkdir -p /mnt/workspace/models/lightning_logs/version_0/checkpoints/

mv epoch=0-step=500.ckpt /mnt/workspace/models/lightning_logs/version_0/checkpoints/

这就是将comfy UI下载下来了

创建models并连接到Linux

 下载模型

安装LoRA节点

启动comfyUI

出现链接就可以点击进入comfyUI网页

然后点击load就可以加载kolors_example或kolors_with_lora_example的json文件

如图1就是加载了kolors_example后生成的图片

图1

然后对反向propmt进行添加提示词后就生成了如图2

图2

如图3，图4是加载了kolors_with_lora_example后生成的图片

图3

图4

然后就是jupyter的运行

好了这就运行完了。

问题

然后讲一下问题

就是在阿里云弹性加速计算EAIS在下载comfy UI和相关数据时，可能是网络问题导致有些文件下载不了，或者无法连接到相关的网页进行下载

还有就是在运行最后一步的时候阿里云弹性加速计算EAIS能加载到comfy UI链接但连接后，进行上传JSON文件时就会报错

 可能是在PAI- DSW的GPU环境的网络较好，就没有出现问题。

另外希望大家踊跃参加Datawhale夏令营