Datawhale AI夏令营第四期 AIGC方向 task03 初学者笔记

一、ComfyUI介绍：

1、定义：
ComfyUI是一种专为Stable Diffusion设计的基于节点的图形用户界面（GUI），它允许用户通过连接不同的节点（或称为块）来构建复杂的图像生成工作流程。

2、核心特点：
<1>节点化设计：ComfyUI采用基于节点的流程设计，用户可以通过自定义流程来实现更精确的工作流程，并确保结果的可重复性。每个节点承担特定任务，通过改变节点之间的连接关系，用户可以获得不同的图像输出。

<2>高度定制性和灵活性：这种设计为用户提供了高度的定制性和灵活性，虽然学习曲线可能较陡，但专业用户可以通过调整模块连接来达到不同的出图效果。

<3>低内存需求和快速启动：与基于网络的用户界面（webui）相比，ComfyUI对图形处理器（显存）的需求较低，启动速度快，出图速度也快。

<4>高生成自由度：用户可以根据需要调整参数和节点配置，实现更高自由度的图像生成。
3、主要功能：
<1>图像生成与编辑：数字艺术家、设计师和摄影师可以利用ComfyUI进行复杂图像生成和深度编辑。

<2>AI研究与实验：AI研究人员和开发者可以使用ComfyUI构建和测试图像生成模型和算法。

<3>个性化内容创作：视频制作者、博客作者和社交媒体影响者可以快速生成个性化的视觉内容。

<4>教育与培训：教育工作者可以利用ComfyUI帮助学生理解图像处理和生成的基本概念。

游戏开发与动画制作：游戏和动画制作人员可以使用ComfyUI生成游戏素材和角色设计。

<5>产品设计与模拟：产品设计师可以利用ComfyUI快速生成设计原型和视觉效果图。

4、优势与前景：
ComfyUI的优势在于其高度的定制性和灵活性，以及相对较低的内存需求和快速启动速度。这使得它成为专业用户和需要大批量生成图像的场景下的理想选择。随着AI技术的不断发展，ComfyUI有望在图像生成、编辑和个性化内容创作等领域发挥更大的作用。

同时，ComfyUI也面临一些挑战，如学习曲线较陡、生态相比web UI较少等。然而，随着用户群体的不断扩大和社区的发展，这些问题有望得到逐步解决。

总的来说，ComfyUI是一种功能强大、高效且灵活的Stable Diffusion操作界面，适合那些需要精细控制和高度自定义的用户。

 5、图片生成流程：

二、应用过程：
1、下载脚本代码文件：
下载安装ComfyUI的执行文件和task1中微调完成Lora文件
 

git lfs install
git clone https://www.modelscope.cn/datasets/maochase/kolors_test_comfyui.git
mv kolors_test_comfyui/* ./
rm -rf kolors_test_comfyui/
mkdir -p /mnt/workspace/models/lightning_logs/version_0/checkpoints/
mv epoch=0-step=500.ckpt /mnt/workspace/models/lightning_logs/version_0/checkpoints/   

2、进入ComfyUI文件，后一键安装程序；

3、通过最后产生的链接进入预览界面；

4、后下载工作流脚本，加载模型，完成第一次生图；