在AI绘画领域,可谓是有非常多的产品,从分类来看可分为Midjourney类、Stable Diffusion WebUI、ComfyUI,都聚集着一大批爱好者和专业人士。
那为什么说ComfyUI是“升级”?ComfyUI开启了 AI 绘画的新篇章,代表着图像生成进入“工作流时代”!
ComfyUI是一个基于节点流程的Stable Diffusion(稳定扩散)操作界面,它将稳定扩散的流程拆分为各个节点,用户可通过自定义节点、拖拽连线实现精准的工作流定制与可靠复现,以完成更复杂的、自由度更高的图像生成工作。
看到这,你可能还没懂ComfyUI 是什么,那可以看下以下案例说明
ComfyUI 就是图像工作流,以文心一格举例,你需要输入一个提示词、选择一个生图风格,即可获得一张 AI 绘画图片,在你的视角你只进行 2 步操作,但在你不可见的背后还隐藏许多工作步骤。而 ComfyUI 就是把所有的工作步骤显化、流程化,可以自定义拖拽组合,也可以理解为自己搭建一个全自动流水线。
一个完整的从输入到输出的人像动漫化ComfyUI工作流
选择ComfyUI最核心的原因在于它有着更高的自由度和拓展性,而在现今 AI 行业高速发展的阶段,自由度是重点,不仅要学会如何使用 AI,更要学会如何调整 AI,让 AI 定制化贴近你的需求场景、工作流程。
而ComfyUI可以完美满足这点,你可以根据自己的需求搭建适合的工作流,甚至开发并改造某个节点
飞桨星河社区ComfyUI
PaddleMIX是基于飞桨的跨模态大模型开发套件,聚合图像、文本、视频等多种模态,覆盖视觉语言预训练,文生图,文生视频等丰富的跨模态任务。提供开箱即用的开发体验,同时满足开发者灵活定制需求,探索通用人工智能。
基于开源项目PaddleMIX与ComfyUI,飞桨星河社区正式上线云端应用——AI绘画工作流|ComfyUI,提供飞桨版节点式工作流,提升文生图、图生图专业性与灵活性。
目前ComfyUI使用形式分为本地安装部署、云端使用2种。
如果你有一定的技术背景、且有高配置的电脑,那推荐选择本地的使用方式。
如果你追求简单省事、快速上手,那一定要选择云端的使用形式,降低使用障碍。
目前市面上 ComfyUI 的云端产品普遍在生图速度上有短板,使用集群算力,大部分会出现排队等待的情况。
而飞桨星河社区为了生图体验,选择一人一GPU服务器的形式,不与其他用户共用服务器,不需要为了不排队而在凌晨时段生图,经实测飞桨星河社区的ComfyUI可以在任意时段做到 2 秒生一张图。
并且在上线之初就直接提供 6 种工作流模板,包含文生图、图生图、超清放大、Lora、ComtrolNet、黏土风特效。
同时,飞桨星河社区给每一个人都赠送 2 小时运行时长,扫码加入群聊获得启动链接!
一键“黏土风格”工作流
首先进入 ComfyUI,点击实例的封面会跳转至对应的实例视频教程,点击按钮【启动实例】就是对应的工作流模板。
点击启动实例后,需要稍等一会,因为启动时是直接占一整台 V100 32G,需要调度服务器所以会稍微慢一些,进入环境后生图就会非常快
启动成功后,点击进入 ComfyUI,会直接展示黏土风格的工作流模板
将页面适当放大,点击 upload 更换想进行风格转换的照片,而后点击生成,稍等一会后即可完成风格转换。如果觉得操作还是较为复杂,可以点击该实例的封面图片去查看视频操作教程。
以上就是黏土风的工作流演示,只是基于已有模板进行生成,有一定基础的用户可以直接加载自有模板,或者自行搭建工作流。
ComfyUI上线特别活动
让我们6月28日在WAVE SUMMIT 深度学习开发者大会 2024相聚,一起探讨大模型时代的共识和认知,跟上时代浪潮。点击下方小程序或百度搜索“WAVE SUMMIT”,立即报名参加大会。
关注【飞桨PaddlePaddle】公众号
获取更多技术内容~