相关资料下载
:关注wx公众号后发关文字 controlnet_aux资源
ComfyUI’s ControlNet Auxiliary (/ɔːɡˈzɪliəri/) Preprocessors 预处理器节点 :https://github.com/Fannovel16/comfyui_controlnet_aux
参考代码:https://github.com/lllyasviel/ControlNet/tree/main/annotator
测试工作流需要用到的节点:https://github.com/melMass/comfy_mtb
下图第一排第一张为
输入
,剩下都是处理得到的分割,线稿、二值,色块图、深度图、openpose,处理图等,这些处理后的图
可直接输入到controlnet中
一、实测所有的预处理器效果预览 (完整模型约17G)
关注wx公众号 星艺AI 后发送文字 controlnet_aux资源 获得
huggingface部分模型:https://huggingface.co/lllyasviel/Annotators/tree/main
二、与controlnet联合一起使用(只用输入一张图片,自动根据条件重绘)
2.1 Dwpose提取姿态(dwpose是openpose的升级),后经controlnet重绘
在comfyui空白处双击,出搜索框
同样方式搜索 load image, preview image,,然后连到一起
接入controlnet
效果展示 (后续接入修复人脸工作流就可以了)
a group of people in city ,face details
controlnet相应的节点
完整工作流见包
2.2 线稿抽取重绘
a boy ride a pig 一个骑猪猪的男孩
完整工作流
相应的线稿抽取对比
contrlnet部分
三、如何得到人和动物的姿态处理器? (DWPose效果好于Openpose)
更新到最新版本后
https://github.com/Fannovel16/comfyui_controlnet_aux
搜索 DWPose Estimator
AIO Aux Preprocessor
(所有的预处理在一堆)
dwpose 或者openpose