今天给大家介绍DeepSeek发布的Janus-Pro模型的ComfyUI实践教程,包含ComfyUI安装,模型下载,工作流下载等,欢迎大家一起交流学习,也欢迎添加公众号小助手加入读者交流群,一起探索AIGC好玩的应用。
Janus Pro 是 DeepSeek 于 2025年1月27日开源的多模态模型,同时具有图像理解和生成的能力。
ComfyUI 的 Janus-Pro 节点是一个统一的多模态理解和生成框架。
安装方法
1. 通过 ComfyUI Manager 安装(推荐)
-
安装 ComfyUI-Manager
-
在管理器中搜索 "Janus-Pro"
-
点击安装
2. 手动安装
将此仓库克隆到你的 ComfyUI 的 custom_nodes 文件夹中:
cd ComfyUI/custom_nodes
git clone https://github.com/CY-CHENYUE/ComfyUI-Janus-Pro
安装所需依赖: Windows系统:
# 如果你使用ComfyUI便携版
cd ComfyUI-Janus-Pro
..\..\..\python_embeded\python.exe -m pip install -r requirements.txt
# 如果你使用自己的Python环境
cd ComfyUI-Janus-Pro
path\to\your\python.exe -m pip install -r requirements.txt
# 使用ComfyUI的Python环境
cd ComfyUI-Janus-Pro
../../python_embeded/bin/python -m pip install -r requirements.txt
# 或者使用你的环境
cd ComfyUI-Janus-Pro
python -m pip install -r requirements.txt
安装注意
如果你遇到安装问题可以从一下几个方面排查问题:
-
确保已安装 git
-
尝试更新 pip:
python -m pip install --upgrade pip
-
如果使用代理,确保 git 可以访问 GitHub
-
确保使用的是与 ComfyUI 相同的 Python 环境
模型下载
-
将模型文件放在 ComfyUI/models/Janus-Pro 文件夹中:
-
在 ComfyUI 的 models 目录下创建 Janus-Pro 文件夹
-
从 Hugging Face 下载模型:
-
Janus-Pro-1B:https://huggingface.co/deepseek-ai/Janus-Pro-1B
-
Janus-Pro-7B:https://huggingface.co/deepseek-ai/Janus-Pro-7B
-
-
将模型解压到各自的文件夹中:
ComfyUI/models/Janus-Pro/Janus-Pro-1B/
ComfyUI/models/Janus-Pro/Janus-Pro-7B/
工作流下载
需要的小伙伴可以在公众号发送以下内容获取工工作流:
DeepSeek工作流
这个工作流节点包含了图像描述和图像生成
-
在序号1 选择 1B 或者 7B 模型
-
在序号2 上传你需要用于 Janus Pro 解读的图片
-
在序号3 可以调整用于图片描述的 Prompt, - 我测试过中文、英文、日语输入都没有问题,但是如果你需要特定语言的输出,请你在 prompt 中声明,类似 请使用日语输出 这样的要求
-
序号4 是一个展示 文本的节点,我这里使用的是ComfyUI-Custom-Scripts 插件中的 Show Text 节点
-
在序号5 出输入用于图像生成的 prompt