本文介绍在dify中使用阿里开源的Wan2.1 1.3B模型搭建文生视频工作流的方法。
使用的工具如下:
1、dify(官方:https://docs.dify.ai/zh-hans)
2、comfyui
一、comfyui安装
为了简单起见,本文介绍使用autodl完成comfyui的部署。在autodl创建实例,使用的镜像如下图:
大佬已经把步骤弄好了,运行就行,如下图(注意下载wan的参数):
启动以后,打开这个网站:
可以看到comfyui打开了:
下面是wan2.1官方的工作流文件,复制到本地的want2v.json中,然后上传:
{
"3": {
"inputs": {
"seed": 409687030992233,
"steps": 30,
"cfg": 6,
"sampler_name": "uni_pc",
"scheduler": "simple",
"denoise": 1,
"model": [
"48",
0
],
"positive": [
"6",
0
],
"negative": [
"7",
0
],
"latent_image": [
"40",
0
]
},
"class_type": "KSampler",
"_meta": {
"title": "K采样器"
}
},
"6": {
"inputs": {
"text": "a fox moving quickly in a beautiful winter scenery nature trees mountains daytime tracking camera",
"clip": [
"38",
0
]
},
"class_type": "CLIPTextEncode",
"_meta": {
"title": "CLIP Text Encode (Positive Prompt)"
}
},
"7": {
"inputs": {
"text": "色调艳丽,过曝,静态,细节模糊不清,字幕,风格,作品,画作,画面,静止,整体发灰,最差质量,低质量,JPEG压缩残留,丑陋的,残缺的,多余的手指,画得不好的手部,画得不好的脸部,畸形的,毁容的,形态畸形的肢体,手指融合,静止不动的画面,杂乱的背景,三条腿,背景人很多,倒着走",
"clip": [
"38",