项目地址:GitHub - baaivision/vid2vid-zero: Zero-Shot Video Editing Using Off-The-Shelf Image Diffusion Models
论文链接:https://arxiv.org/abs/2303.17599
huggingface的Demo:Vid2vid Zero - a Hugging Face Space by BAAI
(huggingface是个好东西,里面有很多模型,数据集可以使用)
Demo
- Input Data:上传一个视频
- Input prompt:这里形容一下视频的大致内容
- Validation Prompt:这里是想要编辑的效果
Advanced settings(高级设置)
- Start Frame Index:从第几帧开始
- Frame Rate:视频的帧率
- Number of Frames:帧数
- Guidance Scale:指导参数,越大质量越好,但相对的丰富度就会降低。通常7.5左右就可以了
- Seed:种子,主要是一个随机参数,选哪个从概率上是一样的
- Hugging Face Write Token:这个是Hugging Face的Token,没有可以不写
当然,它也给出了一些案例供我们参考的。
例如我用了一个 car-moving的样例,修改了一下Validation Prompt,让它帮我生成一个卡通风格的车。