【stable diffusion】Deforum扩展根据描述词生成视频

概要

先看下视频演示:

202406161002

安装

https://gitcode.net/ranting8323/sd-webui-deforum

手动安装:下载后复制到sd目录,比如 E:\AI\sd-webui-aki-v4.8\extensions

webui安装:扩展》从网址安装》输入上面地址》安装》重启ui

实例配置文件

以下json代码保存到文件,填上配置文件加载进来:

{
    "W": 512,
    "H": 512,
    "show_info_on_ui": true,
    "tiling": false,
    "restore_faces": false,
    "seed_resize_from_w": 0,
    "seed_resize_from_h": 0,
    "seed": -1,
    "sampler": "Euler a",
    "scheduler": "Karras",
    "steps": 25,
    "batch_name": "Deforum_{timestring}",
    "seed_behavior": "iter",
    "seed_iter_N": 1,
    "use_init": false,
    "strength": 0.8,
    "strength_0_no_init": true,
    "init_image": "https://deforum.github.io/a1/I1.png",
    "use_mask": false,
    "use_alpha_as_mask": false,
    "mask_file": "https://deforum.github.io/a1/M1.jpg",
    "invert_mask": false,
    "mask_contrast_adjust": 1.0,
    "mask_brightness_adjust": 1.0,
    "overlay_mask": true,
    "mask_overlay_blur": 4,
    "fill": 1,
    "full_res_mask": true,
    "full_res_mask_padding": 4,
    "reroll_blank_frames": "ignore",
    "reroll_patience": 10.0,
    "motion_preview_mode": false,
    "prompts": {
        "0": "In the sea,close to sea level, sunset, A small fishing boat in the distance,highly detailed, intricate, ultra hd, sharp photo, crepuscular rays, in focus,realistic,photo,<lora:add_detail:1> --neg ink painting,coil painting,manuscript,cartoon",
        "150": "Below sea level,Underwater photography,1whale,small amount of small bubbles next to whale,3D,depth of field,light and shadow,<lora:add_detail:1> --neg ink painting,coil painting,manuscript,cartoon",
        "300": "Space interstellar,smooth droplet shaped spacecraft,Tri-body Waterdrop Spacecraft,Cosmic Teardrop Tri-body Spacecraft,small amount of cosmic luminous stars,<laro:20240111-1704948935597:1>  --neg ink painting,coil painting,man

Stable DiffusionDeforum 都是在生成艺术、数字内容创作领域非常有影响力的工具和技术。 ### Stable Diffusion 简介 **Stable Diffusion (SD)** 是一种深度学习模型,用于生成高质量图像。它通过训练大量的图片数据集,在给定文本描述的情况下能够创造出对应的视觉作品。这种技术基于扩散模型(Diffusion Model),其核心思想是从纯噪声开始逐步迭代更新直到形成目标图像的过程。由于它的开源性质以及高效的推理速度,使得很多开发者可以在本地设备上运行,并且可以根据需求调整定制化设置来进行更个性化的创造活动。 ### Deforum 简介 而 **Deforum** 则是一个建立于 Stable Diffusion 之上的高级用户界面及脚本框架,旨在帮助艺术家们更容易地利用 SD 模型创建动画视频序列或者静态画作。借助 Deforum 提供的功能模块如 Keyframes 编辑器等特性,创作者可以指定关键帧之间的变化规则并自动生成过渡效果;此外还支持批量处理任务以提高工作效率,同时也允许使用者编写 Python 脚本来进一步增强自动化能力。 两者结合可以帮助个人或团队快速构建出富有创意的艺术项目: 1. 使用 Stable Diffusion 的强大图像生成功能作为基础; 2. 结合 Deforum 扩展了时间维度操作的可能性,例如制作无缝循环 GIF 动图或是长篇幅的故事叙述影片片段等等; 3. 对比其他解决方案而言降低了入门门槛同时增加了灵活性和可控度。 对于有兴趣探索AI辅助下的新媒体表达形式的人来说,这是一个非常值得尝试的方向!
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值