40hx上的AI视频生成-Comfyui+SVD

最新推荐文章于 2025-02-20 11:01:13 发布
最新推荐文章于 2025-02-20 11:01:13 发布
阅读量888 收藏 7
点赞数 8
文章标签： AIGC AI作画 stable diffusion
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44184411/article/details/135314439
版权

40hx的半精度是由全精度计算去算的，所以速度上比全精度还慢，但全精度又费内存，所以跑Stable Video Diffusion时只能在慢与内存不够二种状态，经过不断的测试，找到一个速度够用，内存够用的办法：

采用fp16的SVD模型，详见我另外一个贴子，启动用下面这个参数。

python3 main.py --listen --force-fp32 --fp32-vae --normalvram --disable-smart-memory --fp8_e4m3fn-text-enc --fp8_e4m3fn-unet

速度对比，

* 全精度优化速度后出图3it/s，但SVD内存不够

* 半精度优化内存后出图 30-50s/it

* 全优化后，12s/it, 速度稳定
 

germandai
关注
不再担心显存不够了，矿卡40HX AI绘图，当下最快出图的Stable Diffusion webui分支项目forge
German2000的博客
02-27 1489
矿卡 40HX在玩AI绘画时，除了8Gb内存有不太够用外，半精度运行速度也不行，所以之前为了上SDXL SVD之类的时候，花了很多时候去做优化。安装完成后，因为40hx的特殊性，需要加 --all-in-fp32 参数启动，可选参数 --listen 用于打开远程访问，可选参数 --enable-insecure-extension-access 用于打开扩展插件安装。6. 100%兼容webui项目，界面与操作一模一样，各种功能操作也一样，所以习惯了webui项目的同学，直接上手就可以了。
华硕40hx矿卡在Comfyui中的五倍加速(3it/s)
German2000的博客
12-25 966
矿卡 40hx Compyui
ComfyUI工作流来了，6G显存可用的FLUX量化模型（附最新comfyui桌面版安装包）
最新发布
m0_64365896的博客
02-20 650
前一段时间，SD原班人马离职后，开发出来FLUX，然后将其中两个大模型开源。和SD3相比，FLUX对提示词的理解更到位，画质更精美，尤其是画手方面，和MJ不相上下。在提示词相同的情况下，FLUX完全可以和MJ一较高低。不过，FLUX对硬件配置的要求比较高，量化版本要12G显存（实测8G也可）起步。且速度比较慢，这给很多小显存用户带来了困扰。并且直至现在，WebUI还没有对FLUX的支持，只能在较为专业的ComfyUI上玩。
AI绘画 矿卡CMP 40HX 五秒出图（2023.8.6更新）
German2000的博客
05-27 4434
40hx矿卡在stable diffusion automatic1111 webui上的性能优化
矿卡40HX在linux下AI绘画简单流程
German2000的博客
05-28 2826
（有linux经验的可以看：CMP 40HX的Nvidia驱动程序，原生驱动程序只有460.35.1-490这几个可以，再高或者再低的版本，就不支持了。总之说这么多，就是驱动很难搞。华硕CMP 40HX硬体上占用二个半槽位，卡长接近24cm，如果补完电容后，是pcie 16x通道的，所以在入手前先要自己评估一下安装条件。特别是pcie通道不如硬体一样，一眼能看出来的，很多显卡在4x或者8x上也能正常运行，40HX补过电容后，很可能跑不起来。（可以先安装个win系统，用gpu-z看一下）这部份就不展开讲了。
flux.1模型在40hx上绘图实践
German2000的博客
09-13 435
Stability AI曾经开创了AIGC的新纪元，但管理团队在经营理念上一直有分歧，到了SD3的推出后，团队在开源还是闭源的问题上，产生了重大冲突，直到模型又一次无意外地泄露后，无奈地开源了。一方面是资本方的压力，一方面是技术上竞争激烈。flux模型具有SD3的先天优势，同时对加工处理流程进行了重新定义，更高质的出图，更快的速度，更低的vram需求，重新找回了Stability AI初创时的激情。目前安装了几个平台，还是forge的最好用，sd.next也实现flux模型有兴趣的可以去玩一下。
半精度（FP16），单精度（FP32），双精度（FP64）
热门推荐
是抹茶味的啊的博客
07-27 4万+
在单精度32位格式中，1位用于指示数字为正数还是负数。指数保留了8位，这是因为它为二进制，将2进到高位。其余23位用于表示组成该数字的数字，称为有效数字。 而在双精度下，指数保留11位，有效位数为52位，从而极大地扩展了它可以表示的数字范围和大小。半精度则是表示范围更小，其指数只有5位，有效位数只有10位。 半精度的格式与单精度的格式类似，最左边的一位仍是符号位，指数有5位宽且以余-16（excess-16）的形式存储，尾数有10位宽，但具有隐含1。 如图所示，sign为符号位，0表...
【SVD生成视频+可本地部署】ComfyUI使用（二）——使用Stable Video Diffusion生成视频 （2023.11开源）
进一寸有一寸的欢喜
01-25 5990
2023年11月21日** 由 `Stability AI` 开源2个`图片到视频模型它将静止图像（still image）作为条件帧(conditioning frame)，并从中生成视频分辨率（`1024x576`）。 1. 上传已有1张图片，生成相关的视频片段、生成视频长度2-5秒，帧率 3-30帧每秒， 2. 串联一个Stable-XL模型，生成图片后，再生成视频 (文字到图片再到视频)
基于DWT-DCT-SVD算法的音频水印嵌入和提取算法MATLAB仿真，
05-07
文件列表中的“6基于DWT-DCT-SVD算法的音频水印嵌入和提取算法MATLAB仿真”可能是一个MATLAB脚本或者程序文件，包含了完整的实现流程，包括音频预处理、水印生成、使用DWT-DCT-SVD进行嵌入、以及水印的提取和检测等...
RISC-V SVD 文件生成工具
10-03
RISC-V SVD 文件生成工具。详细说明见博文 RISC-V 之一 使用 ARM CMSIS 的 SVD 文件辅助调试 https://itexp.blog.csdn.net/article/details/127144450
confyui + SVD 文本生成视频 工作流
03-17
confyui + SVD 文本生成视频 工作流
SVD-TLS_SVD-TLS算法_SVD-TLSmatlab_svd-tls_ARMA_TLS-SVD_
10-04
SVD是矩阵分解的一种形式，能够将任何矩阵表示为三个正交矩阵的乘积，即\( A = U \Sigma V^T \)，其中\( U \)和\( V \)是正交矩阵，\( \Sigma \)是对角矩阵，对角线上的元素是矩阵\( A \)的奇异值。这种分解在许多...
矿卡40HX上跑stable Diffusion XL 1.0模型的方法
German2000的博客
08-02 1274
简单的办法，就是把优化参数改为--lowvram, 可以顺利跑动，但速度是相当的慢，基本上几分钟才能出一张图。然后我关注了一下vram的载入情况，发现模型载入后，基本上用了一半的显存，再跑图就不够了，哪怕把图片大小调很低也不能满足要求。这里有二方面原因，一方面是基础模型本来就大(是基于1024x1024采样的，之前模型都是512x512), 另一方面是40HX如果在全精度状态下，vram占用比较大，为了能顺利跑动SDXL 1.0, 只能把系统改到混合精度，这样即能兼顾速度，又能减少模型载入。
comfyUi核心节点
AiPlayerShow的博客
06-16 1万+
为了方便快速搭建工作流，实现工作流程的结果，通常会搭建自定义的节点、扩展来达成目的。例如汉化自定义节点扩展ComfyUI-Translation。通常存放在custom_nodes目录下，可以通过面板安装节点或者卸载这些节点。
Stable Video Diffusion（SVD）搭建部署
培根芝士的专栏
01-14 1356
Stable Video Diffusion（SVD）是Stability AI于2023年11月21日发布的视频生成式大模型，是一种用于高分辨率、先进的文本到视频和图像到视频生成的潜在视频扩散模型。该模型不仅支持文本、图像生成视频，还支持多视角渲染和帧插入提升视频帧率，用户可以调整模型选择、视频尺寸、帧率及镜头移动距离等参数。
ComfyUI SDWebUI升级pytorch随记
applebomb的专栏
03-27 2072
目前使用的版本是去年10月的1.6版本，有点老。希望支持新的特性，于是乎开始作死。从升级torch开始
ComfyUI的常见故障和解决
Android 开发架构
12-06 9888
学习和使用ComfyUI最痛苦的是什么？就是这满屏的红色方框和和，处理完一批又一批，很多人玩了一两个流程就搞不下去了，很多初学者因此就放弃了。有道是：配置流程大半天，跑通出图三分钟。ComfyUI的快感可能就是这三分钟。体验给你带来的高效和快感，希望这篇文章能帮助解决常见的技术问题，让你畅快淋漓的使用ComfyUI。最近因为部分。
混合精度训练数据类型详解
budahui的博客
09-27 337
1. 不同操作使用的数据类型 a) 模型参数和激活值: FP16 原因: 减少内存使用，允许更大批量或更大模型 优势: FP16只需FP32一半的内存空间 b) 梯度计算: FP16 原因: 加速反向传播，减少内存使用 注意: 需要使用损失缩放防止梯度消失 c) 主要计算(如矩阵乘法): FP16 原因: 提高计算速度，减少内存带宽需求 优势: 现代GPU对FP16运算有硬件级优化 d) 关键操作(损失计算和权重更新): FP32 原因: 保持数值稳定性和训练精度 重要性: 这些操作对训练
ModuleNotFoundError: No module named 'ComfyUI-SVD.comfyui_svd'
03-21
ModuleNotFoundError是Python中的一个错误，表示找不到指定的模块。在你提供的错误信息中，出现了"No module named 'ComfyUI-SVD.comfyui_svd'"，这意味着Python无法找到名为'ComfyUI-SVD.comfyui_svd'的模块。 可能的原因是： 1. 你没有正确安装名为'ComfyUI-SVD'的模块。请确保你已经使用正确的方式安装了该模块，可以使用pip命令来安装，例如：pip install ComfyUI-SVD。 2. 模块名称拼写错误。请检查模块名称是否拼写正确，大小写是否匹配。 3. 模块不在Python解释器的搜索路径中。请确保模块所在的路径已经添加到Python解释器的搜索路径中。 如果你确定已经正确安装了该模块，并且模块名称拼写正确，但仍然出现这个错误，可能需要进一步检查你的环境配置和代码逻辑。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值