Sora 开源替代：OpenSora 1.2

最新推荐文章于 2024-07-16 01:00:13 发布
最新推荐文章于 2024-07-16 01:00:13 发布
阅读量505 收藏
点赞数 12
分类专栏： 三花AI 文章标签： 人工智能 AIGC AI作画
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_51674085/article/details/139790297
版权

 是一个 Sora 的开源替代, 昨天正式发布了1.2 版本，其主要特性如下：

  • 使用超过 20 百万的数据训练了一个大型模型，能够生成多种分辨率和宽高比的视频。
  • 引入了视频压缩网络，提高了视频生成的流畅度和效率。
  • 通过整流流和多阶段训练，优化了模型性能。
  • 简单有效的模型调节方法，使生成的视频更符合美学标准。
  • 改进了评估方法，使训练过程更加透明和可量化。

现在可以在 HF 上免费使用

该项目与另一个 Sora 开源替代 OpenSoraPlan 不同嗷~

三花AI
关注
  • 12
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
sora.ai-类似sora的高质量视频视频生成平台OpenSora.zip
04-09
sora.ai_类似sora的高质量视频视频生成平台OpenSora
Sora AI：开启智能决策的未来Sora AI：开启智能决策的未来
04-14
Sora AI：开启智能决策的未来Sora AI：开启智能决策的未来Sora AI：开启智能决策的未来Sora AI：开启智能决策的未来Sora AI：开启智能决策的未来Sora AI：开启智能决策的未来Sora AI：开启智能决策的未来Sora AI：...
多模态教案：Open-Sora 1.2 报告
weixin_40941102的博客
06-18 747
Open-Sora 1.2 引入了一系列新的功能和改进，主要包括视频压缩网络、改进的模型训练流程、多阶段训练和评估方法等。通过结合文本和视觉内容，本教案旨在帮助学生深入理解这些技术，并通过实际操作来强化知识。
Open-Sora：开源版的Sora
AI_SHELL的博客
04-24 732
本项目希望通过开源社区的力量复现Sora，由北大-兔展AIGC联合实验室共同发起，当前我们资源有限仅搭建了基础架构，无法进行完整训练，希望通过开源社区逐步增加模块并筹集资源进行训练，当前版本离目标差距巨大，仍需持续完善和快速迭代，欢迎Pull request！！！
sora 国人已开源复现（附地址）
weixin_74774974的博客
02-21 2513
openai 刚发布sora的时候，第四天，国人已经将sora复现，而且效果已经非常接近sora,有些瑕疵是因为数据集还是有差异，随着时间推移，资金涌入，数据集优化很快应该就能跟上。会部署的可以自己部署
Open-Sora 开源了！
热门推荐
IT界那些事儿
03-26 1万+
本期推荐开源项目目录：2. 马斯克开源的大模型3. 基于 AI 的软件工程师。
VGM之Sora：Open-Sora的简介、安装和使用方法、案例应用之详细攻略
近期请国内外头部出版社可尽快私信博主！——心比天高，仗剑走天涯，保持热爱，奔赴向梦想！低调，谦虚，自律，反思，成长，还算是比较正能量的博主，公益免费传播……内心特别想在AI界做出一些可以推进历史进程影响力的东西(兴趣使然，有点小情怀，也有点使命感呀)…
03-20 2568
​ VGM之Sora：Open-Sora的简介、安装和使用方法、案例应用之详细攻略 目录 Open-Sora的简介 Open-Sora的安装和使用方法 Open-Sora的案例应用 Open-Sora的简介 2024年3月18日，Colossal-AI团队重磅发布Open-Sora项目是一项致力于高效制作高质量视频，并使所有人都能使用其模型、工具和内容的计划。 通过采用开源原则，Open-Sora 不仅实现了先进视频生成技术的低成本普及，还提供了一个精简且用户友好的方案，简
视频生成Sora的从零复现：从Latte、Open-Sora(含1.0及其升级版)到StreamingT2V
结构之法 算法之道
03-19 4348
目前比较接近sora的开源路线是：Stable Video Diffusion(关于SVD的介绍请看的第4部分]) + Stable Diffusion3的结构(SD3的详细介绍见的第4部分。
震撼！Open-Sora全面开源了！
python1234_的博客
04-30 800
不久前 OpenAI Sora 以其惊人的视频生成效果迅速走红，在一众文生视频模型中突出重围，成为全球瞩目的焦点。继 2 周前推出成本直降 46% 的 Sora 训练推理复现流程后，Colossal-AI 团队「Open-Sora 1.0」，涵盖了，包括**数据处理、所有训练细节和模型权重，**携手全球 AI 热爱者共同推进视频创作的新纪元。先睹为快，我们先看一段Open-Sora 1.0 生成的都市繁华掠影。
没等来OpenAI，等来了Open-Sora全面开源
2301_81940605的博客
03-21 756
不久前 OpenAI Sora 以其惊人的视频生成效果迅速走红，在一众文生视频模型中突出重围，成为全球瞩目的焦点
Sora提示词：不同场景提示词+总结归纳提示词的技巧
04-25
Sora是一款先进的视频内容生成工具，它通过理解用户提供的丰富多样的提示词来创造出高度定制化的视频内容。提示词在Sora模型中的作用犹如创作蓝图，决定了生成视频的质量、情境深度以及与目标主题的一致性。以下是...
sora学习论文：论文集还包括了对模型优化、效率提升以及对抗样本防御策略的研究
04-25
Sora是一个创新的人工智能模型，专攻文本到视频生成技术，其背后的关键论文集合反映了该领域的前沿进展。 核心研究覆盖了深度学习扩散模型，这类论文研究如何从随机噪声中步步构建高质量视频内容，揭示了Sora在视频...
Sora-ai-Sora的开源版本实现-高质量视频生成项目.zip
04-18
《Sora-ai-Sora开源版本实现：高质量视频生成项目的深度解析》 Sora-ai-Sora是一款专注于高质量视频生成的开源项目，它的出现为文本到视频（text-to-video）的技术领域带来了新的突破。本文将深入探讨这个项目的...
OpenSNN推文：近期优质博客推荐汇总
opensnn的博客
07-12 389
国内个人博客站点众多，涵盖了技术、生活、艺术等多个领域。
AGI 之 【Hugging Face】 的【问答系统】的 [构建问答系统] / [ 构建基于评论的问答系统 ] 的简单整理
仙魁XAN
07-12 947
AGI，即通用人工智能（Artificial General Intelligence），是一种具备人类智能水平的人工智能系统。它不仅能够执行特定的任务，而且能够理解、学习和应用知识于广泛的问题解决中，具有较高的自主性和适应性。AGI的能力包括但不限于自我学习、自我改进、自我调整，并能在没有人为干预的情况下解决各种复杂问题。AGI能做的事情非常广泛：跨领域任务执行：AGI能够处理多领域的任务，不受限于特定应用场景。自主学习与适应：AGI能够从经验中学习，并适应新环境和新情境。
聊聊如何在内网下构建大模型微调环境
python1234567_的博客
07-12 973
LlamaFactory新版更新后，还是比较方便，只是说llamafactory-cli命令的确是有点蒙，踩个坑就好了。对于LlamaFactory微调来说，本身不难，毕竟都是配置；主要是在内网环境下的依赖包拉取安装是真麻烦，但其实也还好。走一遍的话，还是可以学到很多的。​。
Open-TeleVision——通过VR沉浸式感受人形机器人视野：兼备远程控制和深度感知能力
结构之法 算法之道
07-12 1572
这篇论文的链接，我当时快速看了一遍，还是有价值的一个工作(其应该有受humanplus工作的其他)，一直想做下解读来着，无奈过去一周一直在弄mamba2的解读，所以没来得及弄。码器捕捉图像和本体感觉标记的关系，Transformer解码器输出特定块大小的动作序列。手腕的姿态流式传输到服务器。服务器将人类姿态重新定向到机器人，并将关节位置目标。如下图所示，便是TeleVision的远程操作数据收集和学习设置。7.3日，我司大模型机器人(具身智能)线下营群里的一学员发了《左：我们的远程操作系统。
揭示生成式 AI 在数据叙事和分析中的影响
最新发布
gongdiwudu的专栏
07-16 1053
在广阔的数据分析领域，改变游戏规则的最深刻的发展之一是生成式人工智能 （GAI）。这是一个激动人心的时刻，人工智能不仅仅是基于历史数据进行处理和预测;它正在创造一些全新的东西，彻底改变数据叙事和分析过程。在最近的一次会议中，我有机会探讨了这项技术创新的基本原理、架构和潜在影响。以下是我们介绍的内容的简明摘要。
sora如何下载使用
02-22
Sora是一个基于WebRTC的开源音视频传输框架，它提供了高质量、低延迟的实时通信能力。你可以通过以下步骤来下载和使用Sora： 1. 下载Sora SDK：你可以从Sora的官方网站或者GitHub仓库中下载Sora SDK。Sora提供了多种语言的SDK，包括JavaScript、iOS、Android等。 2. 配置开发环境：根据你选择的SDK，配置相应的开发环境。例如，如果你选择使用JavaScript SDK，你需要在你的项目中引入Sora的JavaScript库。 3. 创建Sora实例：在你的代码中，创建一个Sora实例来进行音视频通信。你需要提供Sora服务器的URL、频道ID等信息来初始化Sora实例。 4. 加入频道：使用Sora实例的join方法来加入指定的频道。你可以指定自己的用户ID和角色等信息。 5. 进行音视频通信：一旦成功加入频道，你就可以使用Sora提供的API来进行音视频通信。例如，你可以使用Sora的publish方法发布自己的音视频流，使用subscribe方法订阅其他用户的音视频流。 6. 处理事件：Sora会触发各种事件，例如加入频道成功、收到新的音视频流等。你可以注册相应的事件处理函数来处理这些事件。 以上是一个简单的Sora使用流程，具体的步骤和API使用方式可以参考Sora的官方文档或者示例代码。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值