字节跳动推出新项目：DreamActor-M1 实现了 Runway Act 功能，改变未来视频创作的游戏规则

最新推荐文章于 2025-06-05 16:17:14 发布
最新推荐文章于 2025-06-05 16:17:14 发布
阅读量1.2w 收藏 33
点赞数 25
分类专栏： 猫头虎 AI 探索之路 文章标签： AIGC AI-native AI写作 文心一言 mojo AI编程 agi
转载必须标明来源：猫头虎技术团队， 其他疑问搜： CSDNWF
本文链接：https://blog.csdn.net/qq_44866828/article/details/147004525
版权

字节跳动推出新项目：DreamActor-M1 实现了 Runway Act 功能，改变未来视频创作的游戏规则 🚀

在现代视频制作和动画行业，创新技术层出不穷，但有一种新兴技术正在悄然改变这一切——字节跳动最新推出的DreamActor-M1项目。这个革命性工具不仅简化了创作流程，还赋予视频制作者前所未有的自由和控制力。
DreamActor-M1

DreamActor-M1的核心优势在于通过一张照片和一段参考动作视频，就能无缝地将人物融入到视频场景中，并且可以精确控制人物的表情和动作——从微笑、眨眼到头部转动、手臂抬起，甚至跳舞等动作都能完美呈现。🎬🤖

文章目录

作者简介

猫头虎是谁？

大家好，我是 猫头虎，AI全栈工程师，某科技公司CEO，猫头虎技术团队创始人，也被大家称为虎哥。我目前是COC北京城市开发者社区主理人、COC西安城市开发者社区主理人，以及云原生开发者社区主理人，在多个技术领域如云原生、前端、后端、运维和AI都有超多内容更新。

感谢全网三十多万粉丝的持续支持，我希望通过我的分享，帮助大家更好地掌握和使用各种技术产品，提升开发效率与体验。

作者名片 ✍️

  • 博主：猫头虎
  • 全网全平台搜索关键词 猫头虎 即可与我建联
  • 作者微信号：Libin9iOak
  • 作者公众号：猫头虎技术团队
  • 更新日期：2025年03月22日
  • 🌟 欢迎来到猫头虎的博客 — 探索技术的无限可能！

加入我们AI共创团队 🌐

加入猫头虎的AI共创变现圈，一起探索编程世界的无限可能！ 🚀

正文

颠覆传统的生成动画技术 ⚙️

传统的视频制作和动画制作往往需要复杂的设备和高昂的制作成本。通过DreamActor-M1，您只需要简单的几步操作就可以获得高质量的视频效果。这项技术基于**DiT（Diffusion Transformer）**框架，结合了面部表情、3D头部球体和3D身体骨架的混合指导，确保能够实现高度的表达性与真实感。

什么是DreamActor-M1？

DreamActor-M1是一种新型的人体动画生成框架，它利用混合指导技术，解决了以往技术中的精细控制、多尺度适配和长期时间一致性问题。通过输入一张参考图片，DreamActor-M1能够模仿从视频中捕捉到的人类行为，并生成跨多个尺度（从肖像到全身）的高度真实的视频。
DreamActor-M1

跨越技术壁垒，实现人物动画的精准控制 🔥

这项技术的突破点在于其能够实现面部表情和身体动作的精细控制，无论是微笑、眨眼、嘴唇颤动，还是头部的转动、手臂的抬起甚至是复杂的舞蹈动作，都能做到精准复刻。同时，系统还能适应不同的图像尺度和姿势，无论是人物的肖像特写，还是全身动态，都能够无缝过渡。
DreamActor-M1

强大的多尺度适配功能

无论你的目标是制作一个面部表情动画，还是需要更大范围的全身动画，DreamActor-M1都能为你提供适应不同视频要求的解决方案。该系统通过对不同分辨率和尺度数据的训练，确保在处理从肖像到全身的动画时都能保持极高的一致性和精度。
DreamActor-M1

打破创作瓶颈：为内容创作者提供无限可能 🌟

DreamActor-M1不仅仅是一个动画生成工具，它更像是一个创作者的无限画布。通过这种全新的动画技术，创作者可以更加自由地在虚拟世界中进行动态创作，无需担心复杂的技术操作，只需输入一张照片与参考动作视频，就能够创造出令人惊艳的视频内容。

  • 面部表情同步：无论是微笑、皱眉，还是眼睛的微小动作，都能精准还原。
  • 全身动作复刻：无论是简单的手部动作，还是复杂的舞蹈，甚至极具挑战性的全身运动，都能完美呈现。

真实与创意并存：艺术与技术的完美结合 🎨💡

DreamActor-M1不仅仅追求高效和精准，更注重视频内容的艺术性和创意性。通过这种先进的技术，您可以更自由地探索和表达不同的视觉风格和艺术表现形式。每一位创作者都能在自己的作品中加入更加丰富、更加生动的动画元素。

总结 📋

DreamActor-M1的推出，不仅为动画创作打开了新世界的大门，还让内容创作者摆脱了传统制作过程中的繁琐操作。通过这一工具，任何一张照片和参考视频都可以变成震撼的视觉作品。🎥

未来的视频创作，无论是面部表情，还是全身动作，都将被这项技术重新定义。创作者们，准备好迎接这个创作新时代了吗？

参考资料

  1. DreamActor-M1 项目页面：https://grisoon.github.io/DreamActor-M1
  2. 研究论文：DreamActor-M1：https://arxiv.org/pdf/2504.01724

别忘了点击右上角的关注按钮，持续获取更多关于科技前沿的深度内容！ 🌐

文末粉丝福利

👉 更多信息：有任何疑问或者需要进一步探讨的内容，欢迎点击文末名片获取更多信息。我是猫头虎，期待与您的交流！ 🦉💬

GO ！ GO ！ Go ！

入口：https://gitcode.com/qq_44866828/CSDNWF

联系我与版权声明 📩

  • 联系方式：
    • 猫头虎微信号: Libin9iOak
    • 万粉变现经纪人微信号：CSDNWF
    • 公众号: 猫头虎技术团队
  • 版权声明：
    本文为原创文章，版权归作者所有。未经许可，禁止转载。更多内容请访问猫头虎的博客首页。

点击✨⬇️下方名片⬇️✨，加入猫头虎AI共创社群，交流AI新时代变现的无限可能。一起探索科技的未来，共同成长。🚀

《AI视频类工具之四——​ Runway》
商务合作|问题讨论|交流学习 请联系作者微信，加微信请务必注明来意，博客主页有联系方式
08-15 956
Runway 是一个非常强大的 AI 视频生成工具，它提供了多种功能，让创作者能够轻松地制作出高质量的视频内容。视频生成文本生成视频：用户可以通过输入文本或选择图片作为Prompt，Runway能够自动生成与Prompt相匹配的视频内容。这种功能特别适用于那些希望快速生成视频内容但缺乏专业制作技能的用户。视频风格迁移：Runway支持将用户上传的视频素材与特定的图片或视频风格进行融合，生成具有新风格的视频。这为用户提供了更多样化的视频创作选择。视频后期处理视频修复。
让数字人视频告别“恐怖谷“！字节团队最新DreamActor-M1实现人类表情动作像素级操控
AIGCer的博客
04-23 1017
最近的基于图像的人像动画方法在逼真的身体和面部动作合成方面取得了一定进展，但在细粒度整体可控性、多尺度适应性和长期时间一致性上仍存在不足，导致表现力和鲁棒性较低。
全网都在猜，这些视频是不是字节AI生成的：该跟动捕说再见了？
AIBigModel的博客
04-07 692
本周四在网络上爆火的 AI 视频生成效果，都来自字节跳动提出的一个全新的框架 DreamActor-M1—— 基于扩散式 Transformer（DiT）的人体动画生成框架，通过混合引导机制，实现对动画的精细化整体控制、多尺度适应以及长时间一致性。在训练时，这些参考图像会作为额外的信息输入，帮助模型更好地保留人物的外貌。在运动引导方面，研究者设计了一套融合隐式面部特征、3D 头部球体和 3D 身体骨架的混合控制信号，能够稳健地驱动面部表情与身体动作的生成，同时保证动画的表现力与人物身份的一致性。
每日AI必读-2025年4月3日(晚报)
你是我的天晴
04-03 291
2025年4月3日，人工智能领域迎来多个重要动态：OpenAI调整o3模型成本并推出评测基准，谷歌DeepMind预测AGI发展，即梦AI 3.0开启灰度测试，Hugging Face新增实用功能，以及多个AI工具和应用的更新发布。即梦AI宣布启动3.0版本的灰度测试，新版本在中文文字生成能力上有了显著提升，支持更复杂的语义理解和上下文连贯性。此外，3.0版本还优化了设计排版功能，可直出2K商业海报，为设计师和内容创作者提供更高效的工具。该课程旨在普及AI知识，培养学生的科技素养和创新能力。
Dream API 使用教程
gitblog_00281的博客
08-26 436
Dream API 使用教程 dream-apiLegit DLC Proxy Unlocker项目地址:https://gitcode.com/gh_mirrors/dr/dream-api 项目介绍 Dream API 是一个基于 Node.js 的开源项目，旨在通过代码生成美丽的、无版权限制的图像。该项目提供了两种独特的 AI 模型：Diffusion 和 Original。Diffusi...
【AIGC专栏】微软Bing ImageCreator 创建图片
技术与管理的平衡木-
06-01 44
摘要：Bing Image Creator是一款基于DALL·E3的AI图像生成工具，用户可通过文本提示词创建匹配图像。目前该服务仍处预览阶段，中国大陆及港澳地区暂不可用，且要求账户和IP地址均位于可用区域。其界面包含账户信息、点数统计、创建和浏览功能，支持通过提示词生成图像（如社交媒体主题图像）。用户可参考他人作品获取灵感，利用相似关键词进行二次创作。（149字）
AIGC-SD6、AIGC-3D
sinat_34461199的博客
06-05 178
一句话总结：提供了一种两阶段优化方案：一阶段基于输入图片，通过神经辐射场及扩散模型，生成全新其他视角的图像。二阶段将粗模转化成含有精细纹理点云模型，同时解决噪声点云的引入问题。
AIGC-SD3、控制
sinat_34461199的博客
06-05 764
本文提出一种两阶段多概念生成方法 OMG，一阶段先不用特定概念信息生成一张垫图，确定构图布局，然后提取垫图全面的视觉信息（mask 和 attention map），二阶段将各角色的特定概念信息作用于对应的 mask 区域，避免信息泄露，属性错乱，并复用一阶段的 attention map，维持构图布局不变。controlnet基于深度图生图的效果很好，但需要精确的深度图（这本身就是有挑战性的），为此，作者提出了loose control，一种通用版本（更松散的）的深度图控制。(a)默认奖励微调策略管道。
AIGC学习笔记（8）——AI大模型开发工程师
yangwei2048的博客
05-31 1185
LangChain于8月1日0.254版本更新，声称采用新的语法来创建带有组合功能的Chain，同时提供一个新的接口，支持批处理、异步和流处理，将这种语法称为LangChain Expression Language(LCEL)
AIGC 基础篇 高等数学篇 03 中值定理与导数应用
2503_91291623的博客
06-04 321
中值定理与导数应用复习
AIGC-SD1、原版SD
sinat_34461199的博客
06-05 692
ADD是两个损失函数来进行蒸馏的，第一个是Adversarial loss（对抗损失），用了一个Discriminator(判别器）来判断生成图片跟真实图片的区别，同时避免其他蒸馏方法中出现的模糊和其他人造的感觉。SDXL-Turbo的两个loss的ADD方案，一个去确保生成质量(Adversarial loss，GAN的核心思想)，一个去确保跟原模型的一致性（Distillation loss）使用了几个简单但是非常有效的训练技巧，包括图像尺寸条件化策略，图像裁剪参数条件化以及多尺度训练等。
AIGC-SD9、知识点
sinat_34461199的博客
06-05 1004
Rectified Flow 原理简介与示例代码解读-CSDN博客。
AIGC-SD5、高效微调
sinat_34461199的博客
06-05 614
虽然 LoRA 具有参数的高效性 parameter-efficient, ，但它存在两个主要问题：首先，LoRA 文件的大小是固定的，在训练后无法修改，如果我们需要更改其中的 Rank 秩数，那么只能从头开始训练，在训练过程中调整 Rank 秩数然后再次生成新的模型。DyLoRA 可以同时学习低于你指定的 Rank 的各个 Rank 的 LoRA，这便导致训练好的 DyLoRA 模型文件的 Rank 是可轻易调整的，因此当你想要选择最佳 Rank 秩时它非常有用且高效。最初的 LoRA 在提出时是针对。
AIGC-SD2、一致性
sinat_34461199的博客
06-05 591
风格特定块的特征注入：InstantStyle将参考图像的特征专门注入到风格特定的块中，避免了风格泄漏，并省去了繁琐的权重调整过程，这一点在参数更重的设计中尤为突出。预训练的ControlNet也可用于布局控制生成。PhotoMaker是一个文本到图像的生成方法，它接收多个输入ID图像（Identity Images），并生成一个基于文本提示的新图像，同时保留输入ID的特征。延续 IP-Adapter 思路，只需要一张参考图即可直接生成和参考图风格相似的图，不需要依赖于复杂的配对数据集或者额外的模块。
【JeecgBoot AIGC】AI知识库实战应用与搭建
最新发布
JEECG官方博客
06-05 641
本节将介绍如何在系统中添加和管理AI知识库。AI知识库是一个结合了自然语言处理（NLP）、向量搜索和大语言模型（LLM）的智能信息管理系统，旨在高效存储、检索和管理知识，使AI能够更精准地理解并回答用户的问题。在本系统中，AI知识库是AI应用、AI流程等模块的核心组成部分，为知识存储与智能检索提供支持。
AIGC 基础篇 高等数学篇 04 不定积分
2503_91291623的博客
06-05 367
不定积分
AIGC 基础篇 高等数学篇 02导数与微分
2503_91291623的博客
06-03 305
导数与微分复习
AIGC学习笔记（9）——AI大模型开发工程师
yangwei2048的博客
06-03 442
本文介绍了LangChain框架中Chains模块的核心功能和应用。主要包括四种链式操作类型：LLMChain（基本链式调用）、SequentialChain（顺序链式调用）、RouterChain（条件路由调用）和Transformation（数据处理调用）。文章通过代码示例展示了每种链的具体实现方法，如：使用PromptTemplate与LLM组合生成公司名称、通过顺序链生成剧本简介和评论、利用转换链处理长文本摘要，以及基于问题类型路由到不同提示模板的功能实现。这些方法为构建复杂AI应用提供了模块化和灵
字节跳动开发者中心
04-23
<think>好的，我现在需要帮助用户找到字节跳动开发者中心的地址或登录入口。用户之前已经询问过类似的问题，我之前给出的回答中提到了三个途径：字节跳动开发者中心官网、MarsCode官网以及开发者社区合作入口。现在用户再次询问，需要确认是否信息有更新或者需要更详细的步骤。 首先，回顾之前的回答，引用了[^1]和[^4]，其中提到开发者中心的网址是developer.bytedance.com，而MarsCode的官网是marscode.bytedance.com。用户现在可能希望得到更明确的确认，或者是否有其他入口方式。 接下来，检查用户提供的站内引用，看看是否有相关的新信息。引用[1]和[2]提到了青训营项目和抖音项目，可能涉及到开发者资源，但并没有直接的平台地址。引用[3]提到云原生技术体系，但更多是基础设施层面的信息。引用[4]提到了新项目DreamActor-M1，但属于视频创作领域，可能与开发者中心入口无关。因此，这些引用并没有提供新的关于开发者中心地址的信息，需要继续依赖之前的回答内容。 需要确保回答中的链接准确无误，并且符合用户需求。用户可能担心链接是否有效或者是否需要额外的步骤访问，比如登录或注册。因此，在回答中应强调官方认证标识，确保用户访问的是正确的网站，避免钓鱼网站的风险。 另外，用户可能对如何登录开发者中心有疑问，是否需要特定的账号权限，比如企业账号还是个人开发者账号。根据之前的信息，可能需要注册字节跳动开发者账号，但具体流程可能需要用户自行查看官方文档。因此，在回答中建议用户注意核对域名，并提及API文档的获取方式，以增加可信度。 最后，生成相关问题需要考虑用户可能的后续需求，比如如何注册账号、支持的服务或常见问题，确保覆盖用户可能遇到的下一步问题。</think>根据官方资料和开发者文档，字节跳动开发者中心可通过以下方式访问： ### 一、官方主入口 **开发者中心主站地址**： $$ \text{官网地址：} \quad \texttt{https://developer.bytedance.com} $$ 该平台是字节跳动所有开发者服务的统一入口，提供： 1. API文档中心（含抖音开放平台、云服务、AI能力等） 2. SDK下载与密钥管理工具 3. 技术社区支持（含青训营项目指南[^1]、抖音项目实战案例[^2]等） ### 二、专项服务入口 1. **云原生开发者平台** 参考字节跳动云原生技术体系文档[^3]，访问路径： ``` 主站导航栏 > 云服务 > 容器服务（Kubernetes技术栈支持） ``` 2. **AI开发平台** 包含如DreamActor-M1等创新项目支持[^4]： $$ \text{AI实验室地址：} \quad \texttt{https://ailab.bytedance.com} $$ ### 三、认证与登录 1. **登录方式** 使用字节跳动企业账号或注册个人开发者账号登录 2. **安全验证** 需通过企业邮箱验证或手机号二次认证 ※访问时请认准域名后缀`.bytedance.com`及ICP备案信息（京ICP备2021001108号） --- ### 相关问题 1. 如何申请字节跳动开发者账号？ 2. 抖音开放平台的API调用有哪些限制？ 3. 字节跳动云原生平台支持哪些容器编排工具？ 4. 青训营项目的GitHub仓库如何获取访问权限？
评论 11
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

猫头虎

一分也是爱，打赏博主成就未来！

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值