Runway 删库跑路
当地时间 8 月 30 日,InfoQ 获悉,知名生成式 AI 平台 Runway 已经删除了其在 Hugging Face 上的库,页面已经空空如也。
就连 Runway 参与的知名 AI 项目也跟着一起 404 消失不见了。
页面上只留下了一句话:“我们不再对 HuggingFace 账号进行维护。”
针对这些举措,Runway 没有给出任何通知,而上个月的下载量还足足有百万之多。突然删除掉这些开源模型之后,网友们才意识到他们没有对 Runway 的开源模型进行备份。
如此突然而不做解释的删除开源库,对开源社区和开发者来说是非常不负责任的。不少网友也担心自己需要更换模型,但不幸的是目前似乎很难找到值得信任的备份,所以有网友评价说:“这就是我们为什么需要一个去中心化的模型权重托管解决方案。”
生成式 AI 独角兽的开源纠葛
Runway 成立于 2018 年。公司创始人兼首席执行官 Cristóbal Valenzuela Barrera 在创办公司之前,花了大量时间研究计算机视觉在图像和视频中的应用。他对计算创作的新范式以及神经网络技术在艺术创作中的潜力深感着迷。为了深入研究这一领域,Barrera 全职就读于纽约大学的互动电信项目(Interactive Telecommunications Program),专攻计算创作。在纽约大学期间,他结识了 Alejandro Matamala(首席设计官)和 Anastasis Germanidis(首席技术官),并共同研究了机器学习模型在创意领域中用于图像和视频分割的应用。
当时正值 TikTok 迅速崛起并与 Musical.ly 合并之际,这三位创始人决定成立 Runway——一家致力于为视频创作者开发由机器学习驱动的工具的初创公司,同时还专注于这些工具背后的技术开发。
Runway 最初于 2019 年作为一个模型目录推出,允许用户部署和运行各种用于艺术创作的开源模型。随着用户群的不断扩大,这家初创公司逐渐转向开发基于机器学习的视频编辑工具。在创始人的最初构想中,他们对用户如何使用他们的平台持开放态度。
随后,Runway 迅速成为了生成式 AI 的独角兽之一。
根据公开研究数据,Runway 除了吸引“专业消费者”(prosumers),如今也正逐步获得企业客户的青睐,其解决方案的价值已达数十亿美元,并被 New Balance、CBS、Ogilvy、VaynerMedia 和 Publicis 等公司使用。
Runway 还推出了 Runway Research。Runway Research 与多所知名大学合作,发表 AI 领域的论文,并将研究成果融入其产品中。这其中就包含了与由 Stability AI、慕尼黑大学合作的 Stable Diffusion 模型。
为了训练 Stable Diffusion,研究团队动用了 4000 个 A100 Ezra-1 AI 超大集群,而 Stability AI 公司正是这些算力的提供者。
该模型的代码在 CreativeML Open RAIL M License 下开源,Runway 的首席执行官 Cristóbal Valenzuela 在发布 SD 1.5 时强调了 Runway 的“赋能任何人创造不可能”的使命。
然而开源这件事也让 Runway 与 Stability AI 发生了冲突,导致两家公司从合作伙伴变成了对手。根据 Hugging Face 的首席技术官 Julien Chaumond 的说法,Runway 选择开源 SD 1.5后,他们就收到了 Stability AI 提交的撤下 Runway ML 的 SD 1.5 模型的请求,因为 Stability AI 的法务团队称 Runway 涉嫌侵犯知识产权。
Runway 的首席执行官 Cris 在 Hugging Face 的讨论中否认了这一知识产权泄露指控,并感谢 Stability AI 捐赠计算资源,帮助重新训练了原始模型。
虽然 Stability AI 最终撤回了撤下请求,但这也并不意味着事情得到了完全解决。所以,现在 Runway 下架 SD 1.5,有一个猜测就是可能还是因为这次开源纠纷。
而另一个说法是,有些人认为目前的一些开源项目从 SD 1.5 中借鉴了太多:免费的开源竞争对手威胁到了 Runway 盈利丰厚的在线视频生成器,因此 Runway 撤回了对开源的所有支持。
不止一位网友提到了前几天开源的 CogVideoX,这款开源文本转视频模型,声称可能会颠覆由 Runway、Luma AI 和 Pika Labs 等初创公司主导的人工智能领域。
CogVideoX 是由清华大学和智谱 AI 的研究人员共同开发的一种新型文本生成视频模型,它被寄希望于可能彻底改变视频创作并使先进的 AI 功能民主化。
CogVideoX 项目地址:https://huggingface.co/spaces/THUDM/CogVideoX-5B-Space
该开源模型可根据文本提示生成长达 6 秒的高质量、连贯的视频,可与 Runway、Luma AI 和 Pika Labs 等公司的专有系统相媲美。
最先进的版本 CogVideoX-5B 拥有 50 亿个参数,以每秒 8 帧的速度生成 720×480 分辨率的视频。根据研究人员的基准测试,该模型在多个指标上均优于 VideoCrafter-2.0 和 OpenSora 等竞争对手。
然而,对 Runway 造成威胁的远不止 CogVideoX 一个。
不久前,初创公司 Black Forest Labs 刚因其为伊隆·马斯克的 AI 图像生成器提供技术支持而登上国外各大科技新闻头条。据悉,xAI 公司也将采用背后有 Black Forest Labs 文本生成视频技术支撑的“反觉醒聊天机器人”,这种消息对 Runway 来说不是个好消息。
AI 大模型赛道竞争愈发激烈
Runway 删库现象或许只是当前 AI 大模型赛道的一个缩影——没有过硬的技术和盈利能力,想活下去很难。
近期就出现了大模型背后公司集体求卖身的情况。
6 月,Stability AI 就被传出了资金链断裂,正在寻求合并的消息。此外,有媒体爆料,另一 AI 独角兽 Adept 领导层与科技巨头公司就出售或战略合作可能性进行了谈判。据悉,Adept 已经和 Meta 进行过沟通。
Adept 由 OpenAI 的原工程副总裁 David Luan,与两位谷歌 Transformer 架构的提出者 Ashish Vaswani 和 Niki Parmar 联手创立。目前,Ashish Vaswani 和 Niki Parmar 已经离开创立了另一家公司,Adept 的三名联创只剩下华人 David Luan 一人。
此外,Pin 背后的公司也在发布了一款产品后寻求收购。据知情人士透露,Humane 估值在 7.5 亿美元至 10 亿美元之间。
Humane 由两位前苹果资深员工 Imran Chaudri 和 Bethany Bongiorno 创立,曾因明星创始人风靡一时,吸引了包括微软、高通,及 OpenAI 首席执行官山姆·奥特曼在内的多位重量级投资人的数亿资本注入。然而 Ai Pin 高达 699 美元的售价、需要额外月度订阅费才能维持正常使用以及封闭式操作系统 (ComOS) 都让消费者望而却步。产品本身的缺陷、软件的不成熟、高昂的价格以及订阅费用,共同导致了 Ai Pin 的快速陨落。
国内也有类似情况。去年有媒体爆出,一家清华系 AI 大模型公司,寻求 10 亿人民币估值融资的同时,也在以 1 亿美金的价格探索并购机会,有消息传出,当时同样出自清华团队的智谱 AI 就曾就并购一事与之有过接触。
可见,没有过硬的产品和技术,被市场淘汰只是时间问题。
参考链接:
https://venturebeat.com/ai/this-new-open-source-ai-cogvideox-could-change-how-we-create-videos-forever/