陈天奇官宣新APP,让手机原生跑大模型,应用商店直接下载使用

机器之心报道  编辑:张倩

IPhone、iPad 均可体验。

前段时间,TVM、MXNET、XGBoost 作者,CMU 助理教授,OctoML CTO 陈天奇等多位研究者共同开发的一个项目引爆了 AI 界。

这个项目名叫 MLC-LLM,能让你「在任何设备上编译运行大语言模型」,包括移动端(例如 iPhone)、消费级电脑端(例如 Mac)和 Web 浏览器。运行效果如下:

7b00cedb1464f905486288a9ad006978.png

MLC-LLM 推出不到两天,GitHub 的 Star 量就接近了一千。在社交网络上,人们纷纷点赞,表示 MLC-LLM「让我领教了低精度跑 AI 的可怕程度。」截至目前,该项目已经在 Github 上收获了 7.5k 的 star 量(具体信息参见:《陈天奇等人新作引爆 AI 界:手机原生跑大模型,算力不是问题了 》)。

75f6eede3bdfc34f921929757b1882db.png

刚刚,陈天奇又公布了一个好消息:MLC Chat app 已经在苹果的 App Store 上线了。

fc5771bf0f448a3a375ceec642425a78.png

MLC Chat 是一款让你能够在 iPad 和 iPhone 上与开放语言模型进行本地聊天的应用,是 MLC LLM 项目的一部分。

799df55615f5a86065428d6a53382f85.png

MLC Chat 在将模型下载到应用程序后,一切都在本地运行,无需服务器支持,并且不需要互联网连接,不会记录任何信息。

2f8bfadfec605dcda16c2da0332c2c3e.png

add2ce478215e8c448fa435855910a48.png

在得知这一消息后,机器之心下载了该应用进行体验。

打开 APP,可以看到,该应用已经预装了一个模型 ——RedPajama。

249f446a45c353b2b8a6c92f5f123195.png

打开这个模型,我们就直接进入了聊天窗口,可以和 RedPajama 直接对话。

f9ee9daa5455200c5dc978ca709cef4a.png

如果你对这个模型不满意,可以在首页通过输入 URL 添加新的模型。不过,这个下载新模型的过程可能会有点慢。

a6af4f6ed16764d71be72c32ca8daa06.png

a103b9c7c17778134e4457abbdb3f965.png

由于该应用刚刚上架,目前我们还没有看到来自其他用户的反馈。

不过,可以肯定的是,随着这类应用的出现和普及,大型语言模型的使用门槛将不断降低。过去,只有专业领域的研究人员和技术专家才能够有效地利用这些模型进行各种任务。然而,现在随着开放源代码项目和开发工具的发展,越来越多的人可以轻松地使用这些模型。

如果你也对 MLC Chat 感兴趣,可以前往苹果的 APP Store 下载体验。

© THE END 

 
 

6477f3d11bd86a3ef541e7fafe9c5be3.jpeg

 
 
 
 
 
 
 
 
往期精彩回顾




适合初学者入门人工智能的路线及资料下载(图文+视频)机器学习入门系列下载机器学习及深度学习笔记等资料打印《统计学习方法》的代码复现专辑机器学习微信群请扫码
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值