英伟达高级研究科学家Jim Fan：AI的下一步的重大挑战!

已于 2024-03-01 13:55:13 修改
阅读量215 收藏
点赞数 3
分类专栏： AI技术探索 文章标签： 人工智能
于 2024-03-01 13:51:24 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hjingfeng/article/details/136394163
版权
英伟达高级研究科学家JimFan在TED演讲中探讨了英伟达基于大量实体任务数据训练的动作输出技术，预示AI将从单一任务向全面自动化和自我进化发展，描绘了AI未来广阔的应用前景。
摘要由CSDN通过智能技术生成

扫码关注公众号，和我交流

今天发布的信息，是一个视频。来自英伟达高级研究科学家Jim Fan在TED的一次演讲。从视频中，我能感受到国外搞技术的人，似乎对于像ChatGPT4这样的突破性技术出现，始终都是一种平和、认可和鼓励的心态。不会被大的创新所影响，而始终去追求创新。

我觉着视频不错，希望能给大家带来一些启发。但是CSDN的发视频好像很难被发现，所以临时增加了一篇文章。

这个视频大意是：

当OpenAI在将海量的文本，训练输出高质量的文本、图片、视频时，英伟达在根据同样的原则，在研究将海量的实体+任务提示的数据，训练输出动作，这项研究将能够使所有能够移动的物体，都能够实现自动化！

他的演讲，为AI的未来发展设定了宏伟的蓝图，描绘了一个在多个维度上高度发展的AI技术景观。从AlphaGo的胜利到Voyager和MetaMorph的开发，再到基础智能体（Foundation Agent）的构想，我们可以看到AI技术如何从专注于单一任务的实现，逐步发展到具有广泛应用和自我进化能力的全能AI。

英伟达高级研究科学家Jim Fan：AI的下一步的重大挑战!

JingFeng.Huang
关注
专栏目录
英伟达 Jim Fan：具身智能的难点不是硬件，而是「Foundation Agent」 | 最新快讯
www3300300的专栏
06-04 826
但显然，与屡爆惊喜的模型、应用不同，更「硬」的「具身智能」在产业界掀起商业化与资本狂潮的同时，也面临着需要冷静的现实：大模型并未在行业中得到广泛应用。其基本思想在于，如果一个模型在一万个不同的模拟环境中接受训练，并且这些环境中的重力、摩擦力、物体重量和大小都有所不同，那么该模型便很有可能能够适应并泛化到我们的现实世界中。然而，硬件的限制使我们未能在现实世界中复制笔旋转的动作。比如我们模拟一只机器狗在向前奔跑，能够将模拟环境中的这一行为零样本地转移到现实世界中，让一个真实的机器狗，也在进行向前奔跑的动作。
英伟达 Jim Fan：具身智能的难点不是硬件，而是「Foundation Agent」
人工智能学家
06-04 115
基础智能体将实现具身性、现实交互和技能掌握的「三位一体」。来源：AI科技评论作者：赖文昕 马蕊蕾编辑：陈彩娴大模型浪潮一起，被视为是大模型最佳载体的机器人，热度也随之飙升，「具身智能」这个在1950年由艾伦·图灵提出的概念，时隔75年再次成为了 AI 界的宠儿。2024年才过去不到半年，AI 圈就迎来了 Sora、Claude 3、Devin、GPT-4o 等数颗重磅炸弹，文生视频、AI Agen...
Talk预告 | 英伟达范麟熙: MineDojo, 基于Minecraft的开放式通用人工智能体学习平台
TechBeat人工智能社区博客
08-23 778
北京时间8月24日(周三)晚20点，准时开播！
英伟达Jim Fan预测：未来2~3年机器人将迎来“GPT-3时刻”
夕小瑶科技说
09-20 794
所有移动的东西最终都将是自主的，对于机器人模型，我觉得我们还没有突破架构的极限。人类社会是围绕人类的化身、人类的外形因素构建的，我们所有的餐馆、工厂、医院以及所有设备和工具——它们都是为人类形态和人类双手设计的。GR00T 驱动的机器人，将能够理解自然语言，并通过观察人类行为来模仿动作，来快速学习人类身体的协调性、灵活性和其它技能，以适应现实世界并与之互动。另外，将快速、无意识的运动控制，与较慢、有意识的规划和推理过程，集成到同一个模型中，并让这个模型可以同时运动和推理，依然是机器人尚待突破的技术壁垒。
英伟达Jim Fan：当前处于第二波智能体浪潮，其包含软件智能体和具身智能体
人工智能学家
07-07 66
来源：DeepTech深科技支持：Ren排版：刘雅坤当 ChatGPT 首次发布时，人工智能领域的每个人都在谈论新一代人工智能助手。但在过去的一年里，这种兴奋转向了一个新的目标：智能体（AI agents）。智能体在 2024 年 5 月份的谷歌年度 I/O 大会上占据了重要地位。当时，该公司推出了名为 Astra 的新智能体，用户可以使用音频和视频与之交互。OpenAI的新 GPT-4o 模型...
英伟达成立最壕AI实验室：Jim Fan领衔，专攻具身智能
量子位
02-24 1011
金磊 发自 凹非寺量子位 | 公众号 QbitAI英伟达最新大动作来了——通用具身智能体。这则消息是由英伟达高级科学家Jim Fan透露，他表示：我将和老队友Yuke Zhu一起，在英伟达内部组建一个新研究小组——GEAR，通用具身智能体研究。我们相信，在未来，每一台移动的机器都将是自主的，机器人和模拟智能体将像iPhone一样无处不在。我们正在构建基础智能体：一个具有通用能力的AI，可以在许多虚...
AI视觉字谜爆火！梦露转180°秒变爱因斯坦，英伟达高级AI科学家：近期最酷的扩散模型...
量子位
12-03 35
克雷西 萧箫 发自 凹非寺量子位 | 公众号 QbitAIAI画的玛丽莲·梦露，倒转180°后，竟然变成了爱因斯坦？！这是最近在社交媒体上爆火的扩散模型视错觉画，随便给AI两组不同的提示词，它都能给你画出来！哪怕是截然不同的对象也可以，例如一位男子，经过反色处理，就神奇地转变成一名女子：就连单词也能被翻转出新效果，happy和holiday只在一旋转间：原来，这是来自密歇根大学的一项“视觉字谜”新...
西部世界成真：仿生肌肉驱动的机器人来了，英伟达科学家站台
量子位
10-24 233
一水 发自 凹非寺量子位 | 公众号 QbitAI西部世界式的仿生机器人成真了？！人造肌肉驱动下，这个名叫Torso的上半身机器人开始拱手作揖、前后左右咔咔转动脖子……细一打听，才知道它的肘部、颈椎、肩关节等都是模仿人类组织构建（双手操作训练还在进行中）。好家伙！一众钢铁侠般的人形机器人里，竟出现了截然不同的“新皮肤”——这也引来英伟达科学家Jim Fan站台，后者在引用了《西部世界》福特博士的经...
AI播客下载：英伟达官方播客The AI Podcast
AIGCTribe的博客
06-14 714
加入我们，一起探索人工智能对我们世界的影响，一次关注一个了不起的人——从在地球上的草原上追踪濒危犀牛的野生动物生物学家，到分析遥远星系中100亿年历史的星光的天体物理学家，再到应对零售商供应链中隐藏的数亿参数的沃尔玛数据科学家。82. 第167集：MLCommons 的 David Kanter，NVIDIA 的 Daniel Galvez 谈公开可访问的数据集。102. 第140集：NVIDIA 的 Shalini De Mello 谈自监督 AI 和 NeurIPS 的成功。
几行代码，GPT-3变ChatGPT！吴恩达高徒、华人CEO震撼发布Lamini引擎
04-29
对此，英伟达科学家Jim Fan表示， LLaMa+自定义数据正在成为新的范式，而Lamini的推出也带了一种全新的模式——FaaS，微调即服务。 MLOps的未来是「LMOps」。哪里有标准化，哪里就有机会。 OpenAI科学家，前特斯拉...
用苹果Vision Pro隔空操控机器人，英伟达：「人机合一」也不难嘛
leyang0910的博客
08-05 249
昨日，英伟达创始人黄仁勋在 SIGGRAPH 2024 Keynote 演讲中讲到了其人形机器人通用基础模型「Project GR00T」。该模型在功能上迎来了一系列更新。德克萨斯大学奥斯汀分校助理教授、英伟达高级研究科学家朱玉可发推，在视频中演示了英伟达如何将。图源：https://x.com/yukez/status/1818092679936299373视频中涵盖了英伟达自己的三个计算平台，包括 AI、Omniverse 和 Jetson Thor，利用它们简化和加速开发者工作流程。
【人工智能时代】- 万字长文带你梳理Llama开源家族：从Llama-1到Llama-3
xiaoli8748的专栏
09-21 1293
对于语言的代表性和毒性的分析，Llama-2使用了相应的工具和数据集，以了解预训练数据的特征，为模型的安全调整提供指导。Llama-1各个参数量版本都在超过1T token的语料上进行了预训训练，其中，最大的65B参数的模型在2,048张A100 80G GPU上训练了近21天，并在大多数基准测试中超越了具有175B参数的GPT-3。在Llama-2和Llama-2-Chat的微调中，采用了自回归损失函数，这是一种在生成模型中常见的方法，模型预测下一个token时会考虑到之前的所有token。
日本开发出进化模型：模仿生物进化论，jim fan：我最近读到的最具想象力的 LLM 论文
人工智能曾小健
04-07 427
—在数据流空间(网络层)和参数空间(权重)中进行。前者是用进化算法发现将不同模型的网络层组合在一起的最佳配方;后者则是找到混合多个模型权重的最佳策略。这两种方法还可以相互结合,通过架构创新来进化全新的基础模型与此同时，经过进化的日语视觉-语言模型对于处理富含日本文化特色的内容表现出色，当用日本来源的图像描述对数据集进行测试时，同样获得了卓越的顶级成绩此外,通过进化算法合并不同的扩散模型,研究团队还诞生了一个4步扩散过程的快速日语图像生成模型EvoSDXL-JP。
英伟达神秘视频基础模型「Cosmos」曝光，数据全靠爬虫
leyang0910的博客
08-11 568
为了这个视频模型，英伟达每天正在疯狂地爬取相当于 80 年时长的视频数据。今天，一则关于英伟达要下场做视频模型的消息引爆了 Reddit。消息源出自外媒 404 Media，据它获得的 Slack 聊天（英伟达的内部聊天平台）、电子邮件和文件显示，英伟达正在从 Youtube 和其他几个来源抓取视频，收集用于其 AI 产品的训练数据。
机器学习系列----岭回归（Ridge Regression）简介及实现
DK22151的博客
11-09 599
岭回归（Ridge Regression），也被称为Tikhonov正则化，是一种线性回归的变体。它通过在普通最小二乘法（OLS）回归中加入L2正则化项来解决多重共线性问题，从而提高模型的泛化能力和鲁棒性。岭回归的核心思想是通过惩罚模型的参数，使得它们保持较小的值，从而减少过拟合的风险。岭回归适用于当特征之间高度相关时（即多重共线性问题），普通的线性回归模型可能会变得不稳定，并且模型的系数可能会变得非常大。岭回归通过加上一个正则化项，约束了模型参数的大小，从而使得模型更加稳健。
PCA（主成分分析）算法的应用场景
最新发布
huanfeng_AI的博客
11-09 205
需要注意的是，PCA并不适用于所有场景。例如，当数据之间存在非线性关系时，PCA可能无法完全揭示数据的内在结构。此外，PCA对初始变量的顺序和标签敏感，不同的变量顺序可能导致不同的主成分结果。因此，在选择数据分析方法时，需要根据具体的数据和任务需求来决定是否使用PCA。
探索App Intents：让你的应用与Siri无缝互动的新方式
jixn的博客
11-09 925
苹果推出了一个新框架——App Intents，使开发者可以在iOS 18.2+、macOS 15.2+等平台上集成Siri和Apple Intelligence，实现对应用内容的读取和操作。App Intents使应用的功能和内容能无缝融入系统体验中，例如Siri、Spotlight搜索、快捷指令和小组件，让用户可以轻松访问应用核心功能，并获得更智能的Siri帮助。：表示应用内容，如照片、联系人或文件。：用户可以对 Siri 发出指令，例如“查找我的航班”或“添加待办事项”，Siri直接与应用交互。
掌握AIStarter新功能，轻松关闭广告享受纯净浏览体验
ai_xiaogui的博客
11-07 390
AIStarter的广告拦截器是一项集成在平台内部的新特性，它允许用户根据自己的喜好设置广告过滤规则。无论是烦人的横幅广告、视频前贴片广告还是弹窗广告，都可以通过简单的设置被有效屏蔽。这项功能不仅提升了用户的浏览效率，还保护了用户的隐私安全。在数字时代，拥有一个清爽无干扰的网络环境对每个人都至关重要。AIStarter的广告拦截器正是为此而设计，它帮助用户夺回了对个人浏览体验的控制权。现在就尝试启用这项功能，开始享受一个更加干净、高效的上网体验吧！不要广告！关闭广告！
一次薅国家超算平台的记录
weixin_55179972的博客
11-07 407
参与 谁是下一个“AI”跃人 -AI体验推介活动，赢取千元算力券！（https://www.scnet.cn/home/subject/modular/index270.html）2. Clone开源的Llama3 Chinese （https://github.com/LlamaFamily/Llama-Chinese）活动名称主题：国家超算互联网「AI跃升季」：谁是下一个“AI”跃人 - AI算力体验活动。其中位置1，2替换为商品基模型和训练出来的微调模型。模型改为商城下载的模型。2、运行的过程记录。
英伟达GTC大会发布AI新成果：GPU、DGX云与AI工厂推动行业跃升
在人工智能行业不断升温的背景下，英伟达于近期召开全球技术大会 (GTC)，推出了一系列针对不同领域的创新产品和服务，包括GPU、DGX云以及AI工厂，这些举措无疑对AI算力和应用的发展产生了深远影响。首先，ChatGPT的...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值