- 博客(7061)
- 收藏
- 关注
RSS订阅转载 AI Scaling的神话
截至目前，语言模型越来越大，能力也越来越强，但过去的表现能预测未来吗？一种流行的观点是，我们应该期待当前的趋势继续保持下去，并且出现更多数量级，这最终可能会引领我们实现AGI。本文作者认为，这种观点来自于一系列神话和误解。从表面上看，规模扩展（Scaling）具有可预测性，但这是对研究成果的误解。此外，有迹象表明，LLM开发者已经接近高质量训练数据的极限。而且，模型行业正面临着模型尺寸的强烈下行压...
2024-07-26 17:20:00
转载 万字长文，腾讯、清华等多位生物大模型作者专访，畅谈AI生物学，解析大型细胞模型技术...
来源：ScienceAI编辑：KX大型语言模型（LLM）在自然语言处理和理解领域已取得重大突破。在生物学领域，一些采用类似 LLM 结构的大型细胞模型（Large Cellular Model，LCM）被开发用于单细胞转录组学，比如：scBERT、Geneformer、scGPT、scFoundation 和 GeneCompass。这些模型展示了 LCM 在各种生物任务中的应用潜力，并说明了 L...
2024-07-25 16:39:46
16
转载 机器人初创公司Persona AI “预告”可以扮演多种角色的商用类人机器人
PERSONA AI来源：IEEE电气电子工程师学会供稿：杨泓奕时常看起来，似乎有很多的人形机器人公司，因为这个行业还在发展，有用、可靠和负担得起的人形机器人的潜力是如此巨大，以至于任何能够真正让它们工作的公司都存在着很大的空间。最近加入这一行列的是上个月由Nic Radford和Jerry Pratt创立的Persona AI,该公司于上个月创立，他们比任何人都更了解如何成为一家成功的机器人公司...
2024-07-25 16:39:46
16
转载 两天内，Meta 和 Mistral 两款主流大模型打擂台！已经不仅卷性能了，谁更便宜就用谁？...
来源：AI前线整理：冬梅、核子可乐 Mistral 发布开源旗舰模型，参数更小但性能不打折对于前沿人工智能模型领域来说，这两天可谓热闹非凡，AI 科技竞赛正在以前所未有的速度推进。继 Meta 日前发布全新开源 Llama 3.1 并作为其领先闭源“前沿”模型的替代方案之后，法国 AI 初创公司 Mistral 也摩拳擦掌加入战团。这家初创公司宣布推出其旗舰级开源模型的下一代产品，此模型拥有 1...
2024-07-25 16:39:46
20
转载 ChatGPT在编码方面到底有多好？
GETTY IMAGES来源：IEEE电气电子工程师学会供稿：杨泓奕This article is part of our exclusiveIEEE Journal Watch seriesin partnership with IEEE Xplore.程序员花了几十年时间为AI模型编写代码（https://spectrum.ieee.org/tag/ai-models），现在兜兜转转，AI...
2024-07-24 17:27:57
21
转载 几何朗兰兹猜想被解决！历时30年、证明论文达800余页，中国学者陈麟系主要作者...
来源：量子位 | 公众号 QbitAI明敏 克雷西 发自 凹非寺9位数学家、横跨30余年、5篇论文共计800+页……几何朗兰兹猜想，终于被证明！它是朗兰兹纲领的几何化版本。朗兰兹纲领被视为现代数学研究中最大的单项项目，被称为“数学的大统一理论”。它提出数论、代数几何、群表示论这三个独立发展的数学分支之间其实密切相关。费马大定理被完全证明，就得益于对朗兰兹纲领的应用。安德鲁·威尔斯（Andrew W...
2024-07-24 17:27:57
11
转载 最强模型 Llama 3.1 如期而至！扎克伯格最新访谈：Llama 会成为 AI 界的 Linux
这是开源 AI 的里程碑时刻。文 | 王启隆出品丨AI 科技大本营（ID：rgznai100）本文为 CSDN 编辑整理，未经授权，禁止转载。今天，Meta AI 的最新最强模型 —— Llama 3.1 如期而至。不仅刷新了开源 AI 模型的天花板，还顺带把闭源的也一并超越了。但是，守约的可不止是 Llama 3.1，还有小扎关于本次发布的最新采访。在放出采访全文前，我们还是先来了解一下这次的发...
2024-07-24 17:27:57
31
转载 神经网络也有空间意识！学会在Minecraft创建地图，登上Nature子刊
来源：机器之心报道机器之心编辑部这是人类首次证明神经网络可以创建自己的地图。想象一下，你身处一个陌生的小镇，即使一开始周围的环境并不熟悉，你也可以四处探索，并最终在大脑中绘制出一张环境地图，里面包含建筑物、街道、标志等相互之间的位置关系。这种在大脑中构建空间地图的能力是人类更高级认知类型的基础：例如，有理论认为，语言是由大脑中类似地图的结构编码的。然而， 即使是最先进的人工智能和神经网络，也无法凭...
2024-07-23 17:28:07
18
转载 强过「黄金标准」，快3,500倍，成本低10万倍，物理建模融合AI，谷歌天气模型登Nature...
将 ScienceAI设为星标第一时间掌握新鲜的 AI for Science 资讯编辑 | KX地球正以前所未有的方式变暖，但气温升高对我们的未来意味着什么尚不完全清楚。全球哪些地区将面临长期干旱？大型热带风暴将使哪些沿海地区的洪灾更加频繁？为了回答这些问题，科学家需要能够准确预测地球气候。现在，Google Research 研究团队提出一种将传统的基于物理建模与 ML 相结合的新方法——N...
2024-07-23 17:28:07
20
转载 “安全智能”的背后，Ilya 究竟看到了什么？
作者| 李维 高佳当 Ilya Sutskever 离开 OpenAI重归大众视野，带着他名为SSI（Safe Superintelligence Inc.)的新公司。这一举动惊讶之余又在意料之中——Ilya 直接跳过 AGI ，直指SSI （Safe Superintelligence）。他笃定表示：“超级智能已近在咫尺，建立安全的超级智能（SSI）是我们这个时代最重要的技术问题...
2024-07-22 15:00:26
23
转载 全球生成式人工智能（GenAI）成果公布情况分析报告
来源：三思派生成式人工智能（Generative AI）是人工智能领域的一个前沿分支，以数据驱动的方式，利用大模型在大数据集上进行大规模学习，通过识别数据中的模式和关系以创造新内容的人工智能技术，为一系列工业和应用提供动力。由于其独特的创造能力，引起了学术界和工业界的广泛关注。随着生成式AI技术的快速发展，涉及的专利和论文数量也呈爆发趋势。本文基于专利和论文公开现状，就全球范围内生成式AI技术的最...
2024-07-22 15:00:26
104
转载 Google DeepMind 最新研究：搞定这三个任务？人类不行，AI 也不行
撰文 | 赵雅琦前言人工智能（AI）并非完美的推理者，即使是当前大热的语言模型（LMs），也同样会表现出与人类类似的错误倾向，尤其是出现显著的“内容效应”（Content effects）——人们在处理与已有知识或信念相符的信息时，推理更加准确和自信，而在处理与这些知识或信念相悖的信息时，推理可能会出现偏差或错误。这一结论来自 Google DeepMind 团队近期发表的一篇研究论文。人类存在两...
2024-07-22 15:00:26
25
转载 Ilya Sutskever 离职后首次采访：个人经历，Scaling Laws，AI幻觉
来源：AI寒武纪Ilya Sutskever自从 OpenAI 赶走 Sam Altman 后首次接受播客采访，他提到了 AI 和深度学习的过去、现在和未来。他回顾了他从 17 岁起与 Jeff Hinton 的合作，如何通过卷积神经网络取得突破，以及 GPT 项目如何从自我监督学习和 Transformer 模型中获益。他还探讨了大规模语言模型的局限性和可能的解决方案，尤其是关于模型“幻觉”的...
2024-07-21 18:43:49
28
转载 从 OpenAI 收购实时分析数据公司看未来数据库长什么样？
来源：AI前线作者：冬梅前不久，OpenAI 宣布收购了一家以数据索引及查询功能而闻名的实时分析数据库 Rockset。消息一出，数据库领域和 AI 圈一片哗然。据悉，Rockset 成立于 2016 年，创始团队成员大多来自 Facebook，还有几位成员来自谷歌、雅虎、甲骨文和 VMware 等公司，尤其是 Rockset 的联合创始人 & CTO Dhruba Borthakur，他...
2024-07-21 18:43:49
34
转载 谈生命科学等领域原创性基础研究成果的获得与评价 | 科技导报
来源：科技导报本文通过生命科学领域的多个案例，阐述了基础研究是以认识自然本质并获得全新知识为宗旨、由人类好奇心而非社会需求所驱动；获得和评价原创性科学成果一直以来是科学家个体和科学共同体所关注的重要内容；但是，鉴于科学探究过程的混乱性和非线性本质，使获得与评价原创性研究成果皆非易事。特别强调了科学家的跨学科视野和高深理论修养对获得原创成果、辨别可能被忽略的意外发现的重要性；同时，也强调了原创成果需...
2024-07-21 18:43:49
25
转载 Nature、Science首页推荐！北航发布世界上最轻、最小的太阳光驱动微型飞行器！...
来源：机器人大讲堂近日，中国科学家自主研发成功世界上迄今最轻、最小的太阳光驱动微型飞行器——静电飞行器(CoulombFly)。 这是飞行器领域中国科学家自主研发成果首次在顶刊《nature》发表！顶刊《Science》也在官网首页推荐了这项成果。该项研究成果来自北京航空航天大学（以下简称“北航”）能源与动力工程学院的研究团队，该飞行器翼展20cm，重4.21g，...
2024-07-20 17:58:41
34
转载 【阿姆斯特丹博士论文】以实体为中心的神经模型用于自然语言处理
来源：专知这篇论文探讨了如何通过将实体信息纳入神经网络模型来增强自然语言理解。它解决了三个关键问题：利用实体进行理解任务：本文引入了Entity-GCN模型，该模型在一个图上执行多步推理，其中节点代表实体提及，边代表关系。这种方法在一个多文档问答数据集上取得了最先进的结果。使用大型语言模型识别和消歧实体：该研究提出了一种新颖的系统，通过逐字生成实体名称来检索实体，克服了传统方法的局限性，并显著减少...
2024-07-20 17:58:41
24
转载 OpenAI凌晨突发「最具性价比」模型 GPT-4o mini，GPT-3.5 Turbo 已成过去式
来源：学术头条今天凌晨，OpenAI 突然发布了他们的「最具性价比」的新一代模型 GPT-4o mini。据介绍，GPT-4o mini 将取代 GPT-3.5 Turbo，立即在 ChatGPT 免费上线，其在 MMLU 上的得分率为 82%，在 LMSYS 排行榜上的聊天偏好方面优于 GPT-4。GPT-4o mini 不仅性能更优，价格也比 GPT-3.5 Turb 便宜了 60%，每百万输...
2024-07-19 12:08:12
26
转载 ML如何推动结构生物学的发展？哈佛科学家用AI在最小尺度上研究人类发育
来源：ScienceAI编辑：白菜叶对于结构生物学家 Lucas Farnung 来说，没有比单个受精卵如何发育成一个功能齐全的人类更令人着迷的问题了。他正努力在最小尺度上研究这一过程：数万亿个原子必须同步工作才能实现这一过程。「我看不出解决 5,000 块拼图和我们在实验室进行的研究有什么大区别。」哈佛医学院布拉瓦尼克研究所（Blavatnik Institute at Harvard Medi...
2024-07-19 12:08:12
27
转载 一位物理学家的概率观
来源：赛先生、《概率论沉思录》作者：廖海仁导读：他是圣路易斯华盛顿大学和斯坦福大学教授，他的博士论文导师是著名物理学家、1963 年诺贝尔物理学奖得主尤金·维格纳，他在物理学上做出了突出贡献，他发表的演讲“一鸣惊人”，改写了教科书的观点。但是，他毅然选择了概率论，并且在该领域中进行了长达40年的持续探索与思考。最终写成《概率论沉思录》，一部被无数人奉为神作的教材。一位物理学家的概率观20世纪70年...
2024-07-18 17:58:23
22
转载 入门必读！写给初学者的人工智能简史！
最近这两年，随着AIGC大模型的崛起，整个社会掀起了一股强劲的AI浪潮。人们在关注AI，企业在拥抱AI，资本在追逐AI。凡是和AI有关的概念，都会吸引大量的目光。那么，AI是如何一步一步走到今天的呢？它经历了哪些发展阶段，又发生过哪些精彩的故事？今天这篇文章，我们就来仔细回顾一下，人类AI的发展历程。█ 萌芽阶段人类对人造智能体的追求和畅想，最早可以追溯到古希腊时代。在古希腊神话中，火与工匠之神赫...
2024-07-18 17:58:23
34
转载 OpenAI凌晨发布新研究成果！证明者和验证者无限套娃，大模型黑盒变可解释又近一大步！...
夕小瑶科技说 原创作者 | 付奶茶昨天凌晨，OpenAI发布了一项名为Prover-Verifier-Games（证明者-验证者博弈）的新研究！这项研究的目的是确保语言模型生成的文本易于理解，以提高它们在处理复杂任务（如解决数学问题）时的实用性。OpenAI的研究人员认为，仅仅为了得到正确答案而优化强大模型的解题过程，可能会使生成的解决方案变得难以理解。而且在人类评估中，这样高度优化的解决方案甚至...
2024-07-18 17:58:23
29
转载 Nature Medicine：“小世界增强”落地级医学大模型推向临床试验
来源：原文链接：https://www.nature.com/articles/s41591-024-03148-7以大模型为代表的生成式人工智能，拥有强大的知识编码、文本理解、推理能力，迅速成为数字化和智能化的新型技术基座，有望推动新一轮的医学人工智能革命，对科学和社会产生深远的影响。现有医学大模型处于快速变革和更新迭代的关键时期，面对场景特异知识缺乏、生成内容安全性不足等挑战。医学大模型的前瞻...
2024-07-17 19:25:54
21
转载 腾讯首席科学家张正友：仅把大模型塞进机器人，产生不了真正的具身智能
张正友腾讯首席科学家、腾讯Robotics X实验室主任来源：腾讯研究院为深入探讨AI时代的人机关系，引领社会共同思考人机共生时代的经济发展机遇与社会应对策略，腾讯研究院联合前海国际事务研究院、青腾、香港科技园公司等机构举办“AI时代的人机关系展望”论坛，这也是“人工智能+社会发展系列高端研讨会”的第二期。论坛上，腾讯首席科学家、腾讯Robotics X实验室主任张正友在“具身智能的一些挑战和...
2024-07-17 19:25:54
34
转载 【综述专栏】大型视觉语言模型攻击综述：资源、进展与未来趋势！
来源：人工智能前沿讲习在科学研究中，从方法论上来讲，都应“先见森林，再见树木”。当前，人工智能学术研究方兴未艾，技术迅猛发展，可谓万木争荣，日新月异。对于AI从业者来说，在广袤的知识森林中，系统梳理脉络，才能更好地把握趋势。为此，我们精选国内外优秀的综述文章，开辟“综述专栏”，敬请关注。链接：https://arxiv.org/abs/2407.07403近年来，随着大型模型的显著发展，大型视觉-...
2024-07-17 19:25:54
34
转载 「13.11＞13.8」冲上热搜，一道题让人类AI集体降智？所有LLM致命缺点曝光
来源：机器学习研究组订阅13.8和13.11哪个大？这个问题，居然难倒了一票人类。前两天，某知名综艺再次喜提热搜。只不过，这次是因为有一堆网友提出质疑，认为13.11%应该比13.8%大。是只有人类这么蠢吗？AI2的研究员林禹臣发现这个现象后，用大模型试了一把，结果出人意料——AI居然也不行？GPT-4o斩钉截铁地表示：13.11比13.8大。理由如下：虽然13.8看起来更大，因为它小数点后的数字...
2024-07-17 19:25:54
46
转载 OpenAI 提出 AGI 五级标准，自认为接近解决人类水平问题
来源：APPSO最近，OpenAI 向公众披露了其对 AI 发展阶段的界定标准。据彭博社报道，OpenAI 提出了一套支持「自定义」AI 进化等级的分类系统，以此来帮助人们更清晰地理解关于 AI 的安全和未来发展。OpenAI 发言人指出，该分级系统被划分为从能够与人类进行基本对话的人工智能（Level 1）开始，一直到能够独立完成组织任务的高级人工智能（Level 5）。具体等级如下：第一级(L...
2024-07-16 17:16:45
64
转载 对儿童的脑成像研究披露，生物性别和认知性别与不同的脑网络模式有关
点击上方蓝色字，关注我们根据一项涉及4,757名美国儿童的功能性脑成像数据的新研究披露，不同的脑网络设置与年幼群体的生物学性别和自我认同的性别有关。该研究发表于Science旗下开放获取期刊Science Advances。这些发现或可帮助指导对各种脑部疾病进行更为细致的研究，其中包括许多在患病率、起病和临床表现上呈现基于性别的具有显著差异的疾病。研究作者ElvishaDhamala和同事写道：...
2024-07-15 16:28:40
19
转载 模拟微观世界：从薛定谔方程到大原子模型
|作者：张林峰1,2,† 王涵3,4,††(1 北京科学智能研究院)(2 北京深势科技有限公司)(3 北京应用物理与计算数学研究所 计算物理全国重点实验室)(4 北京大学工学院 应用物理与技术研究中心)本文选自《物理》2024年第7期摘要随着人工智能技术的飞速发展，其与物理建模的结合为微观尺度的科学研究带来了革命性的工具。文章介绍了从薛定谔方程出发的量子力学近似求解方法到大原子模型(LAM)...
2024-07-15 16:28:40
30
转载 大国智慧｜7千字全文读懂张钹院士关于人工智能的两条路径、三个阶段、四个步骤...
人工智能GhatGPT只是工具来源：信息安全与通信保密杂志社（转载请注明来源）编辑：数据君2024年4月，中国科学院院士、清华大学计算机系教授、清华大学人工智能研究院名誉院长张钹，做客清华大学“人文清华讲坛”，以《走进“无人区”，探索人工智能之路》为题做了一场演讲。张钹院士从人工智能的两条路径、人工智能的三个阶段、深度学习的不安全性、迈向通用人工智能的四个步骤、基础模型的三大出路等方面，娓娓道来...
2024-07-15 16:28:40
42
转载 OpenAI被举报：非法限制员工披露AI安全风险
来源：量子位 | 公众号 QbitAI鱼羊 发自 凹非寺OpenAI正式被举报了。《华盛顿邮报》爆料，OpenAI用霸王条款封员工嘴这事儿，已经被人告到了美国证券交易委员会（SEC）。举报信长达7页，信中称，OpenAI在员工揭露AI安全风险的道路上，设置了非法限制。具体来说，就是让员工们签署了“过于严格”的就业、离职和保密协议：这些协议禁止员工和投资者就证券违规行为和SEC进行沟通，并要求员工将...
2024-07-14 17:05:25
31
转载 美国计算机社区联盟发布新版机器人路线图
2024年5月，美国计算机社区联盟（CCC）发布第五版《美国机器人路线图：机器人让明天更美好》（以下简称“路线图”），分析了机器人在人工智能（AI）具身、劳动力、数字经济、人口结构、可持续发展、全球化等六方面的大趋势，总结了在制造业回流、即时经济（The “now” economy）、养活世界、老龄化社会、住房和基础设施、可持续发展、拓展疆域（Expanding Frontiers）等七方面的社会...
2024-07-14 17:05:25
32
转载 哈佛DeepMind开辟「虚拟神经科学」新领域！在世界模拟器驯养「赛博老鼠」
来源：脑机接口社区人类和动物能够轻松灵活地移动，这是一种进化奇迹，目前还没有任何机器人能够完全模仿这种能力。如何能让机器人变得更加敏捷？科学家为了解决这个问题，选择从动物身上寻找答案，又开始用小白鼠做起了实验——毕竟成年老鼠的智力与8岁儿童相当，而且它们四肢相当灵活，对自己的身体有着精妙的控制能力。如果能通过老鼠破解大脑控制运动的密码，建立一个将控制原理与行为动物的神经活动结构联系起来的模型，那就...
2024-07-14 17:05:25
27
转载 EUV光刻，新里程碑
来源：半导体行业观察在进入High NA EUV光刻时代的前夕，imec计算技术与系统/计算系统扩展高级副总裁Steven Scheer谈到了ASML-imec联合高NA EUV光刻实验室对半导体行业的意义。Steven Scheer表示：“位于荷兰费尔德霍芬的 ASML-imec High NA EUV 联合光刻实验室的开业，标志着High NA EUV 大规模生产应用准备工作取得里程碑式进展。...
2024-07-13 16:55:42
49
转载 OpenAI Lilian Weng万字长文解读LLM幻觉：从理解到克服
来源：机器之心报道编辑：Panda WLilian Weng 出品，必是精品。人会有幻觉，大型语言模型也会有幻觉。近日，OpenAI 安全系统团队负责人 Lilian Weng 更新了博客，介绍了近年来在理解、检测和克服 LLM 幻觉方面的诸多研究成果。Lilian Weng，中文名翁丽莲，是 OpenAI 安全系统团队负责人。她 2018 年加入 OpenAI，参与了 GPT-4 项目的预训练、...
2024-07-13 16:55:42
32
转载 韦伯太空望远镜一波实拍图像来袭，感受宇宙之美
来源：科学剃刀此版本包含来自美国宇航局钱德拉 X 射线天文台和詹姆斯韦伯太空望远镜的四张不同的合成图像，以二乘二网格呈现。图片来源：钱德拉 X 射线中心是时候以光为高速公路进行一次宇宙公路旅行了，并参观太空中的四个令人惊叹的目的地。这次太空之旅的交通工具是美国宇航局的钱德拉X射线天文台和詹姆斯韦伯太空望远镜。罗蛇夫座。图片来源：X 射线：NASA/CXC/MIT/C. Canizares；工程师...
2024-07-12 17:17:36
56
转载 清华类脑计算模型登Nature子刊，受大脑启发的人工树突网络，实现高能效AI
来源：ScienceAI编辑：KX5 月 30 日，清华大学类脑计算研究中心施路平团队，研发出全球首款类脑互补视觉芯片「天眸芯」，研究成果登上 Nature 封面。近日，该团队推出一种新的神经形态计算架构，即类脑神经计算模型「Dendristor」。「Dendristor」旨在复制突触的组织（即神经元之间的连接）和树突的树状结构（即从神经元体延伸出来的突起）。这种创新的树突网络模拟了树突状结构及...
2024-07-12 17:17:36
64
转载 击败人类又怎样？“超人”AI简直不堪一击？研究发现：ChatGPT等大模型也不行...
来源：学术头条撰文：田小婷前言当前，关于“超人”人工智能（superhuman artificial intelligence）的讨论正变得愈发热烈。然而，或许只需要一点点“对抗性攻击”，那些可以轻松击败人类冠军的 AI 系统（如 AlphaGo、KataGo 等），便会变得不堪一击。而且，这种脆弱性不仅限于围棋 AI，也可能扩展到 ChatGPT 等聊天机器人背后的大语言模型。更关键的是，这一问...
2024-07-12 17:17:36
40
转载 生成式AI之父Jürgen Schmidhuber：机器学习编年史与宇宙未来丨智源独家
来源：智源社区导读在 2024 年智源大会的特邀报告环节，阿卜杜拉国王科技大学 (KAUST) 人工智能研究所所长、瑞士人工智能实验室 IDSIA 科学主任、LSTM 作者、现代人工智能之父 Jürgen Schmidhuber 从编年史的角度讲述了现代人工智能的发展、其历史背景及其对宇宙未来的预期影响。1990-91年被誉为AI发展的“奇迹之年”，正是在此期间，Jürgen 引入了生成对抗神经网...
2024-07-11 17:11:20
34
转载 今日《自然》：首次看清！阿尔茨海默病关键病理蛋白在人脑里的高清图像
来源：药明康德内容微信团队编辑 ：药明康德内容团队早在一百多年前，当阿洛伊斯·阿尔茨海默（Alois Alzheimer）医生首次描述他在患者大脑中观察到的病变时，就注意到了光学显微镜下看到的蛋白沉积。如今，在以阿尔茨海默医生命名的神经退行性疾病——阿尔茨海默病（AD）中，β淀粉样蛋白在脑细胞间隙中形成的斑块，以及tau蛋白在脑细胞内形成的神经原纤维缠结，被认为是标志性的两个病理特征。▲β淀粉样...
2024-07-11 17:11:20
35
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人