【热点】老黄粉碎摩尔定律被，量产Blackwell解决ChatGPT耗电难题

最新推荐文章于 2024-06-23 22:24:52 发布
最新推荐文章于 2024-06-23 22:24:52 发布
阅读量320 收藏
点赞数 6
分类专栏： 面试题 文章标签： 架构
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_36083245/article/details/139428830
版权

在这里插入图片描述
6月3日，老黄又高调向全世界秀了一把：已经量产的Blackwell，8年内将把1.8万亿参数GPT-4的训练能耗狂砍到1/350；
在这里插入图片描述
英伟达惊人的产品迭代，直接原地冲破摩尔定律；Blackwell的后三代路线图，也一口气被放出。
在这里插入图片描述
如果用老黄的话说，它就是「全世界迄今为止制造出来的最复杂、性能最高的计算机。」

就如网友所言，无所谓，老黄有自己的摩尔定律。

#热点 #猿脑2.0

猿脑2.0
关注
  • 6
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【ChatGPT】OpenAI 团队组织架构和研发技术栈
禅与计算机程序设计艺术
06-11 25
OpenAI作为全球顶尖的AI研究机构，其高效的组织架构和领先的技术积累，为其在AI领域的突破性进展奠定了坚实的基础。展望未来，OpenAI仍将引领AI技术的发展方向，其研究成果也必将深刻影响各行各业的数字化转型。但与此同时，AI技术所带来的安全隐患、伦理困境，也对OpenAI提出了更高的要求，需要在开放创新和审慎管控之间找到平衡。
The Blackwell Companion to Law and Society.pdf
09-23
blackwell丛书之法律与社会部分，非常精彩，喜欢社会学的朋友一定不要错过了。
全球最强GPU芯片已量产、下一代Rubin曝光，老黄继续打破摩尔定律
AI_SHELL的博客
06-03 492
黄仁勋以训练 GPT-4（1.8 万亿参数）为例，八年时间，该模型的能耗从 2016 年的 1000+GWh 下降到了如今的 3GWh，下降了 350 倍。与上一代 Hopper 系统相比，Blackwell 系统的 NVLink 域集成 72 个 GPU、性能提升了 9 倍，NVLink 带宽增加了 18 倍，AI 算力提升了 45 倍，供能提高了 10 倍。NIM 是一种推理微服务，通过以经过优化的容器的形式提供模型，以部署在云、数据中心或工作站上。不过，他并没有透露关于 Rubin 的更多细节。
老黄一口气解密三代GPU！粉碎摩尔定律打造AI帝国，量产Blackwell解决ChatGPT全球耗电难题
weixin_48827824的博客
06-06 490
Hopper和Blackwell系列的推出，标志着英伟达逐渐搭建起完整的AI超算技术栈，包括CPU、GPU芯片，NVLink的GPU通信技术，以及NIC和交换机组成的服务器网络。老黄表示，「数字人类将彻底改变各个行业，ACE提供的多模态LLM和神经图形学的突破，使我们更接近意图驱动计算的未来，与计算机的交互将如同与人类的交互一样自然」。一手硬件，一手CUDA，老黄胸有成竹地穿过「计算通货膨胀」，放出豪言预测道——在不久的将来，每一个处理密集型应用都将被加速，每一个数据中心也肯定会被加速。
老黄一举揭秘三代GPU！打破摩尔定律，打造AI帝国，量产Blackwell解决ChatGPT全球耗电难题
一个热爱ai的研究生
06-08 1031
如下图所示，从深度学习的cuDNN、物理模拟的Modulus、通信的Aerial RAN、基因序列的Parabricks，到量子计算模拟的cuQUANTUM、数据处理的cuDF等领域，都有专用的CUDA软件。一手硬件，一手CUDA，老黄胸有成竹地穿过「计算通货膨胀」，豪言预测——在不久的将来，每一个处理密集型应用都将被加速，每一个数据中心也肯定会被加速。过去的20年里，英伟达一直在研究加速计算。因此，英伟达首创了异构计算，让CPU和GPU并行运行，将过去需要100个时间单位的任务，加速到仅需1个时间单位。
意外！老黄剧透下一代GPU芯片，新演讲又把摩尔定律按在地上摩擦
量子位
06-02 576
白交 衡宇 发自 凹非寺量子位 | 公众号 QbitAI刚刚，中国台湾大学体育场，欢呼阵阵如同演唱会，但这次“摇滚巨星”，其实是英伟达创始人黄仁勋，再次回到学校，带来Computex重磅演讲，以及英伟达的新一代GPU。是的，英伟达新架构Blackwell宣布不过3个月，老黄就把后三代路线图全公开了：2025年Blackwell Ultra，2026年新架构Rubin，2027年Rubin Ultr...
NVIDIA Blackwell Architecture
编码时光
05-31 720
了解技术突破 1、新型人工智能超级芯片 2、第二代 Transformer 引擎 3、Secure AI 4、NVLink 和 NVLink 交换机 5、解压缩引擎 6、可靠性、可用性和可服务性 (RAS) 引擎 GB200 NVL72
黄仁勋重磅演讲：摩尔定律将被打破，机器人新纪元震撼来袭！
边缘计算社区
06-03 31
6月2日，英伟达联合创始人兼首席执行官黄仁勋在Computex 2024（2024台北国际电脑展）上发表主题演讲，分享了人工智能时代如何助推全球新产业革命。以下为本次演讲的要点：①黄仁勋展示了最新量产版Blackwell芯片，并称将在2025年推出Blackwell Ultra AI芯片，下一代AI平台命名为Rubin，2027年推Rubin Ultra，更新节奏将是“一年一次”，打破“摩尔定律”...
意外！老黄剧透下一代GPU芯片，新演讲又把摩尔定律按在地上摩擦 | 最新快讯
www3300300的专栏
06-03 580
是的，英伟达新架构 Blackwell 宣布不过 3 个月，老黄就把后三代路线图全公开了：2025 年 Blackwell Ultra，2026 年新架构 Rubin，2027 年 Rubin Ultra。（还给 token 定了个译名：词元）。刚刚，中国台湾大学体育场，欢呼阵阵如同演唱会，但这次“摇滚巨星”，其实是英伟达创始人黄仁勋，再次回到学校，带来 Computex 重磅演讲，以及英伟达的新一代 GPU。这些团队用上 Isaac，一边提高制造工厂、仓库和配送中心的效率，同时确保人类同事的安全。
Blackwell数据库使用说明.doc
06-03
Blackwell 数据库的学术质量很高，很多是各学科领域内的核心刊物，被 SCI 和 SSCI 收录的核心期刊达到出版期刊总数的近 70%。 Blackwell Synergy 是 Blackwell Publishing 提供的在线期刊服务，涵盖了 Blackwell 的...
BLACKWELL电子期刊华中农业大学图书馆.pptx
10-11
Blackwell 出版社是全球知名的学术出版机构，以其高质量的学术期刊而闻名。这个出版社在各个学科领域都有着广泛的影响，对于学术研究者和学生来说，是获取最新、最权威研究资料的重要来源。以下是关于Blackwell电子...
The Rao-Blackwell theorem
01-07
The Rao-Blackwell theorem The Rao-Blackwell theorem
BLACKWELL电子期刊-华中农业大学图书馆.pptx
12-07
BLACKWELL电子期刊-华中农业大学图书馆.pptx
18、架构-可观测性之聚合度量
qq_29434541的博客
06-17 844
除了常见的应用级和系统级指标，还可以根据具体需求定义和收集自定义的指标数据。例如，在电商系统中，可以收集每分钟的订单数、每秒的支付成功率等业务指标。
构建高效的电商返利系统：架构设计与实现
weixin_44626980的博客
06-21 591
构建高效的电商返利系统需要综合考虑系统的性能、可扩展性和可靠性。通过合理的架构设计和技术选型，可以确保系统在高并发环境下稳定运行。本文详细介绍了用户管理、商品信息管理、订单处理、数据统计和通知系统的设计与实现，希望对大家有所帮助。
为什么分片，尽量选择客户端分片架构
最新发布
靡不有初，鲜克有终
06-23 158
1. **减少网络I/O**：客户端直接与数据存储节点通信，避免了中间件的介入，减少了一次网络I/O操作。然而，客户端分片也有一些潜在的缺点，比如增加了客户端的复杂性，需要客户端处理更多的逻辑，以及可能需要更多的客户端资源来处理分片逻辑。3. **提高灵活性和控制力**：客户端分片允许应用程序开发者根据具体的业务需求来设计分片策略，而不是依赖于中间件提供的分片逻辑。4. **减少延迟**：由于减少了中间件的介入，客户端到数据存储节点的通信路径更短，可以减少整体的网络延迟。
深入理解Open vSwitch（OVS）：原理、架构与操作
CloudJourney的博客
06-21 1381
随着云计算和虚拟化技术的不断发展，OVS将继续发挥其独特的优势，为现代网络架构提供强大的支持。它利用Linux内核的网络栈，通过虚拟化技术，为每个虚拟机提供一个独立的网络接口，从而实现在同一物理主机上的多个虚拟机之间的网络隔离和通信。：在数据中心网络中，OVS可以实现网络的动态管理和优化。通过与OpenFlow控制器的配合，可以实现对网络流量的精细控制、故障恢复和安全防护等功能，提高数据中心网络的可靠性和性能。它利用Linux内核中的网络功能，以及用户空间的应用程序，构建了一个高效、灵活的虚拟交换机。
“湖仓一体架构及其应用”写作框架，系统架构设计师
科技互联网领域深度探索者，乐于分享与写作。
06-21 911
随着5G、大数据、人工智能、物联网等技术的不断成熟，各行各业的业务场景日益复杂，企业数据呈现出大规模、多样性的特点，特别是非结构化数据呈现出爆发式增长趋势。在这一背景下，企业数据管理不再局限于传统的结构化OLTP（On-Line Transaction Processing）数据交易过程，而是提出了多样化、异质性数据的实时处理要求。传统的数据湖（Data Lake）在事务一致性及实时处理方面有所欠缺，而数据仓库（Data Warehouse）也无法应对高并发、多数据类型的处理。因此，支持事务一致性、提供高并
多元回归模型的参考文献
05-14
Wiley-Blackwell. 3. Wooldridge, J.M. (2015). Introductory Econometrics: A Modern Approach, 6th edition. Cengage Learning. 4. Stock, J.H., & Watson, M.W. (2015). Introduction to Econometrics, 3rd ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值