2002年3月英伟达发布核弹GPU与大算力自动驾驶芯片

2002年3月英伟达发布核弹GPU与大算力自动驾驶芯片
英伟达核弹级GPU：800亿晶体管，20块承载全球互联网流量
2022年3 月 22 日，在英伟达 GTC2022 上，英伟达介绍了 Hopper 架构、H100 GPU、元宇宙、新型超级计算机、软件、数据中心等方面的最新进展。
英伟达公司创始人兼 CEO 黄仁勋在本届英伟达 GTC 大会的开幕仪式上，盛赞 AI 技术已经取得“惊人”进展，展望了 AI 与 Omniverse 将如何把真实世界与虚拟世界合二为一。
黄仁勋做出承诺，意欲改造总值达万亿美元规模的多个行业，应对人类社会当前时代下的“重大挑战”。分享了新的时代愿景：希望立足产业规模实现智能创造，并真正将现实与虚拟世界融合起来。
在本届英伟达 GTC 大会上，黄仁勋还介绍了新一代芯片——包括新的 Hopper GPU 架构与 H100 GPU，外加新的 AI 与加速计算软件、以及强大的新型数据中心规模系统。
这一次，由英伟达 Omniverse 实时 3D 协作与模拟平台生成的虚拟环境成了黄仁勋的新舞台，表示“企业客户正积极处理、提炼数据，开发 AI 软件，逐步转化为智能制造商。”当前，AI 科技正“朝着各个方向飞速向前。”
Omniverse 能够将这一切整合起来，加速人与 AI 间的协作、更好地理解现实世界并加以建模，成为新型机器人、即“下一波 AI”的试验场。
在主题演讲开头，画面以飞行视角引领穿越英伟达的全新园区。这段场景完全由 Omniverse 渲染成，在画面中能看到正在研究先进机器人项目各处实验室。
黄仁勋分享了英伟达公司如何与广泛生态系统开展合作，通过助力医疗保健与药物发现来拯救生命、甚至拯救这颗赖以生存的星球。
黄仁勋表示，“科学家们预测，要想有效模拟特定区域内的气候变化，需要一台 10 亿倍于当前水平的超级计算机才能实现。”
“但英伟达决定通过「地球 2 号」（Earth-2，全球第一台 AI 数字孪生超级计算机）向这一挑战发起冲击。发明了新的 AI 与计算技术，希望抢在气候发生不可逆转的破坏之前阻止这一切。”
重磅发布基于 Hopper 架构的新芯片
为了推动这些雄心勃勃的目标，黄仁勋介绍了基于 Hopper 架构的英伟达 H100，号称是“为全球 AI 基础设施打造的新引擎”。
语音、对话、客户服务及推荐系统等 AI 应用，正在推动数据中心设计迎来一波根本性的变化。
黄仁勋表示，“AI 数据中心负责处理大量连续数据，用以训练并改进 AI 模型。输入的原始数据经过提炼，可逐步转化为输出的智能成果，企业利用这些成果建设运营大型人工智能工厂。”
这样的工厂将 24/7 全天候高强度运行。质量层面的任何一点微小提升都将显著改善客户参与度、大大拉升企业利润。

H100 将帮助这些工厂加快发展的脚步。这款采用台积电 4 纳米制程工艺的芯片将容纳有 800 亿个“海量”晶体管。英伟达表示这是目前性能最为强大的 GPU。黄仁勋表示，20 块 H100 GPU 就可承托全球互联网的流量。

黄仁勋表示，“Hopper H100 将实现有史以来幅度最大的代际性能飞跃，大规模训练性能可达 A100 的 9 倍，大型语言模型推理吞吐量更将达到 A100 的 30 倍。”
Hopper 的技术突破，包含新的 Transformer 引擎、能够在不损失准确性的前提下实现 6 倍网络加速性能。
黄仁勋指出，“transformer 模型的训练周期将由几周缩短至数天。” H100 目前已经投入生产，预计从第三季度起正式供货。
黄仁勋公布了 Grace CPU Superchip，这是英伟达首款用于高性能计算的离散数据中心 CPU。包含两个 CPU 芯片，通过每秒 900 GB 的 NVLink 芯片到芯片互连将 144 个计算核心彼此连通，内存带宽则为每秒 1 TB。
“Grace 是一款专为全球 AI 基础设施打造的理想 CPU。”
黄仁勋公布了基于 Hopper GPU 的多款新型 AI 超级计算机，分别为 DGX H100、H100 DGX POD 以及 DGX SuperPOD。
为了将这一切连接起来，英伟达研发的全新 NVLink 高速互连技术将全面覆盖后续推出的所有英伟达芯片，包括 CPU、GPU、DPU 与 SOC。
黄仁勋谈到，英伟达将面向客户与合作伙伴提供 NVLink 以构建配套芯片。“NVLink 将为客户们开启一个充满可能性的新世界，帮助客户利用英伟达平台与生态系统构建起各种半定制化芯片与系统。”
新软件：AI 已经“彻底改变”了软件的面貌
加速计算的成熟为 AI 带来了“惊人”的发展轨迹。
“AI 已经从根本上改变了软件所能实现的效果、以及软件开发的基本方式。”
transformers 开启了自监督学习的大门，消除了传统 AI 对于人工标记数据的高度依赖。结果就是&#