鱼哥好书分享活动第29期：《智能计算系统：从深度学习到大模型（第2版）》带你了解智能计算系统！

“只要你想把大模型做得更好、做得更大、做得更快、做得更省电，你就必须要有系统的人才跟思维。

我们这个领域变化得特别快,教的内容,教的方式,都要不断地变化。如果我们中国的研究者和教育者做得更好一点如果我们在具身智能的大模型上,或者是说在未来终极的通用人工智能上，能做出原创性的、引领性的贡献,也非常非常好的。”

                                                                            ——陈云霁

2020年3月，“智能计算系统”课程的同名教材《智能计算系统》第1版正式出版，至今已加印 7次，被国内超过百所高校使用，受到了众多读者的认同和好评。

时隔四年，以ChatGPT等大模型为代表的生成式人工智能，引领人工智能领域爆发式发展。如果说四年前，业界都认为通用人工智能还是一件很遥远的事情，那么到了今天，GPT的进展让我们都不得不正视这场由大模型引发的通用人工智能革命。图灵奖获得者、深度学习之父 G. Hinton 也说：“这些东西（大模型）与我们完全不同。有时我认为这就像外星人登陆了，而人们还没有意识到。”

人工智能技术不断突破，逐渐深入地赋能千行百业。过去几年，AI从“小模型+判别式”转向“大模型+生成式”，不管是传统的视觉识别、语音识别、文本分类等等，还是如今的文本生成、3D数字人生成、图像生成、语音生成、视频生成，这些任务最终都是需要运行在智能计算系统上。

当硬件的系统能力不能够提升的时候，算法、模型、应用的能力也是不可能获得提升的。超万亿参数的大模型研发，并不仅仅是算法问题，而是囊括了底层庞大算力、网络、大数据、机器学习等诸多领域的复杂系统性工程，需要有超大规模智能计算系统的支撑。

大模型取得巨大进步的一个关键因素是智能计算系统所提供的巨大算力。例如GPT-4 有 1.76 万亿参数，其训练更是使用 2.5 万颗 A100 GPU 运行率近 100 天，花费超过1亿美元，对智能计算系统算力的需求达到了 GPT-3的 67 倍。未来如果还要训练出人脑规模的大模型（100 万亿参数），对智能计算系统算力的需求还将进一步提升。因此，大模型的发展使我们必须重新审视智能计算系统课程的知识体系。

2024年7月，深度学习处理器芯片研究的开拓者陈云霁领衔，中国科学院计算技术研究所、软件研究所的专家学者倾心写就《智能计算系统：从深度学习到大模型第2版》正式出版上市！

第2版教材凝聚着中国科学院计算技术研究所和中国科学院软件研究所多位老师的心血，以大模型为牵引，在保留原有深度学习计算系统精髓的前提下，全面更新各章节的内容与实验力图从各个层面系统讲解如何持续提升智能计算系统的计算能力，为未来更大更通用的模型提供支撑。

内容简介：

• 全面贯穿人工智能整个软硬件技术栈

• 以大模型为牵引，形成智能领域的系统思维

• 前沿研究与技术实践结合，快速提升智能领域的系统能力

第2版的更新内容包括如何构建大模型算法（第2、3章），如何让编程框架支撑海量处理器分布式训练大模型（第4、5章），如何在单个处理器层面实现算力提升（第6、7章），如何面向大模型进行智能计算系统的编程（第8章）。我们还专门增加了第9章，将前面各个章节的串联起来，介绍完整的面向大模型的智能计算系统。

作者简介：

陈云霁 中国科学院计算技术研究所副所长、研究员、博导，处理器芯片全国重点实验室主任，中国科学院大学岗位教授，中国计算机学会体系结构专委会主任。他带领团队研制了国际上首个深度学习处理器芯片“寒武纪1号”，相关成果两获计算机体系结构顶级国际会议最佳论文奖，并已应用在上亿台智能手机和服务器中。他的学术论文受五大洲、三十个国家、数百个知名机构广泛跟踪引用。因此，他被Science杂志刊文评价为深度学习处理器的“先驱”和“引领者”，并获我国处理器芯片领域历史上唯一的国家自然科学二等奖（第一完成人）。他还曾获国家杰出青年科学基金、全国五一劳动奖章、中国青年五四奖章、全国创新争先奖、何梁何利科技创新奖、教育部“青年长江学者”，并被MIT技术评论评为全球35位杰出青年创新者（2015年度）。

李玲 中国科学院软件研究所研究员、博导，CCF高级会员，IEEE Senior Member。研究方向为智能计算。

赵永威 中国科学院计算技术研究所副研究员。研究方向为智能处理器体系结构。

李威 中国科学院计算技术研究所副研究员。研究方向为高性能智能计算系统设计技术

郭崎 中国科学院计算技术研究所研究员。长期从事计算机体系结构及人工智能相关研究。

文渊博 中国科学院计算技术研究所助理研究员。长期从事智能计算系统相关研究。

张蕊 中国科学院计算技术研究所副研究员，研究方向为深度学习和处理器设计智能化

专家推荐：

“开创了我国第一门讲授当代智能计算系统的课程，编写了我国第一本智能计算系统教材，对我国人工智能人才培养产生了广泛而深远的影响”。

—— 陈国良 中国科学院院士

“智能计算系统是支撑大模型等下一代人工智能技

术发展的不可或缺的载体。本书作为我国第一本讲授当代智能计算系统完整技术体系的教材，既有深度也有广度，对于人工智能专业人才培养具有重要价值。”。

—— 郑南宁 中国工程院院士

“对智能计算系统的各层软硬件技术栈的奥妙和相互联系进行精确、扼要的介绍，使学生对系统全貌有一个深刻印象，达到举一反三、触类旁通的效果”。

—— 李国杰 中国工程院院士

“深层次、全栈性地解析了AI的关键理论和技术，又通过一个图像风格迁移的实例生动地演示了AI的实践”。

—— 张亚勤 中国工程院外籍院士

“在智能方向打通了系统与算法，再将这些科研优势辐射到教学”。

—— 孙凝晖 中国工程院院士

“非常适合培养学生的系统思维。到目前为止，国内外少有同类书”。

—— 郑纬民 中国工程院院士

“系统性、全面性在国内外都非常难得，值得每位人工智能方向的同学阅读”。

—— 张宏江 美国工程院外籍院士

“是国内第一本关于深度学习计算系统的书籍”。

—— 周志华 欧洲科学院院士

读者对象：

本书适合作为高等院校计算机、人工智能等相关专业的教材，也适合人工智能领域的科研人员、从业者参考使用。

本书目录：

目录

丛书序言

序言一

序言二

第 2 版前言

第 1 版前言

第 1 章 概述 1

1.1 人工智能1

1.1.1 什么是人工智能 1

1.1.2 人工智能的主要方法1

1.1.3 人工智能的发展历史5

1.2 智能计算系统 8

1.2.1 什么是智能计算系统8

1.2.2 为什么需要智能计算系统8

1.2.3 智能计算系统的发展9

1.3 驱动范例 12

1.4 本章小结 13

习题.14

第 2 章 深度学习基础15

2.1 机器学习 15

2.1.1 基本概念15

2.1.2 线性回归16

2.2 神经网络 19

2.2.1 感知机19

2.2.2 多层感知机 22

2.2.3 深度学习23

2.2.4 神经网络的发展历程24

2.3 神经网络的训练方法 26

2.3.1 正向传播26

2.3.2 反向传播29

2.4 神经网络的设计基础 30

2.4.1 网络的拓扑结构30

2.4.2 激活函数31

2.4.3 损失函数35

2.5 过拟合与正则化 38

2.5.1 过拟合38

2.5.2 正则化39

2.6 交叉验证 44

2.7 本章小结 46

习题 47

第 3 章 深度学习应用48

3.1 适合图像处理的卷积神经网络 48

3.1.1 卷积神经网络的总体结构 49

3.1.2 应用于图像分类的卷积神经

网络.60

3.1.3 应用于图像目标检测的卷积神

XXI

目录大纲：

第一章：概述

人工智能的发展历史及三类主要研究方法；智能计算系统的发展历程及未来展望；智能应用从智能算法到编程再到芯片上运行的过程

第二章：深度学习基础

机器学习和神经网络的基本原理；神经网络的训练过程；提升神经网络训练精度的手段；神经网络的交叉验证等

第三章：深度学习应用

卷积神经网络的图像分类及目标检测算法；循环神经网络；生成对抗网络；大模型的核心技术；量化技术；利用深度学习实现图像风格迁移

第四章：编程框架使用

深度学习编程框架的概念及作用；PyTorch 的编程模型及基本用法；通过驱动范例来介绍如何基于PyTorch 实现深度学习的推理和训练

第五章：编程框架原理

编程框架的设计原则和整体架构；介绍编程框架中的四大核心模块的原理和相关技术，包括计算图构建、计算图执行、深度学习编译以及分布式训练等模块

第六章：面向深度学习的处理器原理

各类智能处理器的执行过程、总体架构和发展历史，通过对这些处理器进行对比，揭示了深度学习处理器达成更高计算效率的基本原理

第七章：深度学习处理器架构

分别从计算、存储和通信三个方面深入探索深度学习处理器的基本硬件模块设计

第八章：智能编程语言

智能计算系统的抽象架构、编程模型、语言基础、编程接口、功能调试、性能调优以及智能编程语言的应用

第九章：大模型计算系统

以大模型计算系统作为驱动范例，将前面各章介绍的智能算法、编程框架、芯片架构、编程语言等内容串联起来，使读者能真正融会贯通，理解如何根据大模型算法特点进行系统软件的设计优化和硬件平台的构建，以高效支持大模型的训练和推理，从而全面地理解智能计算系统

本书可以帮助读者建立对人工智能软硬件技术栈的整体认识，建立智能计算系统设计及应用的知识体系，掌握构建面向大模型的复杂系统或子系统的能力。

喜欢可以购买：

购买链接：https://item.jd.com/14708844.html

赠书抽奖规则:

• 本次送书1~3本
• 活动时间：2024-8-20
• 开奖时间：2024-8-27
• 参与方式：关注鱼影安全公众号后台回复“智能计算系统”即可。
  添加博主wx：添加ly3260344435（主页有）抽奖以小程序为准在粉丝群抽取
  PS：获奖名单活动结束后 粉丝群和 评论区公布