学习方法-学习观（08）信息和熵

系列文章解读&说明：

本系列文章 主要是 对 B站上YJango的《学习观》系列视频的一个解读

---

1 视频链接

本章节 对应 YJango的《学习观》系列视频链接 为：

学习观10 老师，我没有传纸条作弊，我在学习信息论

学习观11 为什么信息还有单位？如何计算信息量？

2 思维导图

因为在第一季中 做思维导图有了相关经验，因此 本次思维导图采用从上而下的设计，因为在做图之前 将第二季 所有的视频全部看了一遍，因此 本次也不需要后期再重构，一气呵成。本章节对应导图如下：

3 感受分享

说明：本章节 需要一定的数学知识 和 物理知识的背景

为什么我们要学习 信息？

《学习观》的核心就是信息。如果想要深刻理解，就不得不更正自己对信息的错误认识。理解信息不单是有益于学习这么简单，生命本身以及整个人类社会的发展的底层都离不开两个概念：信息与能量。这两个概念可以让个体看清发展的走向。当某人能够区分信息和知识，能够从数据中认得信息时，该人看待问题的方式会完全不一样。不管是在数学、编程、写作、演讲、听讲上都可以发生质变。

很多人都是渴望知识的，经常去听课，花钱知识付费。但就拿罗振宇的 4 小时跨年演讲来说，有多少人听完后觉得好有道理，可事后又觉得什么都没学会。拿《学习观》的视频来说，有多少人听完后觉得好有意思，可事后又觉得抓不住核心。但如果理解了信息和知识后，在听讲的过程中就可以在脑中梳理出思维导图，明白哪些话是知识，哪些话是信息，哪些话是说话技巧，哪些话是废话，不必再漫无目的的记笔记，也不必再辛苦的记忆所有内容。

接下来 对本章节 一些基本概念进行说明：

信息和熵的定义？

1. 当一件事情有多种可能情况时，这件事情对某人而言具体是哪种情况的不确定性叫做熵，
2. 而能够消除该人对这件事情不确定性的事物叫做信息。

熵和信息的关系？数量相等，意义相反。获取信息 = 消除熵。 某人对某物的熵（不确定性）相当于水杯，信息相当于水，新填充的水（新信息）要看杯子原来有多少水（已有信息），但水无法溢过杯子（能接收到的最大信息就是该人目前的剩余不确定性）

概率和熵的区别？

概率是某件事情（宏观态）某个可能情况（微观态）的确定性，而熵是某件事情（宏观态）到底是哪个情况（微观态）的不确定性。 概率的输入是常量（微观态），熵的输入是变量（宏观态）。

误区排查：热力学熵 VS 信息熵

牵扯到 热力学熵的一种应用，然而不管考虑的是不是热力学熵，这种描述都是非常具有误导性的。因为热力学熵就是信息熵的特例，如果不能想明白二者的关系，意味着还没搞明白。很多人会觉得这个概念非常难的原因是因为它们反常识，违背你日常生活经验所构建出的模型。多数人都会根据自己已有的经验进行判断，从而产生抵触。但是不要认为自己很笨，因为信息和热力学熵的关系困扰科学家们都足足一百年之久。

最后附上 作者写文章所使用 导图，方便后期继续学习和重构：

思维导图-信息 与 熵-作者版

思维导图-信息为什么有单位？ 以及 信息如何计算？-作者版