吴军-信息论30讲
SIONCIOSC
这个作者很懒,什么都没留下…
展开
-
【信息论】《吴军—信息论30讲》学习笔记(一):冗余度 史记和圣经哪个信息量大
吴军老师根据自己的经验,善用信息冗余,总结如下三点体会:1、讲东西要通过加入一些看似是废话,但是实际上能从侧面诠释你的想法的句子,帮助对方理解你的意思。比如我常说“换句话说”,“比如说”,“从另一方面讲”这样的话,这就是利用信息的冗余便于大家理解。2、讲东西要有一致性,不要补充有可能和主要思想相矛盾的例子,或者和想法无关的冗余信息。3、在我们脑子存储信息时,要进行压缩,这样脑子才能记得...原创 2019-09-04 10:14:24 · 1155 阅读 · 0 评论 -
【信息论】《吴军—信息论30讲》学习笔记(二):信息正交性 在信息很多的情况下如何作决策?
这一讲,吴军老师用告诉你,当你面对信息很多时,如何利用和组合信息,提高自己的决策水平。首先,信息和能量具有一定的相关性,但是它们的性质完全不同,比如信息并不具有守恒的特点。你将一条信息告诉别人,你自己并不损失这条信息。除此以外,不同信息彼此之间的关系,以及使用相同或者不同信息带来的结果,它在这些方面和能量也完全不同。我们今天就从信息和能力的对比出发,谈三个获得有效信息和利用好信息的要点...原创 2019-09-09 10:39:42 · 1141 阅读 · 0 评论 -
【信息论】《吴军—信息论30讲》学习笔记(三):条件熵和信息增益:你提供的信息到底值多少钱?
之前,吴军老师介绍了信息的正交关系,也就是寻找能够互补信息的重要性。之后,又介绍了互信息,讲了两条不同信息之间的相关性。这一讲,我们更加系统地、量化地分析一下,如果别人你提供了一条信息,到底有多大的价值。下面用信息理论对这个问题做一个比较严格的分析。我们假定,股市的涨跌是个随机变量,用X表示,对于她的全部的不确定性,就是X概率分布所对应的的信息熵,通常用H(X)表示。如果你得到了一些内...原创 2019-09-10 10:34:38 · 533 阅读 · 0 评论