![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
学习笔记
因为有你mory~~
大家好鸭!!!
展开
-
信息论基础学习笔记(零)——通信系统模型及经典信息论
0.1 通信系统模型0.1.1 通信的基本问题 在一点精确地或近似地恢复另一点所选择的消息。0.1.2 通信系统的简单模型0.1.3 通信系统的物理模型0.1.4 通信与信息系统的详细原理图0.1.5 系统中各模块功能0.2 信息论的研究内容 香农最初对“信息”进行定量化研究时是把“信息”限于“通信的消息”,并以此为出发点研究了通信的数学理论,形成了狭义的香农信息论(经典信息论)。0.2.1 狭义信息论的体系结构0.2.2 信息论基础的重要性**...原创 2020-11-16 17:53:56 · 3823 阅读 · 0 评论 -
信息论基础学习笔记(一)——随机变量的信息度量
1.1自信息 香农最初对“信息”进行定量化研究时是把“信息”限于“通信的消息”,并以此为出发点研究了通信的数学理论,形成了狭义的香农信息论。 “信源”,指的是消息的来源。若信源输出的消息是以取值离散的符号形式出现,其不同符号数是有限个,或为可列无限个,则此信源称为离散信源。若输出的消息的取值是连续的,则称其为连续信源。按输出符号之间的依赖关系,也可将信源分为无记忆信源和有记忆信源。 离散信源的通常用随机变量XXX表示,XXX的可能取值,即信源的可能输出的不同符号用集合χ\chiχ表示。如若将抛.原创 2020-11-15 21:22:22 · 546 阅读 · 0 评论