通信原理&信息论 day1：术语；数字系统基本组成；信息量

1.通信的术语

通信的目的：传递消息中包含的信息。
通信系统的目的：克服某种障碍，实现信息高效、准确的传递。
狭义的通信系统：利用电信号和光信号来传递信息的电通信、光通信或电光混合。
信息：消息中包含的有意义的内容，即包含受信者原来不知而待知的有效内容。
消息：信息的物理表现形式
消息是信息的载体，信息是消息的内涵。
形式化：通信的基本任务是在接收端把发送端发出的消息从形式上恢复出来，而对消息内容的理解和判断则不是通信的任务。
非决定论：通信过程传递的消息中所包含的内容对接收者来说事先是无法预料的。
不确定性：收到该消息之前，对其中的内容出现与否具有不确定的因素。

2.数字系统的基本组成

3.信息量，熵，联合熵

关于信息的几点讨论：
（1）消息中所包含的信息量与