信息理论-第一章

去年开始看www.coursera.org上面的Raymond W. Yeung信息理论课程，感觉对现在研究的东西很有用，对特征选择方面的东西都很有帮助，特征是在信息量的处理上面很有帮助。今天开始想写一下，顺便温习一下这方面的东西。

Raymond W. Yeung，The Chinese University of Hong Kong，香港中文大学，

首先简述一下信息理论的背景，主要的文献如下所示：

Founded by Claude E. Shannon (1916-2001)

“The Mathematical Theory of Communication,” 1948

Study fundamental limits in communications: transmission, storage, etc

起源很早确十分有用的信息理论。

维基解密上面的资料：

Wikipedia：

Information Theory
http://en.wikipedia.org/wiki/Information_theory

Claude E. Shannon
http://en.wikipedia.org/wiki/Claude_Shannon

上面的资料主要是讲述的背景，学一下对以后的发展挺有用处的~~

现就这样吧~~~