11:02
13
11:02
14
第一章:引论(简介)
一、通信系统模型 二、Shannon信息论的中心问题 三、Shannon信息的概念 四、概率复习内容
11:02
15
一、通信系统模型
信源、信道、信宿 信源是消息的来源, 信道是消息传送媒介, 信宿是消息的目的地。
信息是多样的,客观事物是多种多样的、五花 八门的,事物的状态和变化是多姿多彩、变幻 无穷的,属性不同就出现了不同的信息,需要 给出不同的信息定义,从而可创建不同的信息 理论。
比如说信息的不确定性,引出了概率信息,这 是我们讲的最多的。
再如信息的模糊性,引出了模糊信息和模糊信 息论,这个在70年代末提出来的。
信息论基础
11:02
1
教材
王育民、李晖, 信息论与编码理论 (第2版), 高等教育出版社, 2013.
11:02
2
参考书
Thomas M. Cover, Joy A. Thomas, Elements of Information Theory,2nd ed, WILEY Press, 2006. 阮吉寿 张华 译 信息论基础,机械工业出版社,2007.
11:02
6
信息的度量
信息可以被感知,但是不是所有的信息 都可以定量计数,因此,我们要区分信 息和信息量 。
从数学上来说,关于信息量的定义,大 概有100多种。
如果将信息提升到科学进行研究,必须 要对信息进行定量,给出信息的科学测 度,但是这并不是一件很容易的事情。
11:02
7
信息与信息量
还如信息的量子属性,引出了量子信息和量子 信息论。
11:02
8
信息与信息量