通信原理——Chapter1
- 格式:ppt
- 大小:1.81 MB
- 文档页数:53
《通信原理》习题参考答案第一章1-1. 设英文字母E 出现的概率为0.105,x 出现的概率为0.002。
试求E 及x 的信息量。
解: )(25.3105.01)(log 2bit E I ==)(97.8002.01)(log 2bit X I == 题解:这里用的是信息量的定义公式)(1log x P I a =注:1、a 的取值:a =2时,信息量的单位为bita =e 时,信息量的单位为nita =10时,信息量的单位为哈特莱2、在一般的情况下,信息量都用bit 为单位,所以a =21-2. 某信息源的符号集由A ,B ,C ,D 和E 组成,设每一符号独立出现,其出现概率分别为1/4,1/8,1/8,3/16和5/16。
试求该信息源符号的平均信息量。
解:方法一:直接代入信源熵公式:)()()()()(E H D H C H B H A H H ++++=516165316163881881441log log log log log 22222++++=524.0453.083835.0++++= 符号)/(227.2bit =方法二:先求总的信息量I)()()()()(E I D I C I B I A I I ++++= 516316884log log log log log 22222++++= 678.1415.2332++++= )(093.12bit =所以平均信息量为:I/5=12.093/5=2.419 bit/符号题解:1、方法一中直接采用信源熵的形式求出,这种方法属于数理统计的方法求得平均值,得出结果的精度比较高,建议采用这种方法去计算2、方法二种采用先求总的信息量,在取平均值的方法求得,属于算术平均法求平均值,得出结果比较粗糙,精度不高,所以尽量不采取这种方法计算注:做题时请注意区分平均信息量和信息量的单位:平均信息量单位是bit/符号,表示平均每个符号所含的信息量,而信息量的单位是bit ,表示整个信息所含的信息量。