一、概念简答题（共 10 题，每题 5 分）
1.简述离散信源和连续信源的最大熵定理。
2.什么是平均自信息（信息熵）？什么是平均互信息？比较一下两个概念的异同之处。
3.解释等长信源编码定理和无失真变长信源编码定理，说明对于等长码和变长码，最佳码的每符号平均码
长最小为多少？编码效率最高可达多少？
4.解释最小错误概率译码准则，最大似然译码准则和最小距离译码准则，说明三者的关系。
5.设某二元码字 C={111000，001011，010110，101110}，
① 假设码字等概率分布，计算此码的编码效率？
② 采用最小距离译码准则，当接收序列为 110110 时，应译成什么码字？
6.一平稳二元信源，它在任意时
间，不论以前发出过什么符号，
都按 发出符号，求和平均符号
熵
7.分别说明信源的概率分布和信道转移概率对平均互信息的影响，说明平均互信息与信道容量的关系。
8.二元无记忆信源，有求：
（1）某一信源序列由 100 个二元
符号组成，其中有 m 个“1”，求其
自信息量？
（2）求 100 个符号构成的信源序列的熵。
9.求以下三个信道的信道容量：
，，
10.
已知
一
（3
，1
，3）卷积码编码器，输入输出关系为：
试给出其编码原理框图。
二、综合题（共 5 题，每题 10 分）
1.二元平稳马氏链，已知 P（0/0）=0.9，P（1/1）=0.8，求：
（1）求该马氏信源的符号熵。
（2）每三个符号合成一个来编二进制 Human 码,试建立新信源的模型，给出编码结果。
剩余23页未读，继续阅读
评论2