什么是损失熵、噪声熵？什么是无损信道和确定信道？如输入输出为r*s，则它们的...

问答题什么是损失熵、噪声熵？什么是无损信道和确定信道？如输入输出为r*s，则它们的分别信道容量为多少？

1.问答题 设信源为

试求信源的熵、信息含量效率以及冗余度；求二次扩展信源的概率空间和熵。

2.问答题已知一个高斯信道，输入信噪比（比率）为3。频带为3kHz，求最大可能传送的信息率。若信噪比提高到15，理论上传送同样的信息率所需的频带为多少？

3.问答题 有两个二元随机变量X和Y，它们的联合概率为

定义另一随机变量Z = XY（一般乘积），试计算H（Z）=？

4.问答题居住在某地区的女孩中有25%是大学生，在女大学生中有75%是身高1.6米以上的，而女孩中身高1.6米以上的占总数的一半。假如我们得知“身高1.6米以上的某女孩是大学生”的消息，问获得多少信息量？

5.问答题平均互信息量同信息熵之间满足I（X；Y）=H（X）+H（Y）-H（XY）

6.问答题 二元对称信道的信道矩阵为

，信道传输速度为1500二元符号/秒，设信源为等概率分布，信源消息序列共有13000个二元符号，问：
若信源概率分布为P（0）=0.7，P（1）=0.3，求无失真传送以上信源消息序列至少需要多长时间？

7.问答题 二元对称信道的信道矩阵为

，信道传输速度为1500二元符号/秒，设信源为等概率分布，信源消息序列共有13000个二元符号，问：

试计算能否在10秒内将信源消息序列无失真传送完？

8.问答题 设一线性分组码具有一致监督矩阵

若接收到码字（101001），求出伴随式并给出翻译结果。

9.问答题 设一线性分组码具有一致监督矩阵

写出此分组码的所有码字。

10.问答题 设一线性分组码具有一致监督矩阵

求此分组码的生成矩阵G。