问答题 有一个一阶平稳马尔可夫链X1，X2，……Xr……，各Xr取值于集合A={a1，a2，a3}。已知起始概率p（Xr）为p1=1/2，p2=p3=1/4，转移概率如下。 （1）求（X1，X2，X3）的联合熵和平均符号熵。 （2）求这个链的极限平均符号熵。 （3）求H0，H1，H2和它们所对应的冗余度。

问答题 若有二个串接的离散信道，它们的信道矩阵都是 设第一个信道的输入符号X{a1,a2,a3,a4}是等概率分布，输出符号用Z表示。第二个信道输出用Y表示。求I(X;Z)和I(X;Y)，并加以比较。

问答题 设两连续随机变量X和Y，它们的联合概率密度是均值为零，协方差矩阵为C的正态分布，，在下列几种情况下，计算I(X;Y)： （1）ρ＝1； （2）ρ＝0； （3）ρ＝－1。