问答题
黑白气象传真图的消息只有黑色和白色两种,即信源X={黑,白}。设黑色出现的概率为p(黑)=0.3,白色的出现概率p(白)=0.7。 (1)假设图上黑白消息出现前后没有关联,求熵H(X); (2)假设消息前后有关联,其依赖关系为p(白/白)=0.9,p(黑/白)=0.1,p(白/黑)=0.2,p(黑/黑)=0.8,求此一阶马尔可夫信源的熵H2(X); (3)分别求上述两种信源的剩余度,比较H(X)和H2(X)的大小,并说明其物理意义。
(1)比特/信源符号;(2)由各态历经定理,有,即P(白)=p(白)p(白/白)+p(黑)p(白......
(↓↓↓ 点击下方‘点击查看答案’看完整答案 ↓↓↓)
问答题 一阶马尔可夫信源的状态图如图所示。信源X的符号集为{0,1,2}。 (1)求平稳后信源的概率分布; (2)求信源的熵H∞。
问答题 设是X=X1,X2,...,XN平稳离散有记忆信源,试证明:
问答题 设有一个信源,它产生0,1序列的信息。它在任意时间而且不论以前发生过什么符号,均按p(0)=0.4,p(1)=0.6的概率发出符号。 (1)试问这个信源是否是平稳的? (2)试计算及; (3)试计算H(X4)并写出X4信源中可能有的所有符号。