某二进制离散信源，1、0发生的概率分别为l／4和3／4，该信源的平均信息量为___________。

19．设某离散平稳信源X，概率空间为

并设信源发出的符号只与前一个相邻符号有关，其联合概率为p(a_ia_j)如下表所示。

求信源的信息熵、条件熵与联合熵，并比较信息熵与条件熵的大小。

求下列计算值： (1)已知二元离散信源具有0、l两个符号，若出现0的概率为1／3，求出现1的自信息量： (2)若某离散信源由0、l、2、3四种符号组成，出现概率为：

求该信源的熵； (3)已知电话信道的带宽是3400Hz，若要求传输6800bps的数据，请计算要求信道的最小信噪比是多少分贝。假设信道中的噪声是加性高斯噪声。

设S为一离散无记忆信源，其符号集合为{0，1}，概率分布为p(0)=0.995，p(1)=0.005。令信源符号序列的长度为n=100，假定对所有只包含3个以下符号“1”的序列编制长度为k的非奇异二进制码。求：

一个离散无记忆信源的字符集为{-5，-3，-1，0，1，2，3)，相应的概率为{0．08、0．2、0．15、0．03、0．12、0．02、0.4}。 (1)设计信源熵H(x)。 (2)设计该信源的哈夫曼(Huffman)编码。

A.0

B.0.25

C.0.5

D.1

某信息源信号共有4种状态，每种状态出现的概率分别为1/4，则某信宿收到该信源的平均信息量(信息熵)是()。

A)1

B)2

C)3

D)4

A.4

B.3

C.2

D.1