题目
熵H(X,Y)称为联合熵,共熵,它表示通信完成之后,观察者对通信系统仍然存在的平均不确定度。A. 正确B. 错误
熵H(X,Y)称为联合熵,共熵,它表示通信完成之后,观察者对通信系统仍然存在的平均不确定度。
A. 正确
B. 错误
题目解答
答案
B. 错误
解析
联合熵(H(X,Y))是信息论中的基本概念,用于衡量两个随机变量X和Y共同的平均不确定性。题目中的关键点在于理解联合熵的定义与应用场景。
- 联合熵的定义:H(X,Y)反映的是通信过程中,发送信号X和接收信号Y之间的共同不确定性,而非通信完成后的剩余不确定性。
- 通信完成后的不确定性:通信完成后,观察者通常已知接收信号Y,此时剩余的不确定性应由条件熵H(X|Y)描述,而非联合熵。
因此,题目中将联合熵与通信完成后的“剩余不确定度”直接对应是错误的。
错误原因分析:
- 联合熵的本质:H(X,Y)描述的是X和Y未观测时的总不确定性,包含两者独立和关联的不确定部分。
- 通信完成后的状态:通信完成后,接收端已获得Y的信息,此时剩余的不确定度应为H(X|Y)(已知Y时X的不确定性),而非联合熵H(X,Y)。
- 混淆概念:题目将联合熵与通信后的剩余不确定度等同,混淆了联合熵与条件熵的定义。