463
个编辑
更改
→条件熵与联合熵的关系 Relation to conditional and joint entropy
因为<math>\operatorname{I}(X;Y)</math>是非负的，因此<math>H(X) \ge H(X|Y)</math。这里我们给出了联合离散随机变量情形下结论<math>\operatorname{I}(X;Y)=H(Y)-H(Y|X)</math>的详细推导过程：
因为<math>\operatorname{I}(X;Y)</math>是非负的，因此<math>H(X) \ge H(X|Y)</math>。这里我们给出了联合离散随机变量情形下结论<math>\operatorname{I}(X;Y)=H(Y)-H(Y|X)</math>的详细推导过程：