跳到内容
从一个困惑开始

你想弄懂什么?

找到答案,看到讲解发生的那一刻,再顺着概念继续探索。

← 概念导览

关于「互信息在 X 和 Y 中是对称的吗?」

2 个关键词匹配

正在理解你的问题,下面的搜索结果可先查看。

认识概念

↗

是的,互信息是完全对称的。公式 I(X;Y)=I(Y;X)I(X;Y) = I(Y;X) 成立。

适用条件:适用于定义互信息的任意一对随机变量 XX 和 YY。

认识概念

↗

在概念上,这个公式将互信息识别为实际联合分布 p(x,y)p(x,y) 与独立参考分布 p(x)p(y)p(x)p(y) 之间的库尔贝克-莱布勒(KL)散度。它衡量了实际联合分布偏离纯粹独立性的程度。

适用条件:显示的推导适用于使用概率质量函数的离散分布。;比率形式要求在求和支持集上 p(x,y)>0p(x,y)>0 且 p(x)p(y)>0p(x)p(y)>0。