条件付エントロピー の変更点

• 追加された行はこの色です。
• 削除された行はこの色です。
• 条件付エントロピー へ行く。

* 条件付エントロピー (conditional entropy) [#f4cb2598]

\(x\) と \(y\) の分布が分かっていて最適な符号化をした場合に，\(y\) が分かっているときの \(x\) の平均符号長．
\[H(x|y)=H(x,y)-H(y)=-\sum_y\Bigl(\Pr(y)\sum_x \Pr(x|y)\log\Pr(x|y)\Bigr)\]

> -- しましま

**関連項目 [#c0d85d51]

//英語や同義語のあとに，#brで区切って関連する項目をリストしてください．

-[[conditional entropy]]
#br
-[[情報量]]
-[[エントロピー]]
-[[同時エントロピー]]
-[[相互情報量]]
#br
-[[検索:条件付エントロピー]]

**リンク集 [#a5ccbb16]

//関連するWWW資源があればリンクしてください．

-[[Scholarpedia:Entropy#Conditional_entropy]]
-[[Wikipedia:Conditional_entropy]]
-[[PlanetMath:ConditionalEntropy]]

**関連文献 [#neae1596]

//この%項目%に関連する書籍や論文を紹介してください．