情報理論

情報理論 (information theory) †

通信や符号化の理論であったが，確率を扱うという意味で統計学とは仲間であり，特に最近はその関係が重要になってきている．

-- あかほ

関連項目 †

• information theory
   
• エントロピー
• 相互情報量
• 情報量
• データ圧縮
• 通信路
• 最大エントロピー
• レート歪み理論
• 多端子情報理論
• 確率的コンプレクシティ?
   
• 検索:情報理論

リンク集 †

• 情報理論と統計科学 @伊庭幸人
   
• Wikipedia:Information_theory

関連文献 †

• 定番教科書 T.M.Cover: Elements of Information Theory, Wiley ISBN: 0-471-06259-6
  GoogleScholarAll:Elements of Information Theory
  Amazon.co.jpへのリンク：&amazon(0471062596);
• 学習とのからみ
  Book/Information Theory, Inference, and Learning Algorithms
• 日本語 韓，小林：情報と符号化の数理，培風館 ISBN: 4-563-00599-1
  GoogleScholarAll:情報と符号化の数理
  Amazon.co.jpへのリンク：&amazon(4563005991);
• Book/Pattern Recognition and Machine Learning 1.6節