情報理論の基礎

書影

SGCライブラリ  37

臨時別冊・数理科学2005年1月

情報理論の基礎

情報と学習の直観的理解のために
定価:
1,781
(本体:1,619円+税)
難易度:入門

発行日:2005年1月14日

発行:サイエンス社

ISBN:4910054700152

サイズ:並製B5

ページ数:152ページ

在庫:品切れ

内容詳細

情報理論は理工学,社会科学諸分野の基礎数理として極めて重要である.本書は,その基礎を,主として学習理論と関連させながら明解に解説している.

目次

第1章 はじめに
1.1 情報とは何だろう?
1.2 学習とは何だろう?
1.3 確率変数としての情報の記述
1.4 確率モデルのいろいろ

第2章 情報理論の基礎事項
2.1 情報源
2.2 通信路
2.3 符号化
2.4 情報量

第3章 情報幾何の考え方
3.1 確率分布の空間
3.2 KL-情報量
3.3 “まっすぐな”線と“平らな”面
3.4 直交葉層化と射影

第4章 符号化と種々の情報量
4.1 情報源符号化
4.2 通信路符号化
4.3 連続情報の離散化

第5章 モデル選択
5.1 モデル選択の考え方
5.2 推定量のばらつき
5.3 AICの考え方
5.4 MDLの考え方
5.5 AICとMDLに関する補足
5.6 リサンプリング

第6章 混合モデルとアルゴリズムの幾何学的理解
6.1 混合によるモデルの拡大
6.2 EMアルゴリズム
6.3 ブースティング
6.4 バギング

付録A 確率論の基礎

関連図書

索引


サポート情報

関連書籍

組合せ最適化への招待

垣村尚徳

2,640円(税込)

中級
超対称性の破れ

大河内豊

2,465円(税込)

上級
情報幾何学の新展開

甘利俊一

2,852円(税込)

中級