EPISTIA
.
問いをさがす
学問マップ
わたしの星図
料金
診断する
問いをさがす
学問マップ
わたしの星図
料金
Epistia
/
学問マップ
/
情報理論
方法論
情報理論
Information Theory
「情報」を数量として定義し、伝達と圧縮の限界を定めた学問。
星図のプレビュー
AI
計算機科学
情報理論
確率論
✦ 星図でこの一帯を見る →
最初の1冊
Where to start
インフォメーシ
最初の1冊 その1
『インフォメーション』 — ジェイムズ・グリック
情報という概念の誕生から情報化社会までを描く壮大な通史。
Amazonでさがす →
つながる分野
Connected fields
計算機科学
研究上よくつながる
データ圧縮や通信の限界を定める情報理論は、計算機科学と道具を共有する。
確率論
先に学ぶと理解しやすい
情報量(エントロピー)は確率分布の関数として定義される。
AI
方法論を使う
機械学習の損失関数や表現学習は、情報理論の概念(エントロピー・相互情報量)を使う。
学問マップでこの分野を見る →