Similar to シャノンの通信路符号化定理
符号間干渉
Intersymbol interference符号語
Code word (communication)ブロック符号
Block codeプロトキン限界
Plotkin bound文法圧縮
Grammar-based code変分メッセージパッシング
Variational message passingラテン方格
Latin squareリー距離
Lee distanceリード・マラー符号
Reed–Muller code群符号
Group codeCommon data model
Common data model位相因子
Phase factorSN比
Signal-to-noise ratio▼-1 trendsエントロピーレート
Entropy rateエントロピック重力
Entropic gravityカルバック・ライブラー情報量
Kullback–Leibler divergence傾向推定
Linear trend estimation結合エントロピー
Joint entropy交差エントロピー
Cross-entropy最小記述長
Minimum description length最小権限の原則
Principle of least privilege最大エントロピー原理
Principle of maximum entropy自己相互情報量
Pointwise mutual information冗長性 (情報理論)
Redundancy (information theory)情報源レート
情報熱
情報量
Entropy (information theory)情報理論上の未解決問題
List of unsolved problems in information theory