课程

EE 276: Information Theory

系统介绍熵、相对熵、互信息,以及数据表示、压缩、通信与推断中的信息度量。

Tsachy Weissman · 2026 · Stanford University

阅读前提

教材中的引用位置

  1. M11 · 第 2 章 凸集、凸函数与次梯度
  2. M11 · 第 4 章 约束优化、KKT 条件与对偶性
  3. M11 · 第 5 章 熵、互信息与散度
  4. M11 · 第 6 章 最优化与信息论综合复习

官方来源