时间: 2012-11-4~2013-2
地点: 叁号会所
信息论作为系统科学的一个重要的组成部分,横跨了统计物理、计算机、博弈等多门学科,已经在通信科学、数据压缩、计算科学等领域取得了很大的成功。而且,有可能它将会在未来的复杂系统研究中起到更重要的作用。
熵、互信息、概率、统计、博弈、Kolmogrov复杂度等等迷人的关键词反复在这本书——《信息论基础》
http://book.douban.com/subject/1141201/ 中出现。这本书也被誉为信息论的经典之作。
我们将花几个月的时间(具体时间长度取决于参加人数,和大家的积极程度)的时间一起来阅读这本书,具体章节大概包括:
1、熵与相对熵
2、渐进均分定理
3、随机过程的熵率
4、数据压缩与编码
5、赌博与数据压缩
6、Kolmogrov复杂性
7、信道容量
8、信息论与统计学
9、最大熵