
信息论不仅奠定了现代通信、网络技术的理论基础,还在大数据分析、生物信息学、经济学等领域不断发掘新的应用。 本课程使用VR实景拍摄。
开设学校:清华大学;学科:工学、
信息论不仅奠定了现代通信、网络技术的理论基础,还在大数据分析、生物信息学、经济学等领域不断发掘新的应用。 本课程使用VR实景拍摄。
-课程VR视频宣传片
--video
-课程概述
--课程概述
-信息是什么
--信息是什么
-信息论产生的背景
--信息论产生的背景
-信息论的贡献
--信息论的贡献
-香农其人其事
--香农其人其事
-Lecture0
--Lecture0
-信息熵
--随机变量的自信息
--信息熵的定义
--联合熵
--条件熵
-- 信息熵的性质
-信息熵--作业
-互信息
--互信息的定义
--不等式证明
--互信息的基本性质
-第一章 信息论的基本概念--互信息
-鉴别信息
--鉴别信息
-鉴别信息--作业
-熵、互信息、鉴别信息的凸性
--凸集与凸函数
--鉴别信息的凸性
--熵的凸性
--互信息的凸性
-熵、互信息、鉴别信息的凸性--作业
-Fano不等式与数据估计
-连续随机变量的熵和互信息
-连续随机变量的熵和互信息--作业
-Lecture_1
-渐进等同分割性质
--渐进等同分割性质
-定长编码定理
--定长编码定理
-定长编码定理--作业
-码的类型
--码的类型
-码的类型--作业
-前缀码约束条件-Kraft不等式
-前缀码约束条件-Kraft不等式--作业
-Huffman编码及其最优性
-Huffman编码及其最优性--作业
-Lecture_2
-信道容量的定义和性质
-信道容量的定义和性质--作业
-离散无记忆信道的容量
--对称信道
-离散无记忆信道的容量--作业
-信道的组合
--信道的组合
-信道的组合--作业
-连续信道的容量
--容量—费用函数
--并联高斯信道
-连续信道的容量--作业
-模拟信道容量
--模拟信道容量
-信道编码
--基本概念
--重复码
--联合典型性
-Lecture_3
-问题的提出
--问题的提出
-率失真理论的基本概念
-率失真函数的性质
--率失真函数的性质
-率失真函数的计算
--率失真函数的计算
-第四章 信息速率失真函数与熵压缩编码--率失真函数的计算
-率失真定理的证明
--定理内容
--失真典型序列
-Lecture_4
-最大熵原理与最小鉴别信息原理
-Lecture_5
-复习提纲
--复习提纲
张林,男,汉族,45岁,清华大学长聘教授。1993年保送入清华大学学习,1998年获清华大学工学学士学位,2001年和2005年分别获得清华大学大学信息与通信工程专业硕士和博士学位。2011-2014年在斯坦福大学和加州伯克利大学担任访问教授和客座研究员。主要研究方向为物联网、传感大数据挖掘、社会物理信息系统。
徐祥祥,清华大学电子工程系博士研究生。主要研究方向为无线传感系统及传感数据分析。