第5章 率失真理论与信源编码定理.pdf

e University of Electronic Science and Technology of China 信息论导论－ 第5章率失真理论与信源编码定理 制作：陈伟建 修订：邝育军 kyj@ 通信与信息工程学院, KB128-B 内容提要 一、保真度准则和测试信道 二、单符号离散信源的率失真函数 三、N次扩展信源的率失真函数 四、时不变连续信源的率失真函数 五、保真度准则下的信源编码定理 六、率失真函数与信息价值 小结 2 一、保真度准则和测试信道 1、保真度准则 由失真矩阵和信道转移 概率矩阵共同决定，其 – ①失真度 – ②平均失真度 中可变因素是失真矩阵 ˆ x x • 对应于离散消息 与 或连续 • 各失真度的数学期望为平均失 定义 i j 定义 ˆ ˆ x x d ( x , x ) 消息 与 的非负函数 i j 真度 或 ˆ 为失真度 d ( x, x) 表示 – 离散情形 • 常用的失真度： ˆ 可人为规定，用以反映 D E d (x , x )  i j  – 汉明失真度 符号传输过程中引起的 n n 误差或失真 ˆ ˆ = P (x x )d (x , x ) 0 i = j  i j i j 