信息理论与编码6.pdf

信息理论与编码 信息理论与编码 吕锋、王虹、刘皓春、苏扬 吕锋、王虹、刘皓春、苏扬 主要内容 主要内容  第1章 绪论  第1章 绪论  第2章 信息的度量  第2章 信息的度量  第3章 信道模型和信道容量  第3章 信道模型和信道容量  第4章 离散无记忆信源无失真编码  第4章 离散无记忆信源无失真编码  第5章 有噪信道编码  第5章 有噪信道编码  第6章 限失真信源编码  第6章 限失真信源编码  第7章 网络信息论基础  第7章 网络信息论基础  第8 章 信息安全与密码学基础  第8 章 信息安全与密码学基础 第六章 限失真信源编码 2 信息理论与编码 第六章 限失真信源编码 2 信息理论与编码 第6章 限失真信源编码 第6章 限失真信源编码 有失真编码的目的 有失真编码的目的 在允许的失真范围内把编码后的信息 在允许的失真范围内把编码后的信息 率压缩到信源编码模型最小。 率压缩到信源编码模型最小。 U 信道 V 信源 （信源编码器） {u ,u ,L ,u } {v ,v ,L ,v } 1 2 r 1 2 s 信源编码模型 第六章 限失真信源编码 3 信息理论与编码 第六章 限失真信源编码 3 信息理论与编码 引入有失真编码的原因 引入有失真编码的原因 （1）保熵编码并非总是必需的。 （1）保熵编码并非总是必需的。 （2）保熵编码并非总是可能的。 （2）保熵编码并非总是可能的。 （3）降低信息率有利于传输和处理，因此有 （3）降低信息率有利于传输和处理，因此有 必要进行熵压缩编码。 必要进行熵压缩编码。 第六章 限失真信源编码 4 信息理论与编码 第六章 限失真信源编码 4 信息理论与编码 本章主要内容 本章主要内容  6.1 失真测度  6.1 失真测度  6.2 信息率失真函数及其性质  6.2 信息率失真函数及其性质  6.3 限失真信源编码定理  6.3 限失真信源编码定理  6.4 信息率失真函数的计算  6.4 信息率失真函数的计算 第六章 限失真信源编码 5 信息理论与编码 第六章 限失真信源编码 5 信息理论与编码 6.1 失真测度