第章_多媒体通信同步技术.ppt

第9章 多媒体通信同步技术 9.1 概述 9.2 多媒体同步参考模型 *9.3 同步的描述方法 *9.4 多媒体同步控制机制 练习与思考题 9.1 概 述 9.1.1 同步的基本概念 　 多媒体系统中集成了具有各种不同时态特性的媒体， 这些媒体有依赖于时间的媒体(例如视频、 音频、 动画等)和独立于时间的媒体(例如文本、 静止图像、 表格等)。 媒体对象的时间相关性可能隐藏在建立过程中， 也可能由用户自己定义。 在单一的媒体系统中， 所有的媒体表现出同样的时态行为， 时间并不需要特别的注意。 随着多媒体系统的发展， 媒体间的各种时态关系变得越来越复杂。 任何一种情况下， 媒体对象的时间相关性必须在多媒体系统中得到体现和支持。  多媒体同步就是保持和维护各个媒体对象之间和各个媒体对象内部存在的时态关系， 组织多种媒体序列以实现某种特定的表现任务。 多媒体同步的核心基础是为这些同步关系建立一个独立于实现环境的抽象的描述模型。 同步问题有两层含义： 首先， 时态行为(包括表示单元的彼此关系)必须有明确的定义， 使用时态定义可以方便用户复审、 系统表示和存储。 其次， 在表示媒体单元的时候， 多媒体系统必须保证各媒体时态的正确性。 多媒体同步可以从多媒体同步规范和多媒体同步控制两个层次来讨论。 多媒体同步规范描述了媒体对象之间和各个媒体对象内部存在的时态关系， 确定了多媒体的时态说明， 是多媒体系统的重要组成部分。 多媒体同步规范通常包括： 媒体对象内的同步、 媒体对象之间的同步以及业务品质QoS描述。  多媒体同步控制机制是开发各种同步控制策略以及同步控制协议， 解决由于网络延迟、 抖动、 进程调度等各种不确定因素带来的负面影响， 实现多媒体同步规范描述的多媒体时态说明。  9.1.2 同步的类型 1． 上层同步 上层同步又称表现级同步或交互同步， 即用户级同步。 这一级同步从用户的角度出发设计模型框架， 要求模型既能体现用户的交互性， 又能容易被用户理解和使用； 同时还是一个同步模型， 即以时间为控制线索的模型。 用户可以对各个媒体进行编排， 由此决定何种媒体何时以何种时空关系表现出来。 上层同步的同步机制是由多媒体信息中的脚本信息来提供的， 在实际的多媒体应用中， 它是一种事件驱动同步， 它发生在系统中某一节点需要起始动作的情况下。 此动作的发生， 即同步点， 如文献中的特定点、 用户鼠标的动作点、 系统设备到达某特定状态等。 例如， 在一个多媒体幻灯片的演示过程中， 要对一组图像进行口头解释， 这就要求在上一段说明语音完成以后， 才能出现下一幅图像， 这种情况下， 同步点处于图像段的改变点或讲解段的起始点（或结束点）上。 2． 中层同步 中层同步即合成同步， 这里的合成指的是信息的合成， 即不同媒体类型的数据之间的合成， 所以， 合成同步又称为“媒体之间的同步”。 这层同步涉及到不同类型的媒体数据， 侧重于它们在合成表现时的时间关系的描述。 合成同步的作用就是将不同媒体数据流按一定的时间关系进行合成。 一些要求精度较高的连续同步就属于这一类。 如在可视电话中， 音频和视频必须始终同步地表现在接收端上， 以确保口形与声音的同步。 这时媒体之间的同步， 除了数据的开始点和结束点必须保证以外， 从开始点到结束点的整个过程中均要求保持同步。  3． 底层同步 底层同步即系统同步， 又称媒体内部同步。 这里， 系统同步指的是该层同步如何根据各种输入媒体对应的实际硬件系统的性能参数来协调完成其上层合成同步所描述的各对象间的时序关系。 譬如在单机情况下， 同步技术要考虑的时间因素有读盘时间， 这与磁盘存取速度和磁盘碎片有关； 还有图像帧的显示速度， 这与适配器有关； 另外还有机器的处理速度等。  对于通信网上分布媒体表现的同步， 要考虑更为复杂的问题： 网络的延迟以及无法预料的网络阻塞， 不仅影响到单一连续媒体传输和播放的稳定性（媒体内部的同步）， 而且给各媒体相互配合（媒体之间的同步）设置了障碍， 从而引出同步协议的设计和各种相应的同步技术。 9.1.3 影响媒体同步的因素 从媒体关系的角度出发， 媒体对象的同步包括两个方面： 媒体内同步和媒体间同步。 媒体内同步主要是维持一个媒体流内部各信息单元的连续性； 媒体间同步主要是维持多个相关媒体流中媒体单元间的时间关系。 媒体同步关系