奥维视讯嵌入式高清流媒体系统的原理和应用.pdf

北京奥维视讯科技有限责任公司 奥维视讯嵌入式高清流媒体系统的原理和应用 系统概述 流媒体是由各种不同的软件系统构成的，一个最基本的流媒体系统必须包括 编码器（Encoder），服务器（Server）和播放器（Player）三个模块，模块之 间通过特定的协议互相通信，并按照特定格式互相交换文件数据。 其中编码器用来将原始的音视频转换成合适的流格式文件，服务器向客户端 发送编码后的媒体流，客户端播放器则负责解码和播放接收到的媒体数据。 图1 流媒体系统架构 基于奥维视讯嵌入式处理器系统框架技术的嵌入式高清流媒体系统（以下简 称EPSF-Ⅲ系统），放弃以X86服务器为核心构建发送端的方式，重新构建发送端 软硬件架构，将编码器模块和服务器模块统一成一个编码服务器模块，采用嵌入 式高清采集编码、多协议传输、Flash直接推送发送端构建系统。 嵌入式发送端 音、视频源 客户端播放器 高清编码流媒体服务器 图2 EPSF-Ⅲ系统架构 EPSF-Ⅲ系统由嵌入式发送端和客户端组成，自带硬盘、SD 卡存储，支持远 程下载和点播，同时支持C/S 架构应用和B/S 架构应用。发送端采集各种原始音 视频信息，经过先进的图像处理算法，转换成3 种同源信号数据，一种是无损的 环出信号数据，一种是H.264-HP 压缩后的主码流数据，一种是H.264-HP 压缩后 的副码流数据，其中无损数据用于回显，压缩后的数据直接向客户端播放器发送。 EPSF-Ⅲ系统在设备层的嵌入式软件上实现了异构多流多协议功能，视频数 据采用H.264-HP 算法，语音数据采用G.711 算法，音频数据采用AAC 或MP3 算 法，图像数据采用YUV 无损格式；网络传输可以同时支持多种协议，如下表所示。 北京奥维视讯科技有限责任公司 协议 传输层 视频 音频 语音 回传 主码流 副码流 推模式 服务端 TS UDP H.264 AAC —— —— Main —— Push —— RTP UDP H.264 AAC G.711 —— Main Sub Push —— RTSP UDP H.264 AAC —— —— Main —— —— Server RTMP TCP H.264 AAC G.711 —— Main Sub Push Server Private TCP H.264 AAC G.711 G.711 Main Sub —— Server 其中，推模式表示发送端设备利用该协议将视频流发送到一个指定 IP，该 IP 设备可以是客户端也可以是转发服务器；服务端表示允许多个客户端通过 IP 地址登录发送端设备获取视频流；对于MPEG-TS 流，RTP 协议，RTSP 协议，RTMP 协议，均可支持标准的第三方客户端和服务器。 图3 EPSF-Ⅲ系统多协议传输架构 系统实用组成 EPSF-Ⅲ系统的嵌入式发送端包括AUR3G7KE 和MAY3G7KE 二个产品系列： AUR3G7KE 用于接入各种格式、各种接口的音视频源。 MAY3G7KE 是在AUR3G7KE 上集成了一个高清摄像一体机（高解析10 倍变 焦镜头，500 万象素图像传感器，3A 自动控制），，用于1080P 高清动态 影像拍摄。 AUR3G7KE 和 MAY3G7KE 通过多协议、双码流和各种客户端组成各种应用 系统，通过转发服务器扩展并发登录规模和存储规模。