MASS4-0system产品简介.ppt

内 容 第一部分 东方广视MASS4.0系统开发背景 MASS4.0系统开发背景 广电行业的VOD项目运营系统，存在视频媒体文件数量大、单个视频媒体文件容量大、实时并发用户量大的特点，因此对存储系统的性能要求就会很高。提高存储系统性能的传统解决方案是完全采用大的盘阵存储，这样虽然能够存储大量的视频媒体文件，也能够保证存储系统特定的读写性能要求，但是基于盘阵存储的Raid策略导致存储系统的性能很难突破一定的瓶颈，同时存储系统的安全性、可靠性也很难保证，另外每个视频播出服务器对应一套存储系统也会在一定程度上增加运营商的成本。 目前东方广视VOD3.0视频点播系统业务已经在全国各地投入大规模的实际运营，VOD视频点播业务用户量的不断增加，运营商对公司服务器I/O能力、带宽、海量存储、部署成本等方面都提出了更高的要求。 MASS4.0系统开发背景 基于存储系统本身需求的设计理念以及大型运营业务拓展的进一步要求，我们需要设计一种适合自身VOD系统的存储系统，不仅使存储系统性能能够大幅度的提高，也能保证存储系统的安全性、可靠性，同时通过支持分布式存储来节省运营商的成本，另外能够满足大规模并发用户同时在线、提供用户实时性业务请求，并能满足运营商期望通过低成本实现系统部署、业务运营和扩展的要求。东方广视专门提出了适合公司产品自身特点的高性能高可靠性媒体区域存储系统(MASS)4.0的设计方案。该系统在每一个存储节点上实现分布式存储、动态raid管理、自动本地数据调度、数据在线恢复、在整个网络节点上实现向中央存储服务器的数据调度、系统对动态扩容提供支持。 第二部分 东方广视MASS4.0系统发展历程 MASS4.0系统发展历程 东方广视研发的本产品已经3代，各版本特点如下 ： FAN1版本特点介绍： 提出FAN1的主要目的是为了解决IO访问的优先级管理，因为系统本身对服务读写的优先级没有考虑，在并发高峰期，会出现trs录制丢包以及dbs读取超时的情况，基于此原因设计了FAN1网络文件系统。 目前项目中应用主要是本版本。 主要采用linux系统自己提供的文件系统。 读取性能特点：硬件配置15块(硬盘数量)*750G(单硬盘容量)的盘阵组建的媒体区域存储系统的读取性能基本保持在300MB/s左右。 最大支持并发量性能特点：硬件配置为8核CPU、16G内存的前期下，能够稳定支持480路并发用户同时点播，最大支持并发量为300MB/s(文件系统读取性能)*0.80(20%的富余带宽)*8(转换单位为位)/3.75Mb/s(片源码率)=512。 优缺点：优点是实现了IO访问的优先级管理；缺点在于使用了linux自身提供的文件系统以及Raid策略，无法突破文件系统性能的瓶颈。 MASS4.0系统发展历程 FAN2版本特点介绍： 提出FAN2的主要目的是为了解决FAN1文件系统由于使用了linux自身提供的文件系统以及Raid策略，而无法突破文件系统性能的瓶颈。基于此原因为了提高文件系统的性能而提出了FAN2的设计以提高文件系统的性能。 过渡性产品(中途夭折)，并未投入项目运营。 在linux系统环境下设计适合公司产品的文件系统。 读取性能特点：硬件配置16块(硬盘数量)*1T(单硬盘容量)的盘阵组建的媒体区域存储系统的读取性能期望达到500MB/s左右。 最大支持并发量性能特点：硬件配置为8核CPU、16G内存的前期下，期望支持720路并发用户同时点播，预计最大支持并发量为500MB/s(文件系统读取性能)*0.80(20%的富余带宽)*8(转换单位为位)/3.75Mb/s(片源码率)=853。 优缺点：优点是解决FAN1文件系统由于使用了linux自身提供的文件系统以及Raid策略，存在的系统性能的瓶颈问题，提高文件系统的性能。另外将片源文件分布式存储，也提高了系统的安全性。缺点是FAN2文件系统定义的块的大小为512K，由于块大小比较小，读取磁盘性能的时间大多浪费在寻址上。 MASS4.0系统发展历程 FAN3版本特点介绍： 提出FAN3的主要目的是为了解决FAN2文件系统由于块的大小为512K，导致读取磁盘性能的时间大多浪费在寻址上。基于此原因为了进一步优化文件系统的性能而提出了FAN3的设计。 后期项目中准备试运营的产品。 在linux系统环境下设计适合自己产品的文件系统。 读取性能特点：硬件配置24块(硬盘数量)*1T(单硬盘容量)的盘阵组建的媒体区域存储系统的读取性能期望达到1000MB/s左右。 最大支持并发量性能特点：硬件配置为8核CPU、32G内存的前期下，能够稳定支持1000路并发用户同时点播，预计最大支持并发量为1000MB/s(文件系统读取性能)*0.80(20%的富余带宽)*8(转换单位为