大型冗余集中存储在监测系统中设计应用.pdfVIP

大型冗余集中存储在监测系统中的设计应用 大型冗余集中存储在监测系统中的设计应用 国家广电总局监管中心 陈 峰 摘要：现在社会，随着信息技术的不断发展，信息量的不断增大，结构简单、分散的小型存储系统已经 无法满足海量信息的发布需求。本文介绍了一种大型冗余集中存储系统的设计，分析了关键技术、 设计方法、功能特点，并结合监测监管实际业务需求，实现了成熟、集中、可靠、高效的存储系 统设计目标。 关键词：存储，SAN+NAS，系统设计 1前言 现在社会，信息共享已经成为现代文明的一个标志，它也与人们的工作生活息息相关。随着计算机、 网络技术不断发展，基于网络的新型信息共享方式已经取代传统方式成为了信息发布的最快捷、有效的载 体。当共享信息量和网络流量的不断增大，结构简单、分散的小型存储系统已经无法满足海量信息的存储、 发布需求。于是，基于网络的成熟、集中、可靠、高效的大型存储体系也就孕育而生了。 2 目前常用小型存储系统的弊端 目前，我们常用的存储系统包括服务器内置硬盘、服务器直连FC中低端存储阵列的方式来存储数据。 但是随着数据量不断增大，数字化视频音频源的急速增长，原有的存储方式技术手段已逐渐不能满足现在 监测系统的要求，主要存在以下问题： 2．1存储容量不足、扩展能力差 小型存储系统的容量有限，磁盘阵列和服务器内置硬盘的存储方式受空间和接口数量的限制基本不具 备扩展能力，要增加存储空间，必须更新或增加服务器和存储设备。 2．2空间利用率低 存储资源内置和直接连接的方式都严重制约了存储空间的共享能力，即使存储设备有多余的空间也很 难提供给其他服务器直接使用。 2．3数据安全性差 重要数据缺乏可靠的备份和恢复措施，不能应对磁盘故障和人为操作失误、病毒、黑客等软灾难。 2．4管理复杂繁琐 存储系统体系架构的落后，导致了存储设备重复投资较明显，每当有新的应用系统上线就需要为之配 备单独的存储设备，多年下来必然导致多种类型的设备共存，各自的特性和管理方式都不相同，直接增加 了管理和维护工作的难度。 3902013．4．第21届中国数字广播电视与网络发展年会暨 第12届全国互联网与音视频广播发展研讨会 大型冗余集中存储在监测系统中的设计应用 3大型冗余集中存储系统运用的关键技术 目前，解决大型冗余集中存储系统运用的存储构架一般采用SAN+NAS存储架构，该架构技术成熟， 可满足对数据库数据和其他数据进行集中存储和统一管理的需要。下面简单介绍一些SAN+NAS存储构架： 3．1NAS NAS是一种采用直接与网络介质相连的特殊设备实现数据存储的机制。由于这些设备都分配有IP地 址，所以客户机通过充当数据网关的服务器可以对其进行存取访问，甚至在某些情况下，不需要任何中间 介质客户机也可以直接访问这些设备。 3．2SAN SAN是指存储设备相互连接且与一台服务器或一个服务器群相连的网络。其中的服务器用作SAN的 接入点。在有些配置中，SAN也与网络相连。SAN中将特殊交换机当作连接设备。它们看起来很像常规 很多有利条件。 3．3NAS+SAN SAN对于高容量块状级数据传输具有明显的优势，而NAS则更加适合文件级别上的数据处理。SAN 和NAS是能够相互补充的存储技术。SAN擅长块数据传输、极易扩展且管理设备有效。使用SAN运行 关键应用，如数据库、备份等，以进行数据的集中存取与管理；而NAS支持若干客户端之间文件共享， 所以用户可以使用NAS作为日常业务中需要经常交换小文件的地方，如存储网页等。SAN和NAS在实际 设备提供高性能、大容量的存储设备，同时许多SAN通常驻留在NAS应用中。 3．4分级存储 由于数据量飞速增长，基于用户对存储数据的使用情况，这些数据在达到一定年限后其使用概率将大 大降低，如果将这些数据都存储在价格很高的磁盘上，则所需要的投资是巨大的。所以采用分层管理模式， 按照数据的重要、新旧程度，依次数据存放在不同级别的存储系统中，提高资源利用率、节约成本。 4大型冗余集中存储系统设计和应用 在实际工作中，根据监测监管业务实际需求，新建集中存储系统需在现有支撑网络的基础上，对中央、 省、地市级广播电视节目、卫星广播电视节目、互联网视听节目和其他类型的数据进行分类存储，存储系 统应具备高可用性，满足容量扩展需求。该存储系统主要功能有三个。一是存