面向数据处理的高端系统.ppt

存储虚拟化技术 存储虚拟化 设备级 文件系统级 服务级 基于存储实现虚拟化 将虚拟化层放在存储设备的适配器、控制器等上来实现的 基于主机现实虚拟化 将虚拟化层放在服务器上实现的 基于网络实现虚拟化 基于虚拟化技术的并行存储系统 议程 国内外对高端计算研究上的差异 国外主要的技术发展趋势 在高端计算领域的机遇 面向海量数据的应用将是未来市场的主流，是市场上商用高端系统的主要增长点 无线通信 在线视频 科学研究 电子商务 客户管理 数据 数据分析 企业应用 电子政务 70年代 80年代 90年代 2000年 新世纪头10年 基础OA 数据量爆炸 数据量高速增长 海量数据处理的需求趋势与市场机会 科研应用领域对海量数据处理的需求 空间探索、数字天文台、高能物理、生命科学 石油勘探、油气田模拟 气象预报与气象模式研究 飞机船舶设计 IPTV和数字媒体对海量数据处理系统的需求 为满足点播需求 ，IPTV运营商必须存储和处理大量的视频数据，需要海量数据处理系统 50个公共频道一天的数据量约为4320GB=4.32TB 为保障点播质量，在小区内一般会设置视频数据缓存或CDN海量数据缓存服务器(内容分送网络服务器，附带数据缓存存储设备) 预计2008年全国IPTV用户数将达到6000万 3G移动通讯对海量数据处理系统的需求 3G移动通讯将在十一五期间正式运营,3G业务将派生多种多媒体应用 视频电话、基于手机的媒体点播、视频短信、多媒体邮件、视频直播、手机视频游戏 这类业务的发展，需要大量的存储系统由于存储内容、缓存内容 假设平均每个3G用户将需要1GB的存储空间，按照4000万3G用户计算，3G应用未来将需要存储容量：40P 下一代互联网建设使基于因特网的存储服务成为可能 这种趋势将催生一批互联网存储服务商，并产生巨大的网络海量存储系统的需求，平均一个用户存储10G数据，100万用户将需要1PB的存储容量 海量数据处理的需求 面向海量数据的应用将是未来市场的主流，是市场上商用高端系统的主要增长点 面向海量数据处理的高端系统必须满足如下需求 系统可以实现PB级海量数据的存储、处理和传输 系统需要支撑几十GB/s的数据访问流量 由于面向海量数据应用的特点，海量数据处理系统往往面对大量的并发访问，要求系统设计要均衡计算能力与I/O能力 海量数据库应用，要求系统能够基于同一组数据进行大规模并行数据处理，计算单元间需要高速交换通道进行数据同步和数据共享 由于系统构成复杂，系统的可靠性可用性设计将是系统设计的难点 未来应用的数据积累速度会以每日TB的规模增长，并发用户数量也会持续增长，需要海量数据处理系统有较高的可扩展性 对高端计算机的能力需求 数据处理能力 数据I/O能力 系统可靠性 系统利用率 系统功耗性能比 系统示意图 VSMP硬件体系结构 … … … High Speed Switch Path CPU Memory CPU Memory CPU Memory CPU Memory C I/O Unit S I/O Unit SAN … … Manage Unit … IPN S I/O Unit C I/O Unit … … … … AS330G2 必威体育精装版浪潮存储产品线 AS200 性能 AS系列 AS300 存储系统 CX300、500、700 CX系列 价格 AS500 AS600600G2 A2 AS500简介 3U机架，15槽位 可同时支持iSCSI和FC 单、双控控制器 支持SATA硬盘 标配P4 CPU；2×512MB DDR ECC内存，最大8GB 支持RAID0、1、5、10多种级别 可支持256个LUN AS Manager管理软件实现快照、硬件监控等高级功能 IOPS 8,4000 传输带宽：680MB/s 随需而变、弹性架构 AS500内部体系架构 风扇 风扇 风扇 电源 电源 后备电源 控制器1 CMI 后备电源 控制器2 FC x 2 镜像缓存 SATA/SAS×4 CPU iSCSIx 2 FC x 2 镜像缓存 SATA/SAS×4 CPU iSCSIx 2 HDM HDM HDM HDM HDM HDM HDM HDM HDM HDM HDM HDM HDM HDM HDM 模块化，全冗余结构 同时支持FC、iSCSI AS500应用案例 —国务院信息办（FC SAN） 山东移动 北京石景山政府 安徽信息产业厅 黑龙江省委党校 山东大学 华师数学系 …… AS500推荐应用 —IP SAN FC SAN 部分性能要求较高的服务器通过FC连接 大量性能要求较低的服务器通过IP连接 性能按需分配，共享存储，达到最佳的性价比 * Thank you!