chp9大数据与海量存储范例.pptx

1 In God we trust; all others must bring data. - W. Edwards Deming, statistician, professor, author, lecturer, and consultant 第8介绍了移动通信技术的发展，重点介绍了我国使用的第三代移动通信技术和标准（TD-SCDMA，W-CDMA，CDMA2000），并讨论了移动互联网的典型应用。 2 内容回顾 9.1 从网络化存储到数据中心 9.2 数据中心建设 9.3 数据中心技术 9.4 典型的数据中心 9.5 数据中心的研究热点 9.6 数据中心与云存储 3 本章内容 4 数据存储的发展历史 甲骨文→纸质书籍→数字化存储 全球信息总量迅猛增长 2007年产生的数据量为281EB（1EB=10亿GB），2011年1.8ZB 物联网中对象的数量将庞大到以百亿为单位 大数据 无法在一定时间内用常规软件工具对其内容进行抓取管理和处理的数据 数量大（Volume），种类多（Variety），速度快（Velocity） 导致了网络化存储和大型数据中心的诞生 5 物联网对海量信息存储的需求 9.1 从网络化存储到数据中心 9.2 数据中心建设 9.3 数据中心技术 9.4 典型的数据中心 9.5 数据中心的研究热点 9.6 数据中心与云存储 6 本章内容 直接附加存储（Direct-Attached Strorage，DAS） 将存储系统通过缆线直接与服务器或工作站相连 一般包括多个硬盘驱动器，与主机总线适配器通过电缆或光纤 在存储设备和主机总线适配器之间不存在其他网络设备 实现了计算机内存储到存储子系统的跨越 7 直接附加存储 网络附加存储（Network Attached Storage，NAS） 文件级的计算机数据存储架构 计算机连接到一个仅为其它设备提供基于文件级数据存储服务的网络 NAS与DAS的区别 DAS是一种对已有服务器的简单扩展，并没有真正实现网络互联。NAS则是将网络作为存储实体，更容易实现文件级别的共享。NAS性能上比DAS有所增强 8 网络附加存储 存储区域网络（Storage Area Network，SAN） 通过网络方式连接存储设备和应用服务器的存储架构 由服务器、存储设备和SAN连接设备组成 SAN的特点 存储共享 支持服务器从SAN直接启动 9 存储区域网络 10 三种网络存储结构的比较 DAS 管理容易，结构简单；集中式体系结构，不能满足大规模数据访问的需求；存储资源利用率低，资源共享能力差，造成“信息孤岛”。 NAS 网络的存储实体，容易实现文件级别共享；性能严重依赖于网络流量，用户数过多，读写过频繁时性能受限。 SAN 存储管理简化，存储容量利用率提高；无直接文件级别的访问能力，但可在SAN基础上建立文件系统。 11 三种网络存储结构的比较（续） 9.1 从网络化存储到数据中心 9.2 数据中心建设 9.3 数据中心技术 9.4 典型的数据中心 9.5 数据中心的研究热点 9.6 数据中心与云存储 12 本章内容 维基百科： “数据中心是一整套复杂的设施。它不仅仅包括计算机系统和其它与之配套的设备（例如通信和存储系统），还包含冗余的数据通信连接、环境控制设备、监控设备以及各种安全装置。” Google： “多功能的建筑物，能容纳多个服务器以及通信设备。这些设备被放置在一起是因为它们具有相同的对环境的要求以及物理安全上的需求，并且这样放置便于维护。” 13 什么是数据中心 14 数据中心的起源与发展 大型机 微型机 大规模数据中心 (Mega Data Center) 15 数据中心的起源与发展（续） 大规模数据中心已经得到推广 数据中心建设者面对的难题 如何规划一个新的数据中心？ 怎样对数据中心进行升级？ 数据中心的标准对相关经验进行了总结 ANSI/TIA/EIA-942（简称TIA-942）：数据中心标准 电信产业协会（TIA）提出 美国国家标准学会（ANSI）批准 16 数据中心标准 选址：需要考虑多方面因素 建设和运营成本 应用需求 政策优惠 … 布局： 按功能区域划分 17 数据中心标准：TIA-942 功能区域组成 TIA-942还对缆线系统，可靠性分级，能源系统和降温系统等做了规定。 18 数据中心标准：TIA-942（续） 缆线系统 规格 如何放置缆线 能源系统 外部电力供应 电池组 发电机 降温系统 降温设备 架空地板 冷通道与热通道 9.1 从网络化存储到数据中心 9.2 数据中心建设 9.3 数据中心技术 9.4 典型的数据中心 9.5 数据中心的研究热点 9.6 数据中心与云存储 19 本章内容 简介 全球共建有近40个大规模数据中心 单个数据中心需要