- 1、本文档共4页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
基于云计算的海量数据存储
学兔兔
l 訇 化
基于云计算的海量数据存储
Massive data storage based on cloud computing
许小媛。,程宏兵
XU Xiao.yuan。。CHENG Hong-bing
(1.江苏广播电视大学信息工程系,南京210017;2.南京邮电大学计算机学院博士后,南京210003)
摘 要;针对因网络的广泛应用而产生的海量数据的存储问题,在云计算技术的基础上,分析了
Hadoop框架结构和MapReduce的计算模型,提出了基于云计算的海量数据存储技术架构图,
并对存储层进行了进一步分析。该存储结构解决了网络中海量数据存储中存在的问题,提高
了存储的效率和安全性。
关键词:云计算;海量数据;技术架构;数据存储
中图分类号:TP31 1.1 2 文献标识码:A 文章编号:1 009—01 34(201 3)07(上)一0082—04
Doi:1 0.3969/J.Jssn.1 009-01 34.201 3.07(I-).25
0 引言 存储进行了分析和研究。
随着计算机技术的快速发展和网络的日益普 1云计算环境下的海量数据存储模
及,越来越多的人利用网络来获取信息、存储资 型
料和进行电子商务。各种类型的网站不断产生,
1.1 MapReduce模型
比如政府利用网络进行公务,教育行业利用网站
MapReduce模式在云计算的计算模式中处于核
资源进行教学的开展,医院利用网站进行挂号、
心地位,用于大规模数据集的分布式 并行运算。
在线诊疗等等。整个网络产生了巨大的数据量,
map(映射)和reduce(化简)是MapReduce模式
如何存储网站中的这些数据,成为了一项亟待解
的主要思想,指定一个Map(映射)函数,接受一
决的问题。传统的存储方式已经很难满足海量数
个键值对 (key—value pair),产生一组中间键值;
据存储在容量、性能、存储效率和安全性等方面
Reduce(化简)函数,接受一个键,以及相关的
的要求,现在常见的海量数据存储技术可以分为
一 组值,将这组值进行合并产生一组规模更小的
直接附加存储¨ (DAS)和网络存储两种,其中网
值 (通常只有一个或零个值)。MapReduce的流程
络存储又分为网络附属存储 (NAS)和存储域网
如图1所示。
络 (SAN)。但是网络存储量日益增大,网络中
的存储负荷也越来越重,传统的存储方式不可避
免地产生了很多弊端。比~IDAS简单易用,但磁
盘利用率很低,存储分散。NAS对数据库支持不
如盘阵和SAN。SAN存储效能优异,但投资成本
文档评论(0)