Hadoop组件介绍.PPT

  1. 1、本文档共5页,可阅读全部内容。
  2. 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
Hadoop组件介绍

Hadoop组件介绍 组件结构示意图 组件介绍 Core 分布式系统和通用IO组件和接口(序列化,Java?远程过程调用等等)。 Avro 支持跨语言过程调用,持久数据存储的数据序列化系统。 MapReduce 构建在廉价的PC机器上的分布式数据处理模型和运行环境 HDFS 构建在廉价的PC机器上的分布式文件系统? 组件介绍 Pig 处理海量数据集的数据流语言和运行环境。pig运行在HDFS和MapReduce之上。? Hbase 分布式面向列的数据库。HBase使用HDFS作为底层存储,同时使用MapReduce支持批处理模式的计算和随机查询 ZooKeeper 提供分布式、高效的协作服务以及分布式锁这样的原子操作,可以用来构建分布式应用。 组件介绍 Hive 分布式数据仓库,Hive使用HDFS存储数据,提供类似SQL的语言(转换为MapReduce任务)查询数据。 Chukwa? 分布式数据采集和分析系统。 使用HDFS存储数据,使用Mapreduce输出分析报告。 * *

文档评论(0)

youbika + 关注
实名认证
内容提供者

该用户很懒,什么也没介绍

1亿VIP精品文档

相关文档