Hadoop项目简介与环境搭建.ppt

Hadoop;主要内容;Hadoop项目简介;Hadoop项目简介;HDFS体系结构 ;HDFS关键运行机制--保障可靠性的措施;HDFS关键运行机制--写文件流程;HDFS关键运行机制--读文件流程;Hadoop VS. Google;Hadoop VS. Google;Hadoop VS. Google;Hadoop VS. Google;Hadoop VS. Google;HDFS API;HDFS API--org.apache.hadoop.fs?;HDFS API--org.apche.hadoop.ipc;HDFS API--org.apache.hadoop.HDFS;HDFS API-- ClientProtocol（文件基本操作接口）;HDFS API-- ClientProtocol（文件基本操作接口）;HDFS API-- ClientProtocol（文件基本操作接口）;HDFS API;HDFS API;HDFS API-- ClientProtocol（系统管理相关接口）;HDFS API-- ClientProtocol（系统管理相关接口）;Hadoop集群搭建;1、在所有的机器上建立相同的用户，例如：grid。;3、在ubuntu1上配置Hadoop。; 编辑所有机器的conf/hadoop-env.sh文件，将JAVA_HOME变量设置为各自JDK安装的根目录，不同机器可以使用不同的JAVA版本。;三、Hadoop运行;2、启动Hadoop守护进程;3、停止Hadoop守护进程;HDFS实验：观察数据块在Datanode上的分布;文件副本个数为2;文件f.zip的数据块分布情况;关掉一个Datanode时数据块分布情况，此时文件仍然可用;关掉两个Datanode时数据块的分布情况，此时文件不可用;重新启动另外两个Datanode时数据块分布情况;欢迎访问 中国云计算网站 欢迎使用 《云计算》教材 电子工业出版社 刘鹏 主编