Centos6 hadoop安装笔记.docx

Centos6 Hadoop安装笔记单机版安装系统安装安装操作系统的时候，请分好区，尽量给一个空间大的地方使用Hadoop，例如将Hadoop安装在/opt目录下，就把/opt目录尽量分配大空间。安装SSHCentos系统安装时，选择安装SSH。配置SSH输入以下命令，编辑SSH配置文件sshd_config：vim /etc/ssh/sshd_configPort： SSH的监听端口 默认为22，设置为【Port 22】Protocol：SSH允许SSH1和SSH2连接，设置为【Protocol 2】PasswordAuthentication：设置是否使用口令认证方式，如果使用公钥认证方式，可将其设置为no，设置为【PasswordAuthentication yes】简单配置以上三项重启SSH服务Service sshd restart配置SSH免密码登录（密匙登录）输入以下命令，产生密匙ssh-keygen–t rsa–P ‘’–f ~/.ssh/id_rsacat ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys输入以下命令，验证是否成cd /root/.sshpwdsshlocalhostpwd结果是没有输入密码直接登陆成功,并且两次pwd命令的输出值不同。执行exit退出下载Hadoop下载地址，参考下图，依次点击红色标注的地方。下载后，本机会有以下文件安装hadoop我将hadoop安装在了/opt目录下。使用工具将hadoop上传到/opt目录下。使用tar进行解压tar–zxvf hadoop-1.2.0.tar.gz配置hadoop主要是配置四个文件hadoop-env.sh、core-site.xml 、hdfs-site.xml、mapred-site.xml。绿色部分为添加的内容。hadoop-env.sh该文件配置JDK，即指定JAVA_HOMEvim /opt/hadoop-1.2.0/conf/hadoop-env.sh# export JAVA_HOME=/usr/lib/j2sdk1.5-sunexportJAVA_HOME=/usr/lib/jvm/java-1.6.0-openjdk-.x86_64/jrecore-site.xmlvim /opt/hadoop-1.2.0/conf/core-site.xml?xml version=1.0??xml-stylesheet type=text/xsl href=configuration.xsl?!-- Put site-specific property overrides in this file. --configurationpropertyname/namevaluehdfs://localhost:9000/value /property/configurationhdfs-site.xmlvim /opt/hadoop-1.2.0/conf/hdfs-site.xml?xml version=1.0??xml-stylesheet type=text/xsl href=configuration.xsl?!-- Put site-specific property overrides in this file. --configuration property namedfs.replication/name value1/value /property/configurationmapred-site.xmlvim /opt/hadoop-1.2.0/conf/mapred-site.xml?xml version=1.0??xml-stylesheet type=text/xsl href=configuration.xsl?!-- Put site-specific property overrides in this file. --configuration property namemapred.job.tracker/name valuemaster:9001/value /property/configuration格式化分布式文件系统/opt/hadoop-1.2.0/bin/hadoopnamenode–format启动hadoop/opt/hadoop-1.2.0/bin/start-all.sh验证hadoop安装运行成功打开浏览器，输入以下地址。NameNode–http:/