- 1、本文档共11页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
ubuntu下hadoop的安装
下载虚拟机和ubuntu镜像文件,并且安装完毕,过程简单不再赘述。
2、创建hadoop用户组
创建hadoop用户
为hadoop用户赋权限
用hadoop用户登录系统
安装ssh
如果Ubuntu安装ssh时出现软件包 openssh-server 还没有可供安装的候选者错误
解决方案:分析原因是我们的apt-get没有更新,当然如果你的是必威体育精装版的系统不用更新也行,但是我相信很多人都是需要更新的吧,操作命令如下:
sudo apt-get update
更新完毕后执行:
sudo apt-get install openssh-server
安装完成后,开启ssh服务
开启ssh服务并查看
设置免密码登录,生成公钥和私钥
此时会在/home/hadoop/.ssh下生成两个文件:id_rsa和id_rsa.pub,前者为私钥,后者为公钥。下面我们将公钥追加到authorized_keys中,它用户保存所有允许以当前用户身份登录到ssh客户端用户的公钥内容。
登录ssh
安装java 环境
sudo apt-get install openjdk-7-jdk
查看一下是否成功安装jdk
11、安装hadoop 2.7.2
拷贝下载hadoop包到系统盘下
解压
sudo tar xzf hadoop-2.7.2.tar.gz??
12、赋予用户对该文件夹的读写权限
sudo chmod 774
配置~/.bashrc
配置该文件前需要知道Java的安装路径,用来设置JAVA_HOME环境变量,可以使用下面命令行查看安装路径
完整的路径为
????/usr/lib/jvm/java-7-openjdk-/jre/bin/java
我们只取前面的部分 /usr/lib/jvm/java-7-openjdk-配置.bashrc文件
????sudo gedit ~/.bashrc
执行下面命,使添加的环境变量生效:
????????source ~/.bashrc
hadoop-env.sh
找到JAVA_HOME变量,修改此变量如下
????????export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-
完成wordcount实验
创建需要读入的文件input 和输出文件output
把系统自带的README.TXT放在input下,进行统计
结果
???
文档评论(0)