网站大量收购独家精品文档,联系QQ:2885784924

大数据资深研发工程师day00-课前准备编译hadoop.pdfVIP

大数据资深研发工程师day00-课前准备编译hadoop.pdf

  1. 1、本文档共17页,可阅读全部内容。
  2. 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
  5. 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
  6. 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们
  7. 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
  8. 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多

1.阅读编译文档

准备一个hadoop源码包,我选择的hadoop版本是:hadoop-2.7.7-src.tar.gz,在hadoop-2.7.7的源码

包的根下有一个文档叫做BUILDING.txt,这其中说明了编译hadoop所需要的一些编译环境相关的

东西。不同的hadoop版本的要求都不一样。对应的版本参照BUILDING.txt

Requirements:

*UnixSystem

*JDK1.7+

*Maven3.0orlater

*Findbugs1.3.9(ifrunningfindbugs)

*ProtocolBuffer2.5.0

*CMake2.6ornewer(ifcompilingnativecode),mustbe3.0orneweronMac

*Zlibdevel(ifcompilingnativecode)

*openssldevel(ifcompilingnativehadoop-pipeogetthebestHDFS

pesandto

encryptionperformance)

*LinuxFUSE(FilesysteminUserspace)versi(ifcompiling

ion2.6orabove(

fuse_dfs)

*Internetconnectionforfirstbuild(

(tofetchallMavenandHadoo

dHadoop

dependencies)

准备一台Unix类型操作系统类型操作系统,在这里我们在这里我们选用的是用的是CentOS-7.4CentOS-7.4,初次编译要求必须联网初次编译要求必须联网,切记:以下切记以下

这些东西都是需要的,详细安装在下面这里只介绍我准这些软件所选择的版本。

这些东西都是需要的详细安装在下面,这里只介绍我准备这些软件所选择的版本。

2.安装对应软件安装对应软件

对应以上需求,我们准对应以上需求我们准备好所要求版本的这些软件。好所要求版本的这些软件。

2.1.安装openssl-developenssl-devel

执行下面的所有命令:

yum-yinstallsvn

yum-yinstallautoconfautomakelibtoolcmakezlib-devellzo-devel

yum-yinstallncurses-devel

yum-yinstallopenssl-devel

yum-yinstallzlib1g-devlibssl-dev

这个安装过程,如果能连上网,那么等待命令执行完成即可。

2.2.安装gcc

先使用命令检测一下看gcc是否已经安装过了

[root@compile_hadoopsoft]#gcc-v

gccversion4.4.7(RedHat4.4.7-16)(GCC)

如果最后一行出现如上的gcc版本信息日志,表示已经安装成功过了。不然使用命令安装:

yuminstall-ygcc

2.3.安装gcc-c++

直接使用命令安装:

yum-yinstallgcc-c++

2.4.安装JDK

我们选择的安装包:我们选择的安装包:jdk-7u80-linux-x64.tar.gzjdk-7u80-linux-x64.tar.gz

从官网安装包

第一步:从官网安装包

自行,或者使用我给你提提供的安装包

第二步:上传安装到编译机,然后解压安装

tar-zxvf/root/jdk-7u80-linux-x64.tar.gz-C/root/apps/

第三步:配置环境

您可能关注的文档

文档评论(0)

183****7931 + 关注
实名认证
文档贡献者

该用户很懒,什么也没介绍

1亿VIP精品文档

相关文档