网创优客建站品牌官网
为成都网站建设公司企业提供高品质网站建设
热线:028-86922220
成都专业网站建设公司

定制建站费用3500元

符合中小企业对网站设计、功能常规化式的企业展示型网站建设

成都品牌网站建设

品牌网站建设费用6000元

本套餐主要针对企业品牌型网站、中高端设计、前端互动体验...

成都商城网站建设

商城网站建设费用8000元

商城网站建设因基本功能的需求不同费用上面也有很大的差别...

成都微信网站建设

手机微信网站建站3000元

手机微信网站开发、微信官网、微信商城网站...

建站知识

当前位置:首页 > 建站知识

CentOS上如何编译hadoop2.7

这篇文章主要介绍CentOS上如何编译hadoop 2.7,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

创新互联长期为上千客户提供的网站建设服务,团队从业经验10年,关注不同地域、不同群体,并针对不同对象提供差异化的产品和服务;打造开放共赢平台,与合作伙伴共同营造健康的互联网生态环境。为叶集企业提供专业的成都做网站、成都网站建设,叶集网站改版等技术服务。拥有十载丰富建站经验和众多成功案例,为您定制开发。

官网下载的 hadoop执行运行报警告:

WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
put: `./in': No such file or directory

主要是lib下的native-hadoop 是32位的,所以这里我们自己在64位的系统上编译hadoop

环境准备:

1 下载hadoop src源码包

2 所需软件:java, svn, autoconf, automake, libtool, ncurses-devel, openssl-devel, gcc, lzo-devel, zlib-devel, znt, maven, protobuf, cmake

yum -y install autoconf  automake libtool ncurses-devel openssl-devel gcc lzo-devel, zlib-devel cmake

3 安装jdk

下载jdk bin包并解压

添加jdk环境变量

在/etc/profile文件下添加

## JAVA

export JAVA_HOME=/usr/local/java/jdk

export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

## PATH 

export PATH=$JAVA_HOME/bin

让重载环境变量  . /etc/profile

4 maven安装

apache官网下载 maven并解压,然后把其 bin路径添加到环境变量

mvn -version  

5 protobuf安装

到网上搜索 protobuf-2.5.0.tar.gz,下载解压,

./configure; make; make install

protoc --version

6 ANT安装

apache官网下载 ANT bin包解压,把其bin路径添加到环境变量中

7 编译hadoop

mvn package -Pdist,native,docs -DskipTests -Dtar

这里需要一个多小时或更久,并需要联网下载依赖包

最后文件在 hadoop-2.7.2-src/hadoop-dist/target 中

可以直接拿 hadoop-2.7.2目录去部署,还有一个hadoop-2.7.2.tar.gz包

以上是“CentOS上如何编译hadoop 2.7”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注创新互联行业资讯频道!


本文标题:CentOS上如何编译hadoop2.7
本文地址:http://bjjierui.cn/article/gijjpj.html

其他资讯