文档章节

Ambari源码编译安装

bigdataboy
 bigdataboy
发布于 2016/06/14 13:56
字数 1163
阅读 53
收藏 0

1.2 需要安装的工具

1.2.1     安装JDK

输入命令

[root@bigData-02 ~]# java –version

java version "1.7.0_51"

Java(TM) SE Runtime Environment (build 1.7.0_51-b13)

Java HotSpot(TM) 64-Bit Server VM (build 24.51-b03, mixed mode)

 

如果出现以上数据,表明已经安装成功jdk。如果没有安装,使用yum安装jdk。

[root@bigData-02 ~]# yum install jdk

 

1.2.2     安装Apache Maven 3.0.5

  1. 官网下载apache maven,推荐版本3.0.5

[root@bigData-02 ~]# wget http://apache.fayea.com/apache-mirror/maven/maven-3/3.0.5/binaries/apache-maven-3.0.5-bin.tar.gz

 

  1. 解压

[root@bigData-02 ~]# tar -zxvf apache-maven-3.0.5-bin.tar.gz

 

  1. 设置环境变量

[root@bigData-02 ~]# vi /etc/profile

export MAVEN_HOME="/usr/local/apache-maven-3.0.5"

export path=$path: $MAVEN_HOME/bin

 

[root@bigData-02 ~]#source /etc/profile

 

4)检查是否安装成功

[root@bigData-02 ~]# mvn -v

Apache Maven 3.0.5 (r01de14724cdef164cd33c7c8c2fe155faf9602da; 2013-02-19 21:51:28+0800)

Maven home: /usr/local/apache-maven-3.0.5

Java version: 1.7.0_51, vendor: Oracle Corporation

Java home: /usr/local/jdk1.7.0_51/jre

Default locale: en_US, platform encoding: UTF-8

OS name: "linux", version: "2.6.32-358.el6.x86_64", arch: "amd64", family: "unix"

 

1.2.3     安装Python 2.6

  1. 检测python版本

[root@bigData-02 ~]# python

Python 2.6.6 (r266:84292, Oct 12 2012, 14:23:48)

[GCC 4.4.6 20120305 (Red Hat 4.4.6-4)] on linux2

Type "help", "copyright", "credits" or "license" for more information.

 

表明当前版本是2.6.6

 

如果不是2.6.6版本,可以下载相应版本执行安装

  1. 下载安装

[root@bigData-02 ~]# wget http://pypi.python.org/packages/2.6/s/setuptools/setuptools-0.6c11-py2.6.egg#md5=bfa92100bd772d5a213eedd356d64086

 

[root@bigData-02 ~]# sh setuptools-0.6c11-py2.6.egg

最后再输入第一步命令,检测版本号。

1.2.4     安装rpmbuild

1)检测rpm-build是否已经安装

[root@bigData-02 ~]# rpm -qa | grep rpm-build

 

2)安装

[root@bigData-02 ~]# yum install rpm-build

1.2.5     安装g++

  1. 检测

[root@bigData-02 ~]# rpm -qa | grep gcc-c++

 

  1. 安装

[root@bigData-02 ~]# yum install gcc-c++

1.2.6     安装NodeJS

  1. 下载

[root@bigData-02 ~]# wget http://nodejs.org/dist/v0.10.33/node-v0.10.33-linux-x64.tar.gz

 

  1. 解压

[root@bigData-02 ~]# tar –zxvf node-v0.10.33-linux-x64.tar.gz

 

  1. 设置环境变量

[root@bigData-02 ~]# vi /etc/profile

export NODE_HOME="/node/node-v0.10.33-linux-x64/"

export path=$path: $NODE_HOME/bin

 

[root@bigData-02 ~]#source /etc/profile

 

  1. 检测是否正确安装

[root@bigData-02 ~]# node -v

v0.10.33

 

[root@bigData-02 ~]# npm -v

1.4.28

1.2.7     安装Brunch

1)安装

[root@bigData-02 ~]# npm install -g brunch

 

  1. 检测

[root@bigData-02 ~]# brunch

 

  Usage: brunch [command] [options]

 

  Commands:

 

    new [skeleton] [path]  Create new brunch project in path [.]. Short-cut: n

    build [options]        Build a brunch project. Short-cut: b

    watch [options]        Watch brunch directory and rebuild if something changed. Short-cut: w

 

  Options:

 

    -h, --help     output usage information

-V, --version  output the version number

 

1.2.8     安装git

  1. 检测

[root@bigData-02 ~]# git –version

 

  1. 安装

[root@bigData-02 ~]# yum install git

 

1.3 编译Ambari

1.3.1     下载

Ambari的代码托管在github中,可以在linux上安装git软件,方便获取源代码。也可以通过web访问github的主页,搜索ambari项目,下载相应的版本。此处我们选择稳定版本1.6.1版本。

 

下载地址:

https://github.com/apache/ambari/archive/release-1.6.1.zip

 

解压之后上传到linux服务器上。

 

1.3.2     编译

进入到ambari的主目录中,执行mvn编译命令。

 

  1. 给ambari打上版本号

[root@bigData-02 ~]# mvn versions:set -DnewVersion=1.6.1.1

 

注意此处的版本号需要是四位数字,下载的版本是1.6.1,此处我们在后面加上一个自己的版本,所以定为1.6.1.1

 

[INFO] Ambari Main ....................................... SUCCESS [1.415s]

[INFO] Apache Ambari Project POM ......................... SKIPPED

[INFO] Ambari Web ........................................ SKIPPED

[INFO] Ambari Views ...................................... SKIPPED

[INFO] Ambari Admin View ................................. SKIPPED

[INFO] Ambari Server ..................................... SKIPPED

[INFO] Ambari Agent ...................................... SKIPPED

[INFO] Ambari Client ..................................... SKIPPED

[INFO] Ambari Python Client .............................. SKIPPED

[INFO] Ambari Groovy Client .............................. SKIPPED

[INFO] Ambari Shell ...................................... SKIPPED

[INFO] Ambari Python Shell ............................... SKIPPED

[INFO] Ambari Groovy Shell ............................... SKIPPED

[INFO] ------------------------------------------------------------------------

[INFO] BUILD SUCCESS

[INFO] ------------------------------------------------------------------------

[INFO] Total time: 7.592s

[INFO] Finished at: Wed Dec 03 14:13:44 CST 2014

[INFO] Final Memory: 15M/211M

 

  1. 编译ambari

[root@bigData-02 ambari]# mvn -B clean install package rpm:rpm -DnewVersion=1.6.1.1 -DskipTests -Dpython.ver="python >= 2.6" -Preplaceurl

 

[INFO] Ambari Main ....................................... SUCCESS [14.721s]

[INFO] Apache Ambari Project POM ......................... SUCCESS [1.160s]

[INFO] Ambari Web ........................................ SUCCESS [48.102s]

[INFO] Ambari Views ...................................... SUCCESS [13.944s]

[INFO] Ambari Admin View ................................. SUCCESS [44.792s]

[INFO] Ambari Server ..................................... SUCCESS [6:25.135s]

[INFO] Ambari Agent ...................................... SUCCESS [19.533s]

[INFO] Ambari Client ..................................... SUCCESS [0.239s]

[INFO] Ambari Python Client .............................. SUCCESS [2.208s]

[INFO] Ambari Groovy Client .............................. SUCCESS [6.670s]

[INFO] Ambari Shell ...................................... SUCCESS [0.699s]

[INFO] Ambari Python Shell ............................... SUCCESS [1.339s]

[INFO] Ambari Groovy Shell ............................... SUCCESS [5.103s]

[INFO] ------------------------------------------------------------------------

[INFO] BUILD SUCCESS

 

自此编译成功。

编译技巧:

1)需要注意的是此处maven编译大约要下载258M左右的依赖,在网络不好的情况下经常会出现time out的异常,并且需要反复编译,特别耗时,第一次编译大概花了一天时间,因此编译的时候可以对project进行逐个编译,节约时间。

2)项目中需要使用nodejs中的npm管理依赖,有些依赖特别难下载,下载好之后会存放在ambari-web/node_modules中,在下次编译的时候可以对ambari-web/node_modules备份,下次编译的时候,可以先对项目进行mvn clean删除,然后再将备份的node_modules拷入项目中,重新执行mvn install操作,可以节省很多时间。

 

1.3.3     安装RPM包

Ambari安装需要ambari-server安装到管理机上,ambari-agent安装到集群节点上。

 

Ambari-server的rpm包

ambari-server/target/rpm/ambari-server/RPMS/noarch/ambari-server-*.noarch.rpm

 

Ambari-agent的rpm包

ambari-agent/target/rpm/ambari-agent/RPMS/x86_64/ambari-agent-*.rpm

© 著作权归作者所有

bigdataboy
粉丝 0
博文 8
码字总数 7704
作品 0
朝阳
程序员
私信 提问
Ambari在离线环境中安装Hadoop集群

(WJW)Ambari在离线环境中安装Hadoop集群 如果手工安装Hadoop集群,在管理和后继部署中,越来越多的问题不断出现,主要如下:+ 各集群节点的配置同步+ 新应用的部署:比如为集群添加hbase应用,...

白石
2015/10/26
0
0
ambari部署hadoop集群

1、基本工具 yum、scp、curl、wget、pdsh、ssh 2、环境准备 2.1、系统环境 Centos6.5 64bit Ambari 1.4.3.38 2.2、ambari server 与 ambari agent 服务器root ssh无密互访 Ambari server服务...

chunhei2008
2014/01/18
0
0
centos7.4配置ambari2.4.0.1+HDP-2.5.0.0

前言   由于项目需求,最近需要使用ambari配置hdp,因此在公司找了台搭建一套测试环境,测试环境运行在kvm虚拟机上,ambari版本和hdp版本没有采用最新版进行配置,为了快速进行配置,使用了...

sdhzdtwhm
2018/07/09
0
0
简单分析Ambari——顶级Hadoop管理方案

前面我们提到了两个比较火的Hadoop集群运维管理工具 Ambari和Cloudera Manager。它们集安装,配置,监控于一身,对于Hadoop的初学者可以起到很好的帮助作用。这篇文章就对Ambari着重介绍一下...

叁金
2018/05/25
0
0
Ambari离线安装hadoop集群所需资源包

ambari安装包 http://public-repo-1.hortonworks.com/ambari/centos6/ambari-1.7.0-centos6.tar.gz HDP(Hortonworks Data Platform) http://public-repo-1.hortonworks.com/HDP/centos6/H......

遇见o未来
2015/01/27
0
0

没有更多内容

加载失败,请刷新页面

加载更多

DLA SQL技巧:行、列转换和JSON数据列展开

1. 简介 在数据库SQL处理中,常常有行转列(Pivot)和列转行(Unpivot)的数据处理需求。本文以示例说明在Data Lake Analytics中,如何使用SQL的一些技巧,达到行转列(Pivot)和列转行(Unp...

阿里云官方博客
13分钟前
0
0
分布式数据库选型——数据水平拆分方案

概述 水平拆分的概念随着分布式数据库的推广已为大部分人熟知。分库分表、异构索引、小表广播、这些功能几乎是产品功能需求标配。然而有些客户使用分布式数据库后的体验不尽如意。 本文尝试从...

阿里云云栖社区
14分钟前
0
0
Swagger2常用注解说明

这里只讲述@Api、@ApiOperation、@ApiImplicitParams、@ApiImplicitParam、@ApiParam、@ApiModel、@ApiModelProperty、ApiResponses、@ApiResponse这几个常用的。 一、@Api 用在请求的类上,...

Ryan-瑞恩
14分钟前
0
0
DM 源码阅读系列文章(八)Online Schema Change 同步支持

作者:lan 本文为 DM 源码阅读系列文章的第八篇,上篇文章 对 DM 中的定制化数据同步功能进行详细的讲解,包括库表路由(Table routing)、黑白名单(Black & white table lists)、列值转化...

TiDB
23分钟前
1
0
使用nginx负载均衡登录后不能跳转的问题

upstream test-server { #ip_hash; server 192.168.0.1:8080 weight=10; server 192.168.0.1:8081 weight=10;} 在测试环境中模拟生产使用nginx做应用负载均衡,登录页面可以...

Jack088
32分钟前
1
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部