文档章节

Hadoop 2.4 源代码编译

skyim
 skyim
发布于 2015/03/09 09:35
字数 193
阅读 49
收藏 0
1.首先需要环境配置   JDK  配置 (环境变量配置在当前用户下面)   下载jdk-7u75-linux-x64.tar.gz
vim ~/.bash_profile
#set environment for JDK
export JAVA_HOME=/home/love_peace/software/jdk1.7.0_75
export CLASSPATH=.:$JAVA_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$PATH
最后
source ~/.bash_profile

2.maven 的安装 下载apache-maven-3.2.5-bin.tar.gz 
vim ~/.bash_profile
export PATH=$PATH:/home/love_peace/software/apache-maven-3.2.5/bin
最后
source ~/.bash_profile

3.接下来使用切换成root权限
yum install autoconf automake libtool cmake   openssl-devel ncurses-devel gcc*
4.安装protobuf 安装protobuf-2.5.0

到protobuf目录下面
.configure && make && make install

5. mvn package -Pdist,native -DskipTests -Dtar (这步操作需要花费将近30-60分钟,需要查看相关的网速)
最后生成如下信息,代表已经成功



© 著作权归作者所有

skyim

skyim

粉丝 87
博文 33
码字总数 20311
作品 0
杭州
程序员
私信 提问
CentOS7中编译Hadoop2.x

环境 VirtualBox-5.0, CentOS-7.1, Hadoop-2.7.1 1、关于Hadoop本地库 1.1、可能存在的问题 Hadoop发行包自带的库文件可能与本地操作系统不兼容。特别是在Hadoop-2.5.1之前的版本,自带的本地...

悟空太多啦
2015/08/03
700
0
编译hadoop2.x的hadoop-eclipse-plugin和配置

一、编译 1.安装jdk,并且配置好环境变量。 2.eclipse已经下载并且配置好了。 3.安装ant,并且配置好了环境变量。 4.hadoop包在windows本地已经有了,要和hadoop集群上的hadoop包一样,eclip...

cjun1990
2015/07/06
439
0
Spark的源码编译

Spark的版本下载和源码编译方法的官方地址:http://spark.apache.org/downloads.html 直接进Github,复制源码:https://github.com/apache/spark Spark 编译   有三种方式:SBT、MAVEN、m...

openthings
2015/12/17
143
0
Hadoop2.2.0 入门教程(一)之hadoop2.x编译mac版本)

Hadoop 编译 在apache官网提供的hadoop2.x的编译后的hadoop项目,但是官方提供的编译后的项目是在32bit电脑上编译的,那么在64bit的电脑上,hadoop程序的运行还和本地环境有关,所以建议大家...

残风vs逝梦
2014/07/03
3.9K
0
Hadoop Eclipse 插件编译安装

最近开始学习Hadoop,hadoop 的新版本为了能和各个eclipse 的版本兼容,因此只提供了源代码,开发人员需要手动编译。 hadoop eclipse 插件的源代码位于$HADOOP_HOME/src/contrib/eclipse-pl...

chengxw
2013/05/18
996
0

没有更多内容

加载失败,请刷新页面

加载更多

3_数组

3_数组

行者终成事
今天
7
0
经典系统设计面试题解析:如何设计TinyURL(二)

原文链接:https://www.educative.io/courses/grokking-the-system-design-interview/m2ygV4E81AR 编者注:本文以一道经典的系统设计面试题:《如何设计TinyURL》的参考答案和解析为例,帮助...

APEMESH
今天
7
0
使用logstash同步MySQL数据到ES

概述   在生成业务常有将MySQL数据同步到ES的需求,如果需要很高的定制化,往往需要开发同步程序用于处理数据。但没有特殊业务需求,官方提供的logstash就很有优势了。   在使用logstas...

zxiaofan666
今天
10
0
X-MSG-IM-分布式信令跟踪能力

经过一周多的鏖战, X-MSG-IM的分布式信令跟踪能力已基本具备, 特点是: 实时. 只有要RX/TX就会实时产生信令跟踪事件, 先入kafka, 再入influxdb待查. 同时提供实时sub/pub接口. 完备. 可以完整...

dev5
今天
7
0
OpenJDK之CyclicBarrier

OpenJDK8,本人看的是openJDK。以前就看过,只是经常忘记,所以记录下 图1 CyclicBarrier是Doug Lea在JDK1.5中引入的,作用就不详细描述了,主要有如下俩个方法使用: await()方法,如果当前线...

克虏伯
今天
8
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部