文档章节

Hadoop安装与配置

小秘姐姐
 小秘姐姐
发布于 2017/09/06 00:50
字数 293
阅读 14
收藏 0

1.安装配置JDK

https://my.oschina.net/xiaomijiejie/blog/1529007

2.因为ubuntu库里面并没有hadoop的安装包,不能用apt-get安装,需要自己下载

http://mirrors.hust.edu.cn/apache/hadoop/common/这个地址下面去找一个你需要的版本

wget http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.6.4/hadoop-2.6.4.tar.gz

3.解压并配置

tar -zxvf hadoop-2.6.4.tar.gz

打开hadoop的conf文件夹需要配置4个文件

配置hadoop-env.sh,将JAVA_HOME改为你自己环境安装的目录,不记得可以执行 echo $JAVA_HOME

编辑core-site.xml

-----hadoop工作目录------
<property>
<name>hadoop.tmp.dir</name>
<value>/hadoop</value>
</property>

--------元素目录-------------
<property>
<name>dfs.name.dir</name>
<value>/hadoop/name</value>
</property>

----文件目录------
<property>
<name>fs.default.name</name>
<value>hdfs://hadoop:6666</value>
</property>

编辑hdfs-site.xml

----数据存放目录------
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>

编辑mapred-site.xml

<property>
<name>mapred.job.tracker</name>
<value>hadoop:6666</value>
</property>

4.配置环境变量

vim /ect/proile 并执行source /etc/profile使环境变量配置马上生效

5.直接输入hadoop输出提示信息即表示安装成功

格式化文件系统:hadoop namenode -format

输入jps返回启动项即为成功

© 著作权归作者所有

共有 人打赏支持
下一篇: ubuntu安装jdk
小秘姐姐
粉丝 4
博文 16
码字总数 4029
作品 0
成都
程序员
私信 提问

暂无文章

课时17 第三课Spark内部原理剖析与源码阅读(五)

为何spark shuffle比mapreduce shuffle慢? 主要是spark shuffle的shuffle read阶段还不够优秀,它是基于hashmap实现的,shuffle read会把shuffel write阶段已经排序数据给重新转成乱序的,转...

刀锋
14分钟前
0
0
Function函数式接口

Function函数式接口传入一个参数,返回一个值。 然后我们使用这个写个demo看看: 输出: 接口内部还有两个default方法和一个static方法,然后我们先看一下static方法 返回一个始终返回其输入...

woshixin
29分钟前
1
0
开发者和架构师之间最大的区别是什么?

1、开发者和架构师之间最大的区别是什么? 架构师和开发者一样,也经常写代码,简单的说,开发者和架构师之间最大的区别就是技术领导力。 软件架构师的角色需要理解最重要的架构驱动力是什么...

James-
今天
2
0
java框架学习日志-4

补充一些spring配置文件的方法。 设置别名: <!--通过name直接设置别名--> <bean name="user2" class="cn.sxt.factory.UserDynamicFactory"> </bean> <!--有id的情况下也可以设置......

白话
今天
2
0
20181213 上课截图

小丑鱼00
今天
1
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部