文档章节

HADOOP INSTALL

MtrS
 MtrS
发布于 2014/11/16 19:18
字数 188
阅读 124
收藏 5

hadoop集群中的主机名不能带有下划线。 http://www.cnblogs.com/yuechaotian/archive/2013/02/20/2918306.html

<!-- lang: shell -->

[hadoop@PROC_141 bin]$ cat /etc/profile.d/hadoop.sh 

export HADOOP_HOME=/opt/old/htt/hadoop/hadoop-2.5.1
export HADOOP_PREFIX=/opt/old/htt/hadoop/hadoop-2.5.1
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_PREFIX"/lib/native"
export HADOOP_HDFS_HOME="$HADOOP_PREFIX"
export HADOOP_COMMON_HOME="$HADOOP_PREFIX"
export HADOOP_YARN_HOME="$HADOOP_HOME"
export HADOOP_CONF_DIR="$HADOOP_PREFIX"/etc/hadoop
export HADOOP_OPTS=-Djava.library.path="$HADOOP_PREFIX"lib
export HADOOP_MAPRED_HOME="$HADOOP_PREFIX"

export PATH=$PATH:$HADOOP_PREFIX/bin:$HADOOP_PREFIX/sbin


vim $HADOOP_PREFIX/etc/hadoop/core-site.xml 

<configuration>
  <property>
      <name>fs.defaultFS</name>
      <value>hdfs://PROC-141</value>
  </property>
  <property>
        <name>fs.default.name</name>
        <value>hdfs://PROC-141:9000</value>
  </property>
</configuration>

vim $HADOOP_PREFIX/etc/hadoop/hdfs-site.xml 

<configuration>
  <property>
    <name>dfs.datanode.data.dir</name>
    <value>file:///home/hadoop/local/var/hadoop/hdfs/datanode</value>
  </property>
  <property>
    <name>dfs.namenode.name.dir</name>
    <value>file:///home/hadoop/local/var/hadoop/hdfs/namenode</value>
  </property>
  <property>
    <name>dfs.namenode.checkpoint.dir</name>
    <value>file:///home/hadoop/local/var/hadoop/hdfs/namesecondary</value>
  </property>
  <property>
    <name>dfs.replication</name>
    <value>1</value>
  </property>
</configuration>

[hadoop@PROC_141 bin]$ jps 12216 NameNode 12362 DataNode 13915 Jps 12574 SecondaryNameNode 13023 NodeManager 12895 ResourceManager

© 著作权归作者所有

共有 人打赏支持
MtrS
粉丝 30
博文 549
码字总数 352132
作品 0
榆林
Ubuntu14.04 搭建hadoop单机版

一、在Ubuntu下创建hadoop组和hadoop用户 增加hadoop用户组,同时在该组里增加hadoop用户,后续在涉及到hadoop操作时,我们使用该用户。 1、创建hadoop用户组 2、创建hadoop用户 sudo addus...

喜欢敲代码的感觉
2014/10/16
0
0
pippo/hadoop-ansible

Hadoop-ansible Install Hadoop cluster with ansible Now Support CentOS 7.x JDK is OpenJDK-1.8 Hadoop is the latest version 3.0.0 Before Install Use DNS Server or update /etc/host......

pippo
01/03
0
0
hadoop 的安装配置教程

Hadoop安装配置简略教程 http://www.powerxing.com/install-hadoop-simplify/ Hadoop安装教程_单机/伪分布式配置 http://www.powerxing.com/install-hadoop/ Hadoop集群安装配置教程 http:/......

haopeng
2015/12/10
47
0
centos6.5 64位下编译hadoop2.5.1源码

需要的工具:centos6.5 -64bit jdk1.7.0.71 maven3.23 (http://mirrors.cnnic.cn/apache/maven/maven-3/3.2.3/binaries/apache-maven-3.2.3-bin.tar.gz) ant1.9 (http://mirrors.cnnic.cn......

逸风如梦
2014/11/15
0
0
Hadoop 2.2 分布式集群搭建

1. 预备条件 安装了Java 6.0以上版本的JDK; 必备开发库,运行脚本 [plain] view plaincopyprint? yum -y install lzo-devel zlib-devel gcc autoconf automake libtool cmake openssl-devel......

English0523
2014/01/07
0
0

没有更多内容

加载失败,请刷新页面

加载更多

OSChina 周三乱弹 —— 我们无法成为野兽

Osc乱弹歌单(2018)请戳(这里) 【今日歌曲】 @ _刚刚好: 霸王洗发水这波很骚 手机党少年们想听歌,请使劲儿戳(这里) hahahahahahh @嘻酱:居然忘了喝水。 让你喝可乐的话, 你准忘不了...

小小编辑
28分钟前
0
0
vm GC 日志 配置及查看

-XX:+PrintGCDetails 打印 gc 日志 -XX:+PrintTenuringDistribution 监控晋升分布 -XX:+PrintGCTimeStamps 包含时间戳 -XX:+printGCDateStamps 包含时间 -Xloggc:<filename> 可以将数据保存为......

Canaan_
昨天
0
0
学习设计模式——生成器模式

1. 认识生成器模式 1. 定义:将一个复杂对象的构建与它的表示分离,使得同样的构建过程可以创建不同的表示 2. 组成: Builder:生成器接口,定义创建一个Product对象所需要的各个组件的操作,...

江左煤郎
昨天
0
0
C语言精要(第二章:基本数据类型)

2.1 C语言基本数据类型 在计算机术语中,把⼆进制数中的某⼀位数又称为⼀个⽐特(bit)。⽐特这个单位对于计算机⽽⾔,在度量上是最⼩的单位。除了⽐特之外,还有字节(byte)这个术语。⼀个...

ryanliue
昨天
0
0
实现下拉菜单多选框效果

<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN"><html><li>工作意愿地:<%-- <c:forEach items="${list}" var="list"><input type="checkbox" value="${list......

lanjian28
昨天
1
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部