文档章节

HADOOP INSTALL

MtrS
 MtrS
发布于 2014/11/16 19:18
字数 188
阅读 123
收藏 5

hadoop集群中的主机名不能带有下划线。 http://www.cnblogs.com/yuechaotian/archive/2013/02/20/2918306.html

<!-- lang: shell -->

[hadoop@PROC_141 bin]$ cat /etc/profile.d/hadoop.sh 

export HADOOP_HOME=/opt/old/htt/hadoop/hadoop-2.5.1
export HADOOP_PREFIX=/opt/old/htt/hadoop/hadoop-2.5.1
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_PREFIX"/lib/native"
export HADOOP_HDFS_HOME="$HADOOP_PREFIX"
export HADOOP_COMMON_HOME="$HADOOP_PREFIX"
export HADOOP_YARN_HOME="$HADOOP_HOME"
export HADOOP_CONF_DIR="$HADOOP_PREFIX"/etc/hadoop
export HADOOP_OPTS=-Djava.library.path="$HADOOP_PREFIX"lib
export HADOOP_MAPRED_HOME="$HADOOP_PREFIX"

export PATH=$PATH:$HADOOP_PREFIX/bin:$HADOOP_PREFIX/sbin


vim $HADOOP_PREFIX/etc/hadoop/core-site.xml 

<configuration>
  <property>
      <name>fs.defaultFS</name>
      <value>hdfs://PROC-141</value>
  </property>
  <property>
        <name>fs.default.name</name>
        <value>hdfs://PROC-141:9000</value>
  </property>
</configuration>

vim $HADOOP_PREFIX/etc/hadoop/hdfs-site.xml 

<configuration>
  <property>
    <name>dfs.datanode.data.dir</name>
    <value>file:///home/hadoop/local/var/hadoop/hdfs/datanode</value>
  </property>
  <property>
    <name>dfs.namenode.name.dir</name>
    <value>file:///home/hadoop/local/var/hadoop/hdfs/namenode</value>
  </property>
  <property>
    <name>dfs.namenode.checkpoint.dir</name>
    <value>file:///home/hadoop/local/var/hadoop/hdfs/namesecondary</value>
  </property>
  <property>
    <name>dfs.replication</name>
    <value>1</value>
  </property>
</configuration>

[hadoop@PROC_141 bin]$ jps 12216 NameNode 12362 DataNode 13915 Jps 12574 SecondaryNameNode 13023 NodeManager 12895 ResourceManager

© 著作权归作者所有

共有 人打赏支持
MtrS
粉丝 30
博文 549
码字总数 352132
作品 0
榆林
Ubuntu14.04 搭建hadoop单机版

一、在Ubuntu下创建hadoop组和hadoop用户 增加hadoop用户组,同时在该组里增加hadoop用户,后续在涉及到hadoop操作时,我们使用该用户。 1、创建hadoop用户组 2、创建hadoop用户 sudo addus...

喜欢敲代码的感觉
2014/10/16
0
0
pippo/hadoop-ansible

Hadoop-ansible Install Hadoop cluster with ansible Now Support CentOS 7.x JDK is OpenJDK-1.8 Hadoop is the latest version 3.0.0 Before Install Use DNS Server or update /etc/host......

pippo
01/03
0
0
centos6.5 64位下编译hadoop2.5.1源码

需要的工具:centos6.5 -64bit jdk1.7.0.71 maven3.23 (http://mirrors.cnnic.cn/apache/maven/maven-3/3.2.3/binaries/apache-maven-3.2.3-bin.tar.gz) ant1.9 (http://mirrors.cnnic.cn......

逸风如梦
2014/11/15
0
0
hadoop 的安装配置教程

Hadoop安装配置简略教程 http://www.powerxing.com/install-hadoop-simplify/ Hadoop安装教程_单机/伪分布式配置 http://www.powerxing.com/install-hadoop/ Hadoop集群安装配置教程 http:/......

haopeng
2015/12/10
47
0
Hadoop 2.2 分布式集群搭建

1. 预备条件 安装了Java 6.0以上版本的JDK; 必备开发库,运行脚本 [plain] view plaincopyprint? yum -y install lzo-devel zlib-devel gcc autoconf automake libtool cmake openssl-devel......

English0523
2014/01/07
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

git +STS使用问题解决一

1. 2.点以一个pull就是更新代码 3.synchronize workSpace 同步代码,同SVN一致

森火
2分钟前
0
0
powerBi odbc 连接impala 实现自助分析

配置Impala以使用ODBC 可以将第三方产品设计为使用ODBC与Impala集成。为获得最佳体验,请确保支持您打算使用的任何第三方产品。验证支持包括检查Impala,ODBC,操作系统和第三方产品的版本是...

hblt-j
7分钟前
0
0
Purism FAQ

<font size="37" color="#006248" face="幼圆"> <p align="center"> Purism FAQ </p> </font> 原文:https://puri.sm/faq/ 原作者:Purism Team 翻译者:冰焰火灵X 1079092922@qq.com 文章许......

ICE冰焰火灵X
22分钟前
0
0
nginx+webdav

1、配置Nginx以支持WebDav: Webdav是nginx一个组件,默认编译nginx时是没有安装这个组件的。 如果跟应用公用一个nginx,需要重新编译安装nginx,重新安装前需要备份好原来的nginx.conf。 1....

yaukie
28分钟前
0
0
spring 事件

ContextRefreshedEvent Event raised when an {@code ApplicationContext} gets initialized or refreshed. ContextClosedEvent Event raised when an {@code ApplicationContext} gets clos......

Canaan_
39分钟前
1
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部