文档章节

hadoop安装搭建过程中遇到的问题与解决方案

Z
 Zoe_2016
发布于 2017/03/30 23:32
字数 183
阅读 21
收藏 0
  1. 启动hadoop时,slave节点jps之后缺少datanode:

原因:查看普通用户的datanode log,发现datanode clusterID与namenode clusterID(在/home/zoe/hadoopdata/dfs/name/current/VERSION可以查看namenode clusterID)不一致,可能是由于多次配置hadoop环境后格式化造成的

解决:清空master的"~/hadoopdata",重新格式化;

否则进入hadoop配置文件的core-site.xml,如下编辑:

<configuration>

<property>
<name>dfs.replication</name>
<value>1</value>
</property> 

 

<property>
  <name>dfs.datanode.data.dir</name>
 <value>/home/zoe/hadoop/hadoopdata/dfs/name/</value>
</property>  
      
<property>
  <name>dfs.datanode.data.dir</name>
  <value>/home/zoe/hadoop/hadoopdata/dfs/data/</value>

改为:<value>namenode clusterID</value>
</property>

 

</configuration>

    2. 计算pi值时出"no roote to host":

解决:关闭防火墙:service iptables stop

    

 

更多:【http://m.blog.csdn.net/article/details?id=46045643

© 著作权归作者所有

Z
粉丝 0
博文 36
码字总数 12725
作品 0
广州
私信 提问
Hadoop集群(三) Hbase搭建

前面已经完成Zookeeper和HDFS的安装,本文会详细介绍Hbase的安装步骤。以及安装过程中遇到问题的汇总。 系列文章: Hadoop集群(一) Zookeeper搭建 Hadoop集群(二) HDFS搭建 Hadoop集群(四) H...

hsbxxl
2017/10/11
0
0
HDFS 集群无法启动 DataNode 节点以及管理界面缺少 DataNode 节点的解决方法

版权声明:Follow your heart and intuition. https://blog.csdn.net/qq_35246620/article/details/88657826 文章目录 前言 前言 搭建了一个 HDFS 集群,用了 3 台虚拟机,1 台虚拟机是作为节...

CG国斌
03/21
0
0
hbase分布式集群搭建

hbase和hadoop一样也分为单机版、伪分布式版和完全分布式集群版本,这篇文件介绍如何搭建完全分布式集群环境搭建。 hbase依赖于hadoop环境,搭建habase之前首先需要搭建好hadoop的完全集群环...

纯洁的虫纸
2017/08/11
0
0
零基础学习hadoop到上手工作线路指导(初级篇)

零基础学习hadoop,没有想象的那么困难,也没有想象的那么容易。才刚接触大数据时,曾经想过培训,但是培训机构的选择就让我很纠结。因为师兄跟我说,很多培训机构的老师其实以前就是他们的学...

我思gu我在
2017/01/09
211
3
解决Mac 下 Jekyll + GitHub Pages搭建个人博客相关问题

网上有很多关于Jekyll + GitHub Pages搭建个人博客的教程,官方文档也写得很好,具体流程可以参考,这里就不详细写了。接下来我我主要记录一下我在安装过程中遇到的问题。 Install on macOS 官...

Searchen
2018/05/22
0
0

没有更多内容

加载失败,请刷新页面

加载更多

同名依赖,多次引入导致的程序错误

表现: 本地测试正常,打包上线后报错找不到某个方法(缺少依赖),检测依赖发现,同名依赖有两个版本。 解决:删除一个,程序正常

避难所
28分钟前
3
0
在HTML中的下拉框中实现超连接

<!DOCTYPE html><html lang="zh-CN"><head> <meta charset="UTF-8"> <link rel="canonical" href="https://blog.csdn.net/weixin_34228617/article/details/86130280"/> ......

mickelfeng
33分钟前
3
0
Content7关闭防火墙命令

在外部访问CentOS中部署应用时,需要关闭防火墙。 关闭防火墙命令:systemctl stop firewalld.service 开启防火墙:systemctl start firewalld.service 关闭开机自启动:systemctl disable f...

无名氏的程序员
34分钟前
3
0
分布式存储原理:TiDB

浮躁的码农
46分钟前
7
0
CSS实现圆角边框的完美解决方案

css实现图片圆角,兼容所有浏览器: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 <style type= "text/css" > /*通用样式--容器宽度值*/ .s......

前端老手
今天
5
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部