文档章节

使用CM4快速部署CDH4集群

cwalet
 cwalet
发布于 2014/02/21 15:31
字数 225
阅读 541
收藏 3

在CentOS下通过CM4(Cloudera Manager)安装CDH4(Cloudera Distribution for Hadoop)集群,

安装之前需先配置好SSH相互之前免密登录以及/etc/hosts/etc/sysconfig/network文件,

安装脚本见:http://www.oschina.net/code/snippet_109451_38773

搭建完之后打开浏览器访问namenode:7180就可以完成整个集群的部署。

注意:

1.yum,createrepo,reposync都是python脚本,如果出现类似如下错误:

ImportError: No module named rpm

可能是安装了多个版本的python,需要修改这些命令使其指向系统默认pyhton版本,即/usr/bin/python2.4

2.Reposync is used to synchronize a remote yum repository to a local directory using yum to retrieve the packages.

Reposync被用来同步远程YUM资源库到本地目录,即通过yum获取数据包,该工具包含于yum-utils中。当然,使用wget -r命令也可以实现相同的功能。



© 著作权归作者所有

cwalet
粉丝 44
博文 111
码字总数 87663
作品 0
其他
私信 提问
Hadoop (CDH4发行版)集群部署

前言 折腾了一段时间hadoop的部署管理,写下此系列博客记录一下。 为了避免各位做部署这种重复性的劳动,我已经把部署的步骤写成脚本,各位只需要按着本文把脚本执行完,整个环境基本就部署完...

snakelxc
2013/07/10
6.7K
19
cdh4 hadoop,hive,impala,hbase本地库搭建及安装

--hadoop文件位置: log目录 : /var/log/hadoop-hdfs /var/log/hadoop-mapreduce /var/log/hbase /var/log/hive /var/log/hive/var/log/impala 安装目录: /usr/lib 启动命令目录: /etc/ini......

凡16
2014/01/05
1K
6
HTTPFS: 基于HTTP操作hadoop hdfs文件系统

一、HTTPFS简介 1:httpfs是cloudera公司提供的一个hadoop hdfs的一个http接口,通过WebHDFS REST API 可以对hdfs进行读写等访问 2:与WebHDFS的区别是不需要客户端可以访问hadoop集群的每一...

cloud-coder
2014/06/09
11.7K
5
一张表看懂ECS云服务器规格的升降配

摘要: 阿里云ECS规格种类丰富,可以升降配到底有什么规格?购买实例后,您可以通过升降配功能重新升级或降级资源的配置,但是到底那些是可以变更,哪些又不支持呢?一张表看懂ECS云服务器规...

阿里云云栖社区
2018/06/27
217
0
通过cloudera-manager来安装hadoop

通过cloudera-manager来安装hadoop 本人笨,装的过程碰了不少东西,其他网站转载的文章也没具体写清楚,以下我实战了下总结下来。 1. ssh登陆要安装管理界面的机器,确定关闭防火墙和selinux...

SANSOM
2013/12/17
5.8K
0

没有更多内容

加载失败,请刷新页面

加载更多

Python如何实现单例模式?其他23中设计模式python如何实现?

单例模式主要有四种方法:new、共享属性、装饰器、import。 # __ new__方法:class Singleton(object): def __new__(cls, *args, **kw): if not hasattr(cls, '_instance'): ......

每天学Python
5分钟前
5
0
在正则表达式的上下文中,“懒惰”和“贪婪”是什么意思?

有人可以用一种可以理解的方式解释这两个术语吗? #1楼 贪婪意味着您的表情将匹配尽可能大的组,懒惰意味着它将匹配最小的组。 对于此字符串: abcdefghijklmc 这个表达式: a.*c 贪婪的匹...

技术盛宴
9分钟前
37
0
springboot web 大文件上传源代码

一、 功能性需求与非功能性需求 要求操作便利,一次选择多个文件和文件夹进行上传; 支持PC端全平台操作系统,Windows,Linux,Mac 支持文件和文件夹的批量下载,断点续传。刷新页面后继续传输...

东方雨
10分钟前
34
0
这五类人最适合转Web前端,有你吗?

互联网的高速发展促使互联网企业对于网站等页面的用户体验要求也越来越高,导致网站开发难度越来越大,于是一个新兴职业应运而生——web前端工程师。 因为互联网时代的高速发展,公司企业的迫...

梦想编程
17分钟前
39
0
vue打包后静态资源图片失效&&vue动态设置img的src不生效

vue打包后静态资源图片失效: 老版本中需要找到config/index.js,找build打包对象里的assetsPublicPath属性,默认值为/,更改为./就好了; 新版本中只有手动更改vue.config.js, 在里面配置p...

liulunsheng
30分钟前
27
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部