文档章节

CDH 5.10.0安装单机版(在线版)

悲喜世界
 悲喜世界
发布于 2017/04/14 11:03
字数 806
阅读 1847
收藏 0

因工作需要,尝试安装大数据集群换进,选择了CDH版,个人装了好几遍,现在做下记录,因为是在线版,下载的软件版本可能有所不同,后续会有离线版安装。

环境准备:

    1、服务器暗转了mysql

    2、mysql驱动包存放到 /usr/share/java/mysql-connector-java.jar(名称必须一样,不带版本号

    3、关闭防火墙 service iptables stop (临时关闭) chkconfig iptables off(关闭开机启动)

        说明:这是为防止防火墙拦截端口通信,造成安装失败,安装成功后,根据个人情况,自行调整。

    4、关闭SELINUX,vi /etc/selinux/config 修改

        SELINUX=disabled   #重启后永久生效,

        说明:这是系统管理软件权限的设置,设置起来很麻烦,想学习的自己深究。

    5、修改主机名 vi  /etc/sysconfig/network文件

        NETWORKING=yes

        HOSTNAME=主机名

        修改 vi /etc/hosts文件

        写上本机ip地址,空格主机名,具体可自己百度。

配置完以上这些,最好重弄服务器一次,接下来开始安装CDH。

 

1:安装运行环境

下载安装文件

        wget  http://archive-primary.cloudera.com/cm5/installer/5.10.0/cloudera-manager-installer.bin

建议存放在:   /opt/cloudera/parcel-repo  这是CDH  cloudera manager 安装包默认存储路径。

授权执行:chmod  777  cloudera-manager-installer.bin

提前下载deamons文件存放到/opt/cloudera/parcel-repo/下

wget -c  

http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5.10.0/RPMS/x86_64/cloudera-manager-daemons-5.10.0-1.cm5100.p0.85.el6.x86_64.rpm

说明:这个文件比较大,直接运行安装命令,可能因为下载失败,造成安装失败。

运行安装  ./cloudera-manager-installer.bin

中间要确认很多次,如果安装失败,可以查看日志,日志位置:

/val/log/cloudera-scm-server/cloudera-scm-server.log

 

安装成功后,会提示到浏览器登录:http://localhost:7180/

账号密码:admin  admin

 

2:安装CDH

配置mysql数据库:

 /opt/cm-5.4.7/share/cmf/schema/scm_prepare_database.sh mysql cm -hlocalhost -u账号 -p密码 --scm-host localhost scm scm scm

先不要登录安装,先下载CDH安装包。

访问http://archive-primary.cloudera.com/cdh5/parcels/5.10.0.41/,下载文件

CDH-5.10.0-1.cdh5.10.0.p0.41-el6.parcel // centos6下载el6文件,centos5下载el5文件

CDH-5.10.0-1.cdh5.10.0.p0.41-el6.parcel.sha1

manifest.json

存放到默认路径下/opt/cloudera/parcel-repo/,CDH-5.10.0-1.cdh5.10.0.p0.41-el6.parcel.sha1必须重命名去掉最后的1,不然安装失败。

登录页面,

 

登录成功后,第一页同意左下角协议,第二也选择第一列免费版。

后续是支持软件演示,点击下一步,选择下载好的CDH版本,CDH-5.10.0-1.cdh5.10.0.p0.41-el6,下一步,搜索服务器,文本框输入本机IP点击search搜索,选择搜到的主机,下一步,后面会同意各种条约,自动安装JDK。

下一步到服务安装页面,这里可能会报错,会有日志位置提示,可能是某软件下载失败,需要自己手动下载,复制到/opt/cloudera/parcel-repo/下,重新安装

环境安装成功后,进入CDH安装,因为已经提前下载好了,会直接进入解压。

最后,终于大功告成,哈哈。

cloudera 服务重启方式:

/etc/init.d/cloudera-scm-server restart

 

这篇博文是安装后的总结,图片少了些,如果遇到问题,可留言讨论。

 

    

© 著作权归作者所有

悲喜世界
粉丝 4
博文 29
码字总数 16851
作品 0
海淀
程序员
私信 提问
Hadoop入门扫盲:hadoop发行版介绍与选择

一、hadoop发行版介绍 目前Hadoop发行版非常多,有Intel发行版,华为发行版、Cloudera发行版(CDH)、Hortonworks版本等,所有这些发行版均是基于Apache Hadoop衍生出来的,之所以有这么多的...

南非蚂蚁
2016/11/03
0
0
Slackware Linux 12.2 正式版发布

Patrick J. Volkerding大神今早放出Slackware Linux 12.2正式版,并放出声明及下载。上一个版本是2008-05-02的12.1,过了7个多月。对真正的系统管理员来说,Slackware还是非常好用的。 使用sla...

红薯
2008/12/11
342
0
基于Cloudera Manager 5和CDH5(版本5.3.3)的Hadoop集群安装

一、Cloudera Manager/CDH5 1、关于cloudera manager和CDH是什么,这里不做详细介绍了。有官网和百科介绍。 附上官网地址:cloudera manager 2、官网的安装指南 官方文档提供了三种安装方式:...

Mr_陈
2015/04/29
0
0
Cloudera CDH 、Hortonworks DHP和MapR比较

目前啊,都知道,大数据集群管理方式分为手工方式(Apache hadoop)和工具方式(Ambari + hdp 和Cloudera Manger + CDH)。   手工部署呢,需配置太多参数,但是,好理解其原理,建议初学这...

hblt-j
2018/08/13
1K
0
Cloudera Manager5及CDH5离线安装说明

关于技术选型 --- http://www.tuicool.com/articles/7RRrie 同时可参考: http://www.doc88.com/p-0042075356791.html 1. 概述 本文概述了在CentOS6环境下,离线安装Cloudera Manager5(以下称...

强子哥哥
2015/10/23
1K
0

没有更多内容

加载失败,请刷新页面

加载更多

只需一步,在Spring Boot中统一Restful API返回值格式与统一处理异常

统一返回值 在前后端分离大行其道的今天,有一个统一的返回值格式不仅能使我们的接口看起来更漂亮,而且还可以使前端可以统一处理很多东西,避免很多问题的产生。 比较通用的返回值格式如下:...

晓月寒丶
昨天
59
0
区块链应用到供应链上的好处和实际案例

区块链可以解决供应链中的很多问题,例如记录以及追踪产品。那么使用区块链应用到各产品供应链上到底有什么好处?猎头悬赏平台解优人才网小编给大家做个简单的分享: 使用区块链的最突出的优...

猎头悬赏平台
昨天
28
0
全世界到底有多少软件开发人员?

埃文斯数据公司(Evans Data Corporation) 2019 最新的统计数据(原文)显示,2018 年全球共有 2300 万软件开发人员,预计到 2019 年底这个数字将达到 2640万,到 2023 年达到 2770万。 而来自...

红薯
昨天
65
0
Go 语言基础—— 通道(channel)

通过通信来共享内存(Java是通过共享内存来通信的) 定义 func service() string {time.Sleep(time.Millisecond * 50)return "Done"}func AsyncService() chan string {retCh := mak......

刘一草
昨天
58
0
Apache Flink 零基础入门(一):基础概念解析

Apache Flink 的定义、架构及原理 Apache Flink 是一个分布式大数据处理引擎,可对有限数据流和无限数据流进行有状态或无状态的计算,能够部署在各种集群环境,对各种规模大小的数据进行快速...

Vincent-Duan
昨天
60
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部