cloudera离线安装部署文档

原创
2015/08/27 15:45
阅读数 243
三台centos服务器
192.168.12.101   n1
192.168.12.102   n2
192.168.13.30    n3
设置服务器ip为静态Ip,ip不会因为机器重启ip发生改变
[root@n1 ~]# cd /etc/sysconfig/network-scripts/
[root@n1 network-scripts]# cat ifcfg-eth0 
DEVICE=eth0
HWADDR=74:D4:35:DD:F4:3B
TYPE=Ethernet
UUID=37e135e0-0fdf-4e7e-a20e-afa8a808fbde
ONBOOT=yes
NM_CONTROLLED=yes
BOOTPROTO=static
IPADDR=192.168.12.101
NETMASK=255.255.255.0
GATEWAY=192.168.12.1

1、修改网络hostname 
vi /etc/sysconfig/network

vi /etc/hosts
192.168.12.101   n1
192.168.12.102   n2
192.168.13.30    n3

2、生成ssh无密钥登录
ssh-keygen -t rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
scp -r ~/.ssh/authorized_keys root@n2:~/.ssh/

3、卸载系统自带的jdk
最好还是先卸载掉openjdk,在安装sun公司的jdk.
先查看 rpm -qa | grep java
rpm -e --nodeps java-1.7.0-openjdk-1.7.0.45-2.4.3.3.el6.x86_64
rpm -e --nodeps tzdata-java-2013g-1.el6.noarch
rpm -e --nodeps java-1.6.0-openjdk-1.6.0.0-1.66.1.13.0.el6.x86_64


4、安装jdk
//安装jdk
rpm -ivh oracle-j2sdk1.7-1.7.0+update67-1.x86_64.rpm

配置jdk环境变量
JAVA_HOME=/usr/java/jdk1.7.0_67-cloudera

JRE_HOME=/usr/java/jdk1.7.0_67-cloudera/jre

PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin

CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$JRE_HOME/lib

export JAVA_HOME JRE_HOME PATH CLASSPATH


5、安装mysql数据库 修改mysql字符编码
yum install mysql-server
//设定开机启动
chkconfig mysqld on
//启动mysql
service mysqld start
//进入mysql
mysqladmin -u root password 'xxxx'
#activity monitor createdatabase amon DEFAULTCHARSET utf8 COLLATE utf8_general_ci;

设置root授权访问以上所有的数据库:

#授权root用户在主节点拥有所有数据库的访问权限 
grant all privileges on *.* to 'root'@'n1' identified by 'xxxx' with grant option; flush privileges;
设置mysql的字符集
编辑 /etc/my.cnf文件

view plaincopy
[client]  
default-character-set=utf8    
[mysqld]  
character_set_server=utf8


6、server端完成添加用户
useradd --system --home=/opt/cm-5.4.1/run/cloudera-scm-server/--no-create-home --shell=/bin/false --comment "Cloudera SCM User" cloudera-scm
执行sql脚本 自动创建cm数据库,如果数据库已存在需先删除数据库
/opt/cm-5.4.1/share/cmf/schema/scm_prepare_database.sh mysql cm -hlocalhost -uroot -proot --scm-host localhost scm scm scm

7、离线安装CHD,将下载的包放入该文件夹下
/opt/cloudera/parcel-repo/
下载路径
http://www.cloudera.com/content/cloudera/en/documentation/core/latest/topics/cm_vd.html#cmvd_topic_1

8、修改agent配置
/opt/cm-5.4.1/etc/cloudera-scm-agent/config.ini
server_host=n1   //为server端主机名称
将agent拷贝到其他主机上
scp -r /opt/cm-5.4.1 root@n2:/opt/

9、辅助服务的安装
//安装ntp服务
yum install ntp
chkconfig ntpd on
service ntpd start
//同步server主机时间
ntpdate -u n1

如果在线安装软件包失败,修改对应网卡的DNS的配置文件 
# vi /etc/resolv.conf  
修改以下内容 
nameserver 114.114.114.114 #


//关闭防火墙
service iptables stop (临时关闭)  
chkconfig iptables off (重启后生效)

10、启动服务

/opt/cm-5.4.1/etc/init.d/cloudera-scm-server start

/opt/cm-5.4.1/etc/init.d/cloudera-scm-agent start

安装出现什么问题可加QQ:814531592


详细步骤操作可参考:


展开阅读全文
打赏
2
1 收藏
分享
加载中
更多评论
打赏
0 评论
1 收藏
2
分享
返回顶部
顶部