文档章节

oozie安装

xiaozhou18
 xiaozhou18
发布于 2017/08/17 23:54
字数 442
阅读 29
收藏 0

一、    解压oozie


tar -zxvf /opt/software/oozie-4.0.0-cdh5.3.6.tar.gz -C .


二、    配置${HADOOP_HOME}/etc/hadoop 下的core-site.xml 


<configuration>
   <property>
        <name>fs.defaultFS</name>
        <value>hdfs://bigdata01:8020</value>
   </property>

  <property>
        <name>hadoop.tmp.dir</name>
       <value>/opt/moduels/hadoop-2.5.0-cdh5.3.6/data/tmp</value>
  </property>
  <property>
#用哪个用户启动ooize
        <name>hadoop.proxyuser.xiaozhou.hosts</name>  
#用户所在的机器
        <value>bigdata01</value> 
  </property>
  <property>
        <name>hadoop.proxyuser.xiaozhou.groups</name>
        <value>*</value>  # 允许任何人访问ooize
  </property>
</configuration>


 
三、    解压tar -zxvf oozie-hadooplibs-4.0.0-cdh5.3.6.tar.gz


四、    创建libext目录 在oozie解压的目录下 mkdir libext/


 
五、    复制hadooplibs目录下的jar包  到新建的libext目录下


cp -r oozie-4.0.0-cdh5.3.6/hadooplibs/hadooplib-2.5.0-cdh5.3.6.oozie-4.0.0-cdh5.3.6/*  libext/


六、    复制ext-2.2.zip 文件到新建的libext目录下


[xiaozhou@bigdata01 libext]$ cp /opt/software/ext-2.2.zip .


七、    把libext下的jar包打进war包  [xiaozhou@bigdata01 oozie-4.0.0-cdh5.3.6]$ bin/oozie-setup.sh prepare-war


八、    修改oozie-site.xml  把derby数据库换成mysql的


把数据库连接部分的地方换成如下内容
<property>
     <name>oozie.service.JPAService.jdbc.driver</name>
     <value>com.mysql.jdbc.Driver</value>
 </property>
 <property>
     <name>oozie.service.JPAService.jdbc.url</name>
    <value>jdbc:mysql://bigdata01:3306/ooize?createDatabaseIfNotExist=true</value>
 </property>
 <property>
     <name>oozie.service.JPAService.jdbc.username</name>
     <value>root</value>
 </property>
 <property>
    <name>oozie.service.JPAService.jdbc.password</name>
    <value>123456</value>
</property>
#hadoop配置文件的地址
    <property>
        <name>oozie.service.HadoopAccessorService.hadoop.configurations</name>
        <value>*=/opt/moduels/hadoop-2.5.0-cdh5.3.6/etc/hadoop</value>
    </property>


九、    复制mysql 驱动jar包到lib和libext和oozie-server/lib下 


[xiaozhou@bigdata01 lib]$ cp /opt/moduels/hive-0.13.1-cdh5.3.6/lib/mysql-connector-java-5.1.27-bin.jar .
[xiaozhou@bigdata01 libext]$ cp mysql-connector-java-5.1.27-bin.jar ../libext/
[xiaozhou@bigdata01 lib]$ cp /opt/moduels/oozie-4.0.0-cdh5.3.6/lib/mysql-connector-java-5.1.27-bin.jar .


十、    启动hadoop

 

十一、把oozie-sharelib-4.0.0-cdh5.3.6-yarn.tar.gz 复制到hdfs上


[xiaozhou@bigdata01 oozie-4.0.0-cdh5.3.6]$ bin/oozie-setup.sh sharelib create -fs hdfs://bigdata01:8020 -locallib oozie-sharelib-4.0.0-cdh5.3.6-yarn.tar.gz
在hdfs上出现如下界面表示jar包上传成功


 
十二、创建数据库


[xiaozhou@bigdata01 oozie-4.0.0-cdh5.3.6]$ bin/ooziedb.sh create -sqlfile oozie.sql -run DB Connection


十三、启动ooize


[xiaozhou@bigdata01 oozie-4.0.0-cdh5.3.6]$ bin/oozied.sh start
多个进程


 
十四、在浏览器中输入http://bigdata01:11000/


出现如下图所示表示安装成功

© 著作权归作者所有

共有 人打赏支持
下一篇: maven的使用
xiaozhou18
粉丝 4
博文 43
码字总数 89472
作品 0
哈尔滨
程序员
私信 提问
oozie使用中的一些小结(持续完善)

0 关于oozie 寻找包寻找位置原则: oozie在运行的时候 只会去两个地方寻找自己需要的lib eg: /user/root/examples/apps/fork-merge的workflow下有 job.properties lib workflow.xml三个目录 ...

Zero零_度
2016/09/23
12
0
安装Oozie4.1.0-CDH版本

安装oozie经历了好长的时间,先是源码包,但是放弃了。。。 然后就是安装的这个CDH版本的,弄了好久,经常报各种错误。 最后整理出来这篇。 这个安装过程同样适用于oozie4.1.0的其他的CDH版本...

白话
2018/06/26
0
0
Apache Oozie Installation

oozie就是一个workflow协调系统,主要用来管理Hadoop作业(job)。属于web应用程序,由oozie client和oozie server两个组件构成。oozie server运行于java servlet容器(tomcat)中的web程序。由...

candon123
2017/12/14
0
0
Setting up Oozie high availability

本文介绍如何搭建四节点的Oracle Linux 7集群以及oozie的High Availability。环境如下图:一、创建HA集群1、安装集群软件包分别在4个节点上安装,如下: 2、设置集群用户密码集群软件包安装完...

candon123
2017/12/15
0
0
Oozie安装总结

权声明:本文为博主原创文章,未经博主允许不得转载。 一、使用CM添加服务的方式安装Oozie 如果在创建Oozie数据库时失败,且提示数据库已存在,如下图,则可能是之前已经安装过Oozie,没有卸...

Zero零_度
2016/09/23
48
0

没有更多内容

加载失败,请刷新页面

加载更多

使用 HostAliases 向 Pod /etc/hosts 文件添加条目

默认 hosts 文件内容 通过 HostAliases 增加额外的条目 限制 为什么 Kubelet 管理 hosts文件? 当 DNS 配置以及其它选项不合理的时候,通过向 Pod 的 /etc/hosts 文件中添加条目,可以在 Po...

xiaomin0322
32分钟前
2
0
阿里高级技术专家:研发效能的追求永无止境

背景 大约在5年前,也就是2013年我刚加入阿里的时候,那个时候 DevOps 的风刚吹起来没多久,有家公司宣称能够一天发布几十上百次,这意味着相比传统软件公司几周一次的发布来说,他们响应商业...

阿里云官方博客
34分钟前
1
0
阻止冒泡事件

1、event.isImmediatePropagationStopped() $("#id").click( function(event) { event.isImmediatePropagationStopped()}); 2、event.stopPropagation $("#id").click( function(even......

yan_liu
41分钟前
2
0
shell实例100例《二》

11、题目要求 写一个脚本实现如下功能: 输入一个数字,然后运行对应的一个命令。 显示命令如下: *cmd meau** 1 - date 2 - ls 3 - who 4 - pwd 当输入1时,会运行date, 输入2时运行ls, 以此...

寰宇01
45分钟前
0
0
CentOS开机自启SVN

安装好 svn 服务后,默认是没有随系统启动自动启动的, CentOS 7 的 /etc/rc.d/rc.local 是没有执行权限的, 系统建议创建 systemd service 启动服务 于是查看 systemd 里 svn 的配置文件 /l...

临江仙卜算子
今天
2
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部