文档章节

oozie安装

xiaozhou18
 xiaozhou18
发布于 2017/08/17 23:54
字数 442
阅读 23
收藏 0

一、    解压oozie


tar -zxvf /opt/software/oozie-4.0.0-cdh5.3.6.tar.gz -C .


二、    配置${HADOOP_HOME}/etc/hadoop 下的core-site.xml 


<configuration>
   <property>
        <name>fs.defaultFS</name>
        <value>hdfs://bigdata01:8020</value>
   </property>

  <property>
        <name>hadoop.tmp.dir</name>
       <value>/opt/moduels/hadoop-2.5.0-cdh5.3.6/data/tmp</value>
  </property>
  <property>
#用哪个用户启动ooize
        <name>hadoop.proxyuser.xiaozhou.hosts</name>  
#用户所在的机器
        <value>bigdata01</value> 
  </property>
  <property>
        <name>hadoop.proxyuser.xiaozhou.groups</name>
        <value>*</value>  # 允许任何人访问ooize
  </property>
</configuration>


 
三、    解压tar -zxvf oozie-hadooplibs-4.0.0-cdh5.3.6.tar.gz


四、    创建libext目录 在oozie解压的目录下 mkdir libext/


 
五、    复制hadooplibs目录下的jar包  到新建的libext目录下


cp -r oozie-4.0.0-cdh5.3.6/hadooplibs/hadooplib-2.5.0-cdh5.3.6.oozie-4.0.0-cdh5.3.6/*  libext/


六、    复制ext-2.2.zip 文件到新建的libext目录下


[xiaozhou@bigdata01 libext]$ cp /opt/software/ext-2.2.zip .


七、    把libext下的jar包打进war包  [xiaozhou@bigdata01 oozie-4.0.0-cdh5.3.6]$ bin/oozie-setup.sh prepare-war


八、    修改oozie-site.xml  把derby数据库换成mysql的


把数据库连接部分的地方换成如下内容
<property>
     <name>oozie.service.JPAService.jdbc.driver</name>
     <value>com.mysql.jdbc.Driver</value>
 </property>
 <property>
     <name>oozie.service.JPAService.jdbc.url</name>
    <value>jdbc:mysql://bigdata01:3306/ooize?createDatabaseIfNotExist=true</value>
 </property>
 <property>
     <name>oozie.service.JPAService.jdbc.username</name>
     <value>root</value>
 </property>
 <property>
    <name>oozie.service.JPAService.jdbc.password</name>
    <value>123456</value>
</property>
#hadoop配置文件的地址
    <property>
        <name>oozie.service.HadoopAccessorService.hadoop.configurations</name>
        <value>*=/opt/moduels/hadoop-2.5.0-cdh5.3.6/etc/hadoop</value>
    </property>


九、    复制mysql 驱动jar包到lib和libext和oozie-server/lib下 


[xiaozhou@bigdata01 lib]$ cp /opt/moduels/hive-0.13.1-cdh5.3.6/lib/mysql-connector-java-5.1.27-bin.jar .
[xiaozhou@bigdata01 libext]$ cp mysql-connector-java-5.1.27-bin.jar ../libext/
[xiaozhou@bigdata01 lib]$ cp /opt/moduels/oozie-4.0.0-cdh5.3.6/lib/mysql-connector-java-5.1.27-bin.jar .


十、    启动hadoop

 

十一、把oozie-sharelib-4.0.0-cdh5.3.6-yarn.tar.gz 复制到hdfs上


[xiaozhou@bigdata01 oozie-4.0.0-cdh5.3.6]$ bin/oozie-setup.sh sharelib create -fs hdfs://bigdata01:8020 -locallib oozie-sharelib-4.0.0-cdh5.3.6-yarn.tar.gz
在hdfs上出现如下界面表示jar包上传成功


 
十二、创建数据库


[xiaozhou@bigdata01 oozie-4.0.0-cdh5.3.6]$ bin/ooziedb.sh create -sqlfile oozie.sql -run DB Connection


十三、启动ooize


[xiaozhou@bigdata01 oozie-4.0.0-cdh5.3.6]$ bin/oozied.sh start
多个进程


 
十四、在浏览器中输入http://bigdata01:11000/


出现如下图所示表示安装成功

© 著作权归作者所有

共有 人打赏支持
xiaozhou18
粉丝 3
博文 41
码字总数 87942
作品 0
哈尔滨
程序员
oozie使用中的一些小结(持续完善)

0 关于oozie 寻找包寻找位置原则: oozie在运行的时候 只会去两个地方寻找自己需要的lib eg: /user/root/examples/apps/fork-merge的workflow下有 job.properties lib workflow.xml三个目录 ...

Zero零_度
2016/09/23
12
0
安装Oozie4.1.0-CDH版本

安装oozie经历了好长的时间,先是源码包,但是放弃了。。。 然后就是安装的这个CDH版本的,弄了好久,经常报各种错误。 最后整理出来这篇。 这个安装过程同样适用于oozie4.1.0的其他的CDH版本...

白话
06/26
0
0
Apache Oozie Installation

oozie就是一个workflow协调系统,主要用来管理Hadoop作业(job)。属于web应用程序,由oozie client和oozie server两个组件构成。oozie server运行于java servlet容器(tomcat)中的web程序。由...

candon123
2017/12/14
0
0
Setting up Oozie high availability

本文介绍如何搭建四节点的Oracle Linux 7集群以及oozie的High Availability。环境如下图:一、创建HA集群1、安装集群软件包分别在4个节点上安装,如下: 2、设置集群用户密码集群软件包安装完...

candon123
2017/12/15
0
0
驭象者之Apache Oozie

(1)Apache Oozie是什么? Oozie在英语中的释义指的是:驯象人,驭象者(多指缅甸那边的俗称),这个比喻相对与它的功能来说,还是很恰当的。 Apache Oozie是一个用来管理Hadoop任务的工作流...

九劫散仙
2015/05/19
0
0

没有更多内容

加载失败,请刷新页面

加载更多

MySQL数据库集群-PXC方案

网盘下载地址 MySQL数据库集群-PXC方案 PXC是开源的MySQL集群技术,如中国移动、阿里巴巴、腾讯、去哪网等企业均采用或者借鉴了PXC解决方案,可见该方案具有极佳的稳定性。本课程将在Linux环...

qq__2304636824
12分钟前
0
0
vue脚手架搭建项目

npm install -g vue-clivue init webpack my-projectcd my-projectnpm run dev

帝子兮
15分钟前
1
0
es6 字符串拓展方法

es6 include();返回Boolean,该字符串是否包含该字符 startWith() 返回Boolean,该字符串开头是否是该字符 endWith() 返回Boolean,该字符串结尾是否是该字符 repeat() 重复该字符串多少次,...

莫西摩西
15分钟前
0
0
Java语言实现word转PDF(10分钟解决)

前言: 经常做OA办公项目的同学一定和我一样被各种线上的office操作整疯了。基本上涉及到Java操作office的时候就会想到POI和openoffice.这两种方案都是需要找各种jar包,然后用里面繁杂的api。...

山里的红杏
17分钟前
0
0
Flask部分源码阅读

Flask主要依赖于Werkzeug和Jinja这两个库,是很简洁的Python Web框架。 Werkzeug 是一个WSGI的工具包,是Flask的核心库。 Jinja 则是一个模板渲染的库,主要负责渲染返回给客户端的html文件。...

Jian_Ming
21分钟前
0
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部