文档章节

ETL作业调度软件TASKCTL4.5单节点架构安装详解-笔记分享

 老衲大海
发布于 2017/08/07 11:44
字数 583
阅读 8
收藏 0

TASKCTL4.5的安装,一般最开始使用都是单机部署,实际上就是将Server节点和字符客户端安装到同一个地方,当有一定的使用经验,根据每个人不同的需求在决定要不要在其他服务器上安装代理,也就是TASKCTL说的集群。Server节点是TASKCTL服务端的最顶层,负责客户端与服务端之间的通信,也是调度服务控制层,有Agent节点的部分功能,能够直接执行任务。

下面是单机部署的过程:

一般我习惯单独用一个用户来安装TASKCTL,在安装之前,首先配置这个用户的环境变量,在用户根目录的.bash_profile的最后添加如下几句代码:

TASKCTLDI=$HOME/taskctl
PATH=$PATH:$TASKCTLDIR/bin
export TASKCTLDIR PATH

设置好环境变量后,我们需要让它生效,可以选择退出后重新登录,也可以用source命令让它生效。

source .bash_profile

释放tar包的文件

tar -xvf taskctlforlinux32_4.1.3.tar1

进入刚才释放出来的cirinst目录,然后执行inst安装程序

cd cirinst
./inst

执行成功后,我们会看到安装程序对系统环境的检测,也就是检查系统的环境变量是否设置,这个刚才我们已经做过了,点击回车进入下一步。

这里,我们选择1,回车,然后我们就能看到安装说明,再次回车进入安装。

在安装中途,会提示输入服务IP地址,安装程序会去检测本地的IP地址,查看一下,如果确认没有错误的话,默认即可,接着会提示输入控制服务节点(Server节点)的监听端口,我们选择默认。之后,会提示是否确认上面输入的信息,在这里我们选择Y,确认,然后进入下一步。之后,安装程序就会把Server节点实例化并且启动。再之后就是安装范例了。

等待几分钟之后,安装程序提示是否安装成功,中间也没有什么错误提示,那么就已经成功的把TASKCTL的服务端安装到你的服务器上了!

© 著作权归作者所有

共有 人打赏支持
粉丝 2
博文 20
码字总数 13635
作品 0
石家庄
私信 提问
ETL调度技术平台--TASKCTL

ETL的技术本质是:通过调度管理控制一系列具有数据处理功能的各种程序有序地运行。因此,有人总结:“ETL是BI(商业智能)的基础,调度是ETL的灵魂”。从功能层面讲,调度是ETL技术体系的重要...

施鹏飞
2013/01/26
18.3K
14
spark架构详解

hadoop和spark Hadoop这项大数据处理技术大概已有十年历史,而且被看做是首选的大数据集合处理的解决方案。MapReduce是一路计算的优秀解决方案,不过对于需要多路计算和算法的用例来说,并非...

张欢19933
2016/02/18
711
0
Hadoop生态系统

首先我们先了解一下Hadoop的起源。然后介绍一些关于Hadoop生态系统中的具体工具的使用方法。如:HDFS、MapReduce、Yarn、Zookeeper、Hive、HBase、Oozie、Mahout、Pig、Flume、Sqoop。 Hadoop...

huojiao2006
2017/03/06
0
0
用 xCAT 和 TORQUE 进行动态服务器供应

本文将探讨如何使用 Extreme Cloud Administration Toolkit (xCAT) 和 Tera-scale Open-source Resource and QUEue Manager (TORQUE) 开源包构建一个动态供应的高性能计算(HPC)集群系统。x...

红薯
2010/05/13
2.2K
1
HAWQ取代传统数仓实践(五)——自动调度工作流(Oozie、Falcon)

一旦数据仓库开始使用,就需要不断从源系统给数据仓库提供新数据。为了确保数据流的稳定,需要使用所在平台上可用的任务调度器来调度ETL定期执行。调度模块是ETL系统必不可少的组成部分,它不...

wzy0623
2017/05/18
0
0

没有更多内容

加载失败,请刷新页面

加载更多

sed插入和附加文本基础使用

对于编辑器来说,在数据中增加行算是很基本的操作吧,sed有以下两个操作: 插入(insert)命令(i)会在指定行前增加一个新行 附加(append)命令(a)会在指定行后增加一个新行 还是用下面的文本来测...

woshixin
17分钟前
0
0
HIVE数据倾斜总结

在做Shuffle阶段的优化过程中,遇到了数据倾斜的问题,造成了对一些情况下优化效果不明显。主要是因为在Job完成后的所得到的Counters是整个Job的总和,优化是基于这些Counters得出的平均值,...

瑞查德-Jack
28分钟前
0
0
Pure-ftpd搭建FTP

12月11日任务 15.4 xshell使用xftp传输文件 15.5 使用pure-ftpd搭建ftp服务 使用pure-ftpd搭建FTP服务 轻量的ftp软件 安装pure-ftpd并修改配置文件 # pure-ftpd为epel扩展库里的软件[root...

robertt15
37分钟前
4
0
开源 serverless 产品原理剖析(二) - Fission

背景 本文是开源 serverless 产品原理剖析系列文章的第二篇,关于 serverless 背景知识的介绍可参考文章开源 serverless 产品原理剖析(一) - Kubeless,这里不再赘述。 Fission 简介 Fiss...

阿里云官方博客
43分钟前
2
0
Android面试整理(附答案)

面试,无非都是问上面这些问题(挺多的 - -!),聘请中高级的安卓开发会往深的去问,并且会问一延伸二。以下我先提出几点重点,是面试官基本必问的问题,请一定要去了解! 基础知识 – 四大组...

终端研发部
48分钟前
4
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部