文档章节

taskctl能解决的问题和应用场景

 何以为名
发布于 2017/08/16 10:47
字数 357
阅读 9
收藏 1

   主要解决了数据仓库、BI项目、大数据平台建设过程中不同作业类型的作业批量调度问题。随着IT时代的发展,未来更多的发展和竞争都是数据的竞争,面对不同行业、不同领域、不同维度的数据,我们需要对数据进行采集、汇总、加工、分析、展示。而这些数据的来源成多元化,我们在做数据的处理过程中,往往是需要数据进行自动化的处理和加工,而这些操作就离不开底层数据工具链中的作业批量调度。TASKCTL就是这么一款简易的作业调度工具,它专注于作业调度,TASKCTL软件的环境搭建不依赖于任何第三方中间件技术,软件使用简洁,功能丰富,渠道应用多样化。软件专注于调度核心和设计辅助,屏蔽了底层作业调度的通信、消息队列、触发等关键技术,使用人员只需要关心作业调度流程逻辑,而无须担心底层调度实现,即可轻松实现作业的批量调度和快速设计,充分解耦了作业与业务,让使用人员更多的从作业调度中解放出来,投身于业务本身。

本文转载自:

共有 人打赏支持
粉丝 1
博文 2
码字总数 0
作品 0
成都
私信 提问
加载中

评论(1)

e
emslkl123
感觉还不错
说说ETL调度工具TASKCTL的五宗最

这段时间,我一边研究网上公开的调度工具TASKCTL,一边看大鹏嘚吧嘚,一边是惊喜,一边是欢乐。大鹏嘚吧嘚有五宗最,很八卦,让我也给TASKCTL凑五宗罪,这绝对值得我们ETL技术人员学习与思索...

捷宝大大
2013/04/05
0
2
ETL调度技术平台--TASKCTL

ETL的技术本质是:通过调度管理控制一系列具有数据处理功能的各种程序有序地运行。因此,有人总结:“ETL是BI(商业智能)的基础,调度是ETL的灵魂”。从功能层面讲,调度是ETL技术体系的重要...

施鹏飞
2013/01/26
18.3K
14
TASKCTL中不使用代理,通过ssh免密连接执行远程脚本配置(SSH插件扩展)

使用TASKCTL调度服务时,如果需要跨用户或者跨服务器调度可以通过安装taskctl的代理来实现,但有时需要执行作业的服务器上仅仅只有几个脚本,此时再部署代理,就显得有点得不偿失了。我们知道...

假赛先生
2017/10/26
0
0
如何通过TASKCTL工具实现kettle作业的多次循环执行?

我有一个需求需要从其他系统定时抽取数据,而且这个数据需要抽取多次,我ETL用的kettle,调度用的免费版的taskctl,有谁知道taskctl怎么配置循环调用kettle吗?

老衲大海
2017/08/14
191
1
TASKCTL服务器作业并发数量修改在哪里修改?

现在有个系统是集群,5个节点,但每次用taskctl跑批的时候都只有3台节点在运行,我想另外2台也都跑,度娘了一下说需要修改并发数,有谁知道TASKCTL的并发数在哪里修改吗?

老衲大海
2017/08/10
14
0

没有更多内容

加载失败,请刷新页面

加载更多

如何利用 Data too long for column 进行一些简单的攻击

1: 前提条件, 后台没有校验长度和频率校验,也没有CSRF校验,直接往数据库插入数据,此时很容易触发Data too long for column错误(一般抛出异常都挺浪费资源的,耗时,耗内存,耗cpu),一旦...

专业写BUG的程序员
5分钟前
0
0
RMAN命令详解

一、list命令 1. List 当前RMAN所备份的数据库: 1.1. list backup summary; --概述可用的备份 list incarnation;--汇总查询 --如果备份文件多的话多用这两个list命令可以对备份文件有个总体...

突突突酱
8分钟前
0
0
简单聊聊Linux学习经历

学习,是我们一生中都规避不了的一个话题,人的一生中都是在不断的学习,无论是功成名就的人士,还是一无是处的小混混,始终都处在一个不断学习的环境中,只是学习的内容千差万别,有的人是为...

问题终结者
16分钟前
0
0
Mysql高级 (2)——sql性能调优

sql 性能下降的原因

小小小施爷
20分钟前
0
0
MaxCompute用户初体验

作为一名初次使用MaxCompute的用户,我体会颇深。MaxCompute 开箱即用,拥有集成化的操作界面,你不必关心集群搭建、配置和运维工作。仅需简单的点击鼠标,几步操作,就可以在MaxCompute中上...

阿里云官方博客
21分钟前
0
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部