文档章节

taskctl能解决的问题和应用场景

 何以为名
发布于 2017/08/16 10:47
字数 357
阅读 9
收藏 1

   主要解决了数据仓库、BI项目、大数据平台建设过程中不同作业类型的作业批量调度问题。随着IT时代的发展,未来更多的发展和竞争都是数据的竞争,面对不同行业、不同领域、不同维度的数据,我们需要对数据进行采集、汇总、加工、分析、展示。而这些数据的来源成多元化,我们在做数据的处理过程中,往往是需要数据进行自动化的处理和加工,而这些操作就离不开底层数据工具链中的作业批量调度。TASKCTL就是这么一款简易的作业调度工具,它专注于作业调度,TASKCTL软件的环境搭建不依赖于任何第三方中间件技术,软件使用简洁,功能丰富,渠道应用多样化。软件专注于调度核心和设计辅助,屏蔽了底层作业调度的通信、消息队列、触发等关键技术,使用人员只需要关心作业调度流程逻辑,而无须担心底层调度实现,即可轻松实现作业的批量调度和快速设计,充分解耦了作业与业务,让使用人员更多的从作业调度中解放出来,投身于业务本身。

本文转载自:

共有 人打赏支持
粉丝 1
博文 2
码字总数 0
作品 0
成都
加载中

评论(1)

e
emslkl123
感觉还不错
说说ETL调度工具TASKCTL的五宗最

这段时间,我一边研究网上公开的调度工具TASKCTL,一边看大鹏嘚吧嘚,一边是惊喜,一边是欢乐。大鹏嘚吧嘚有五宗最,很八卦,让我也给TASKCTL凑五宗罪,这绝对值得我们ETL技术人员学习与思索...

捷宝大大
2013/04/05
0
2
ETL调度技术平台--TASKCTL

ETL的技术本质是:通过调度管理控制一系列具有数据处理功能的各种程序有序地运行。因此,有人总结:“ETL是BI(商业智能)的基础,调度是ETL的灵魂”。从功能层面讲,调度是ETL技术体系的重要...

施鹏飞
2013/01/26
18.3K
14
TASKCTL中不使用代理,通过ssh免密连接执行远程脚本配置(SSH插件扩展)

使用TASKCTL调度服务时,如果需要跨用户或者跨服务器调度可以通过安装taskctl的代理来实现,但有时需要执行作业的服务器上仅仅只有几个脚本,此时再部署代理,就显得有点得不偿失了。我们知道...

假赛先生
2017/10/26
0
0
解决kettle调度效率低,不可高并发调度方法

“我在spoon里面运行一个作业只要几秒种,但是在命令行中运行却要好几十秒?” “并行同时运行几个job,就把内存撑爆了,Kettle好占资源呀!” Kettle作为用户规模最多的开源ETL工具,强大简...

波波夫空袭
2017/10/31
0
1
小能智能云客服助力海尔家电构建全场景服务系统

近年来,互联网的发展对实体产业的影响正在凸显,互联网主体已经逐渐渗透到企业和全产业链条、全生命周期,产业互联网时代已经到来。家电行业是我国的传统行业,在互联网消费思维过度消费的背...

云市场isv
07/27
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

Memcached启动参数详解

memcached -d -m 1024 -l 192.168.100.101 -p 11211 -P /tmp/memcached.pid -c 1024 -f 1.25 -n 80 -t 16 运行参数描述 -d:以守护(daemon)进程方式启动; -u:是运行Memcache的用户,例如 ......

月下狼
23分钟前
0
0
xgboost-kaggle

https://www.kaggle.com/dansbecker/xgboost This tutorial is part of the Learn Machine Learning series. In this step, you will learn how to build and optimize models with the powe......

tantexian
24分钟前
0
0
nginx学习八 代理服务

最常用的语法 proxy_pass Syntax: proxy_pass URL;Default: --Context:location.if in location,limit_exception 反向代理 例:/etc/nginx/conf.d/default.conf 反向代理(代理服务端)......

Romanceling
31分钟前
0
0
npm ERR! Unexpected end of JSON ...

npm install 报错: npm ERR! Unexpected end of JSON input while parsing near '..."^2.8.14"},"_hasShrin' npm ERR! A complete log of this run can be found in: ... 打开终端 命令: 第......

大_侠
36分钟前
0
0
Android中的设计模式之责任链模式

参考 《设计模式:可复用面向对象软件的基础 》5.1 Chain of responsibility 职责链 对象行为型模式 《Android源码设计模式解析与实战》第9章 使编程更有灵活性--责任链模式 意图 使多个对象...

newtrek
39分钟前
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部