加载中
成为 Apache 贡献者,So easy!

 1 缘起 大概是今年 4 月份的时候,忽然间看到 ShardingSphere 毕业的消息,其中也顺带提到了我们的主角 DolpshinScheduler, 于是去 Github 看了看,堆积的 PR 不多,在 Apache 孵化器中的...

COSCon'20 & Apache Roadshow 来了,数据技术专场欢迎您

移动互联网、物联网时代的到来,使得数据量级呈几何级爆炸性增长, 百亿级数据处理已经不新鲜,数据量猛增也对大数据处理链条的各个环节提出了新的要求和挑战,这态势也使得国内的大数据技术...

承载每天10万级任务的数据调度系统的架构是如何设计的

导语 Apache DolphinScheduler(原EasyScheduler,海豚调度)最初是易观数据平台研发的大数据分布式调度系统。主要解决数据处理中错综复杂的依赖关系,而不能直观监控任务健康状态等问题。Dol...

2019/04/19 22:19
8.8K
一分钟安装DolphinScheduler并上手体验

1 一分钟安装DolphinScheduler并上手体验 本教程基于DolphinScheduler1.3.2 2 需要准备: 一台Centos6.10机器 (注: 是在Centos 6.10上实践的) 一个定制好的压缩包ds-auto-1.3.2.tar.gz(下载...

10/17 10:46
30
成为 Apache 贡献者,So easy!

点击上方蓝字关注 Apache DolphinScheduler Apache DolphinScheduler(incubating),简称”DS”, 中文名 “海豚调度”(海豚聪明、人性化,又左右脑可互相换班,终生不用睡觉)。DolphinSche...

Apache DolphinScheduler 是如何诞生的

点击上方蓝字关注ALC Beijing 作者 | 代立冬,李岗 排版 | 开源之道小助理 Apache DolphinScheduler,简称”DS”, 中文名 “小海豚调度”(海豚聪明、人性化,又左右脑可互相换班,终生不用睡...

一分钟安装DolphinScheduler并上手体验

1 一分钟安装DolphinScheduler并上手体验 本教程基于DolphinScheduler1.3.2 2 需要准备: 一台Centos6.10机器 一个定制好的压缩包ds-auto-1.3.2.tar.gz(下载地址在文章末尾) 3 实操环节 需...

09/30 08:30
143
Apache Pulsar Summit Asia 2020 正式启动,演讲议题征集中!

Apache Pulsar Summit 是 Apache Pulsar 社区年度盛会,它将分布在世界各地的 Apache Pulsar 项目 Contributor、Commiter 和各企业 CTO/CIO、开发者、架构师、数据科学家,以及消息和流计算社...

ApacheCon 2020 参会指南

每年一度的 Apache 北美大会因为疫情的原因转到线上来举行了, 这次会议的主题是 ApacheCon@Home, 也就是说借助网络我们可以足不出户就可以参加 Apache 大会了。今年的会议为了针对不同的地域...

年度开源盛会 ApacheCon 首发中文盛宴来临,欢迎报名!

ApacheCon 是久负盛名的开源盛宴,为开源界备受关注的会议之一,也是开源运动早期的知名活动之一,其最早的一期要追溯 1998 年,也是在这一届上,开发 HTTPD 服务的开发者们欢聚一堂,并决定...

09/22 08:20
13
将海豚调度公众号内容同步至CSDN

hello, 新建了 DolphinScheduler 的 CSDN 博客,特同步此公众号内容到 CSDN ,敬请周知

09/20 15:17
23
活动回顾|Apache DolphinScheduler x Pulsar 在线 Meetup

关于 Apache DolphinScheduler: “ Apache DolphinScheduler(Incubating) 是一个分布式去中心化、易扩展的可视化工作流任务调度系统,致力于解决数据处理流程中错综复杂的依赖关系,使调度系...

数据质量:数据治理的核心

点击上方蓝字关注DolphinScheduler(海豚调度) 背景 随着大数据时代的到来,流动的数据已经成为连接全世界的载体,也成为促进经济社会发展、便利人们产生生活的源动力。伴随着数据的流动,尤其...

09/20 15:17
68
如何在CDH5上部署Dolphin Scheduler 1.3.1

点击蓝色字关注! 本篇文章大概8440字,阅读时间大约20分钟 本文记录了在CDH5.16.2集群上集成Dolphin Scheduler 1.3.1的详细流程,特别注意一下MySQL数据库的连接串! 1 文档编写目的 详细记...

元数据:数据治理的基石

点击上方蓝字关注DolphinScheduler(海豚调度) 背景 据说,英语中元数据meta一词最早出现于1968年,其是对希腊语前缀"meta-"的粗略翻译,用于表明更抽象层次的事物。尽管元数据一词只有几十年...

【安全通报】DolphinScheduler 漏洞情况说明

Apache DolphinScheduler 社区邮件列表最近通告了 2 个漏洞,考虑到有很多用户并未订阅此邮件列表,我们特地在此进行情况说明: CVE-2020-11974[1] 漏洞 (CVE-2020-11974[1]) 是与 mysql co...

09/15 15:07
48
活动回顾|Apache DolphinScheduler x Pulsar 在线 Meetup

关于 Apache DolphinScheduler: “ Apache DolphinScheduler(Incubating) 是一个分布式去中心化、易扩展的可视化工作流任务调度系统,致力于解决数据处理流程中错综复杂的依赖关系,使调度系...

数据调度系统中有向无环图的无环检测

点击上方蓝字关注DolphinScheduler(海豚调度) |作者:鲍亮 |编辑:卢凯瑞 1 名词解释 DAG,全称:Directed Acyclic Graph,中文:有向无环图 入度:有向图中某点作为图中边的终点的次数之和 ...

大数据工作流任务调度--有向无环图(DAG)之拓扑排序

点击上方蓝字关注DolphinScheduler(海豚调度) |作者:代立冬 |编辑:闫利帅 回顾基础知识: 图的遍历 图的遍历是指从图中的某一个顶点出发,按照某种搜索方法沿着图中的边对图中的所有顶点访...

DolphinScheduler源码分析

本文是基于1.2.0版本进行分析,与最新版本的实现有一些出入,还请读者辩证的看待本源码分析。具体细节可能描述的不是很准确,仅供参考。 1.源码版本 DolphinScheduler-1.2.0版本 2.技术框架 ...

没有更多内容

加载失败,请刷新页面

返回顶部
顶部