大数据任务调度工具 Apache DolphinScheduler

项目亮点

专门针对大数据平台
国人开发
支持单机、集群、容器化
项目比较新，2019 年开发

DolphinScheduler 简介

Apache DolphinScheduler 于 17 年在易观数科立项， 19 年 3 月开源，8 月进入 Apache 孵化器

DolphinScheduler 支持 K8S

调度系统选型

竞争产品

Airflow
Oozie
Kettle
xxl-job
Azkaban
Spring Batc

大数据任务调度工具 Apache DolphinScheduler相关推荐

新一代大数据任务调度系统 - Apache DolphinScheduler 1.3.4 发布，推荐下载
| 本文编辑:朱桐新一代大数据任务调度 - Apache DolphinScheduler(incubator) 在经过社区 30 多位小伙伴的贡献与努力下于发布了 1.3.4 版本,1.3.4 作 ...
主流大数据调度工具对比(DolphinScheduler特点)
大数据环境下,调度工具比不可少,离线批任务和准实时任务都需要调度去驱动.下文介绍主流大数据调度工具对比DolphinScheduler .Azkaban.Airflow.Oozie.Xxl-job A ...
大数据任务调度工具azkaban初步使用
1.azkaban是什么是一个简单的任务调度器,批量工作流任务调取器, java开发, 包含三个部分,webserver,dbserver,executorserver,linkin的开源项目使用 ...
大数据任务调度工具azkaban深入使用
前言我们使用的是最新版本的azkaban,所编写的调度文件是.flow文件,非常方便,之前使用的job文件一个文件只能写一个任务,但是有了flow文件后可以直接将所有的调度任务写在里面,对于工程级别 ...
Apache DolphinScheduler征稿 — 小Demo轻松入门DolphinSchedule大数据调度工具
文章目录官方文档 | [GitHub源码](https://github.com/apache/dolphinscheduler) 一.从实际需求入手,我们为何要选择使用DolphinSchched ...
主流大数据调度工具对比
大数据环境下,调度工具比不可少,离线批任务和准实时任务都需要调度去驱动.下文介绍主流大数据调度工具对比DolphinScheduler .Azkaban.Airflow.Oozie.Xxl-job 非 ...
大数据任务调度和数据同步组件初探
本文个人博客地址本文公众号地址背景数据从最原始的状态,可能是一个 excel,一个文本,或者是来自业务数据库的数据,格式各种各样,落地到数据仓库.数据湖中,数据的同步过程是必不可少的图片来源 ...
什么是Oozie——大数据任务调度框架
Oozie简介 Oozie是大数据四大协作框架之一--任务调度框架,另外三个分别为数据转换工具Sqoop,文件收集库框架Flume,大数据WEB工具Hue. 它能够提供对Hadoop MapReduc ...
大数据人推荐：60款顶级大数据开源工具
摘要:说到处理大数据的工具,普通的开源解决方案(尤其是Apache Hadoop)堪称中流砥柱. 弗雷斯特调研公司的分析师Mike Gualtieri最近预测,在接下来几年,"100%的大公 ...

大数据任务调度工具 Apache DolphinScheduler

文章目录

大数据任务调度工具 Apache DolphinScheduler

项目亮点

DolphinScheduler 简介

调度系统选型

大数据任务调度工具 Apache DolphinScheduler相关推荐

最新文章

热门文章