技术解析

咨询一下各位,大家都用什么调度工具
0
2021-06-07 11:46:05
idczone
最近在做数据平台的项目,作业很多,作业之间的依赖也很复杂,所以需要一款好用且开源的调度工具,烦请各位推荐一下,有什么好用的作业调度工具国外服务器,谢谢大家
Oozie,或者自研。当然也有开源的,多少都得二次开发。

Dolphin Scheduler (国产)
Azkaban
Schedulis (国产)

airflow

airflow

Oozie+Hue
不过最近准备切到 Dolphin 了

看不懂,只在国内看到过作业调度这个词。
从描述看,如果是我,一些任务,之类的,肯定用 Spring Batch 或者 Java EE/JakartaEE Batch 规范( Spring Batch 也支持这个规范)去定义任务了。

Azkaban 吧 ,社区还挺活跃的。且是大数据相关的

airflow+1

前公司用 azkaban

你说的是代码层面的,他们说的是组件层面的。但我看很多项目都直接用任务调度框架,例如 XXL-job

数据地带为您的网站提供全球顶级IDC资源
在线咨询
专属客服