V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
heavyrainn
V2EX  ›  程序员

咨询一下各位,大家都用什么调度工具

  •  1
     
  •   heavyrainn · 247 天前 · 2250 次点击
    这是一个创建于 247 天前的主题,其中的信息可能已经有所发展或是发生改变。
    最近在做数据平台的项目,作业很多,作业之间的依赖也很复杂,所以需要一款好用且开源的调度工具,烦请各位推荐一下,有什么好用的作业调度工具,谢谢大家
    9 条回复    2021-03-31 08:33:21 +08:00
    cco
        1
    cco  
       247 天前
    Oozie,或者自研。当然也有开源的,多少都得二次开发。
    resurgamforever
        2
    resurgamforever  
       247 天前
    Dolphin Scheduler (国产)
    Azkaban
    Schedulis (国产)
    liprais
        3
    liprais  
       247 天前 via iPhone
    airflow
    v218ex
        4
    v218ex  
       247 天前
    airflow
    jiezhi
        5
    jiezhi  
       247 天前
    Oozie+Hue

    不过最近准备切到 Dolphin 了
    hantsy
        6
    hantsy  
       247 天前
    看不懂,只在国内看到过作业调度这个词。

    从描述看,如果是我,一些任务,之类的,肯定用 Spring Batch 或者 Java EE/JakartaEE Batch 规范( Spring Batch 也支持这个规范)去定义任务了。
    zuston
        7
    zuston  
       247 天前
    Azkaban 吧 ,社区还挺活跃的。且是大数据相关的
    forbxy
        8
    forbxy  
       247 天前
    airflow+1
    tedzhou1221
        9
    tedzhou1221  
       246 天前 via iPhone
    前公司用 azkaban


    @hantsy 你说的是代码层面的,他们说的是组件层面的。但我看很多项目都直接用任务调度框架,例如 XXL-job
    关于   ·   帮助文档   ·   API   ·   FAQ   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   2651 人在线   最高记录 5497   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 21ms · UTC 13:39 · PVG 21:39 · LAX 05:39 · JFK 08:39
    ♥ Do have faith in what you're doing.