V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
hao0
V2EX  ›  Java

分享一款分布式任务调度平台

  •  
  •   hao0 · Feb 20, 2017 · 9682 views
    This topic created in 3352 days ago, the information mentioned may be changed or developed.
    14 replies    2018-11-09 17:03:57 +08:00
    BuilderQiu
        1
    BuilderQiu  
       Feb 20, 2017
    Star ,看起来不错,研究看看
    Koyoter
        2
    Koyoter  
       Feb 20, 2017
    已 Star
    Powered
        3
    Powered  
       Feb 20, 2017 via iPhone
    帮顶
    sunshinez1128
        4
    sunshinez1128  
       Feb 20, 2017
    这个构架感觉是不是太重了,现在确实缺少一款开源的调度工具,尤其是支持任务依赖的
    hao0
        5
    hao0  
    OP
       Feb 20, 2017
    @sunshinez1128 主要想能尽量实时执行任务,现在主要就依赖 ZK 通知,或者自己走 Network ,也有一些其他可以参考的开源项目:

    + dangdangdotcom.github.io/elastic-job/
    + https://github.com/xuxueli/xxl-job

    但都不怎么轻或者好用,或者你有什么比较建议的方案。
    hao0
        6
    hao0  
    OP
       Feb 20, 2017
    unique
        7
    unique  
       Feb 20, 2017 via iPhone
    star
    kevinlee
        8
    kevinlee  
       Feb 20, 2017
    支持调度其他脚本语言或者 shell 脚本吗
    miaoever
        9
    miaoever  
       Feb 20, 2017
    比较成熟开源任务调度系统有:

    1. Azkaban [Linkedin]
    https://azkaban.github.io/

    2. Airflow [Airbnb]
    https://github.com/apache/incubator-airflow
    hao0
        10
    hao0  
    OP
       Feb 21, 2017
    @kevinlee 嗯可以,需要实现 ScriptJob ,配置下命令,具体可见 README.md
    hao0
        11
    hao0  
    OP
       Feb 21, 2017
    @miaoever 这两个确实比较专业,但似乎有点重,抽时间调研下,贵司已投入生产?
    stackboom
        12
    stackboom  
       Feb 27, 2017
    已 star 最近正想重构一下我们的任务调度站点,我们的实现是 Quartz+mq
    beneo
        13
    beneo  
       Mar 1, 2017
    难道就我一直在用 spring batch + quartz 么
    Variazioni
        14
    Variazioni  
       Nov 9, 2018
    找了几个框架。。想集成到 Spring Cloud 里面。。发现难度都挺大的。。都是用的 spirng boot 1.x。。改成 2.x 一堆问题。。头大。。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   861 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 46ms · UTC 22:00 · PVG 06:00 · LAX 15:00 · JFK 18:00
    ♥ Do have faith in what you're doing.