V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
valkyrja
V2EX  ›  问与答

异步任务, mq?celery?azkaban?

  •  
  •   valkyrja · 2017 年 9 月 15 日 · 1689 次点击
    这是一个创建于 3039 天前的主题,其中的信息可能已经有所发展或是发生改变。

    有一个异步的脚本需要跑,似乎 mq/celery/azkaban 都可以实现
    rabbitmq 有 gui,celery 好像只能看 log,azkaban 每次调度都可以看到单独的 log ( prefer )
    请教大佬们,从实用性和稳定性上看,使用哪一个会更好呢?

    4 条回复    2017-09-30 22:52:06 +08:00
    Phant0m
        1
    Phant0m  
       2017 年 9 月 16 日 via iPhone
    现成的轮子:airflow
    julyclyde
        2
    julyclyde  
       2017 年 9 月 16 日
    celery 本身也需要 rq 的支持啊
    这几个东西完全不能放在一起比较的
    valkyrja
        3
    valkyrja  
    OP
       2017 年 9 月 30 日 via Android
    @Phant0m 谢谢 看了一下好像是和 azkaban 一样的调度工具
    valkyrja
        4
    valkyrja  
    OP
       2017 年 9 月 30 日 via Android
    @julyclyde 现在用的 celery 是用 redis 当 broker。。其实就是想实现一个稳定的异步任务,mq 可以消息来触发,azkaban 直接就可以调度。。但是不知道三者哪个更稳定一点。。
    关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   Solana   ·   2868 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 12:50 · PVG 20:50 · LAX 04:50 · JFK 07:50
    ♥ Do have faith in what you're doing.