V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
The Go Programming Language
http://golang.org/
Go Playground
Go Projects
Revel Web Framework
craftx
V2EX  ›  Go 编程语言

求推荐 go 语言的 workflow|pipeline 库

  •  
  •   craftx · 2023-02-28 11:49:32 +08:00 · 1385 次点击
    这是一个创建于 637 天前的主题,其中的信息可能已经有所发展或是发生改变。

    目前需求是这样的:
    请求内含一个长度可能为 100k 的列表,对每项的数据进行计算处理转换,批量写入数据库,完成后返回响应。
    计算处理过程耗 cpu ,因此计算处理是多路并行,计算处理和写数据库也是并行的
    目前自己写了个简单的流程。
    但想看看有没有开源程序库。

    3 条回复    2023-02-28 12:11:28 +08:00
    blastbao
        1
    blastbao  
       2023-02-28 11:57:43 +08:00
    bilibili/gengine 这种?
    echoless
        2
    echoless  
       2023-02-28 12:07:16 +08:00
    Temporal

    这个如何, 但是对你这个需求感觉太重了. 如果很多类似的需求可以试试.
    fgwmlhdkkkw
        3
    fgwmlhdkkkw  
       2023-02-28 12:11:28 +08:00
    mapreduce 也不一定要用 go 吧
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3433 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 12:03 · PVG 20:03 · LAX 04:03 · JFK 07:03
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.