目前需求是这样的:
请求内含一个长度可能为 100k 的列表,对每项的数据进行计算处理转换,批量写入数据库,完成后返回响应。
计算处理过程耗 cpu ,因此计算处理是多路并行,计算处理和写数据库也是并行的
目前自己写了个简单的流程。
但想看看有没有开源程序库。
1
blastbao 2023-02-28 11:57:43 +08:00
bilibili/gengine 这种?
|
2
echoless 2023-02-28 12:07:16 +08:00
Temporal
这个如何, 但是对你这个需求感觉太重了. 如果很多类似的需求可以试试. |
3
fgwmlhdkkkw 2023-02-28 12:11:28 +08:00
mapreduce 也不一定要用 go 吧
|