求一个 Linux 服务器上的程序提交和管理工具

2015-04-22 13:07:42 +08:00
 kevinyoung

做科研,需要在所里服务器上算一些东西。

基本任务是同一个程序以不同的参数去跑。单个程序循环太慢,多进程的程序写起来太麻烦,所以一般为了利用服务器核多的优势都是直接以不同的参数多提交一些进程上去。

数量少一点还好说,但有时候要提百十来个程序的话手动就很蛋疼了。所以想求一款程序提交的工具。

现在能想到的解决方案是bash脚本,不过这东西用的不熟,感觉非常不靠谱,如果能有现成的工具或者框架那是最好了。

先谢谢了!

2468 次点击
所在节点    问与答
8 条回复
Septembers
2015-04-22 13:49:51 +08:00
xargs or parallel
jokester
2015-04-22 13:56:37 +08:00
有很多实验管理系统(experiment management system)
但是如果bash也玩不转。。未必适合你
pagxir
2015-04-22 15:09:58 +08:00
为什么我想到的是 gmake 的工具呢。。。 make -j${jobs} ... 同时利用多核心,并且。。。。
fangjinmin
2015-04-22 17:07:47 +08:00
用shell是最简单的办法,而且容易管理。
linhua
2015-04-22 17:31:11 +08:00
bash或python都是可以的。
kslr
2015-04-22 18:32:11 +08:00
bash我感觉是最好的办法了,另外,你把多进程部分写成类调用.
zsj950618
2015-04-22 19:05:58 +08:00
kevinyoung
2015-04-23 00:02:40 +08:00
@jokester 感谢提醒。bash主要是不熟悉,另外也不想重复发明轮子了。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/185458

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX