我想用 gevent patch thread, 又想用 multiprocessing.pool, 有没有办法兼容?

2017-05-26 23:31:50 +08:00
 billlee

由于用到了 pymongo, 需要 patch thread, 但 patch thread 又会破坏 multiprocessing.Queue.

如果没有办法兼容,那大概就要用外部的 celery 代替 multiprocessing.pool 了吧?

5347 次点击
所在节点    Python
4 条回复
wentian
2017-05-27 00:22:26 +08:00
gevent 自带 Pool
billlee
2017-05-27 01:37:48 +08:00
@wentian #1 Gevent 的 pool 是协程池吧,和进程池是不同的
wwqgtxx
2017-05-27 08:38:35 +08:00
『 patch thread 又会破坏 multiprocessing.Queue 』这句从哪里得到的?
我用的时候这两个并不会冲突
billlee
2017-05-27 19:44:50 +08:00
@wwqgtxx #3 文档里这么说的,http://www.gevent.org/gevent.monkey.html#gevent.monkey.patch_thread, 我写了个测试代码,如果不指定 thread=false, 在这个程序是不能正常工作的,会一直阻塞,没有输出。

你能说说你是怎么同时用这两个的吗?

https://gist.github.com/anonymous/103d37ec001b9a583b90e5a5d6b63161

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/364108

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX