[求助] Python 调用 phantomjs 老是因为 Out of memory 被 kill

[goodryb]

代码如下

https://gist.github.com/anonymous/521c52b51e5d6c97c17790a67eeccf4a

dmesg 信息

[janxin]

内存太小了？

[goodryb]

@janxin #1 1.6G 不算小吧，程序启动了可以运行几个小时，内存一直增加，然后就被 kill 了

[neoblackcap]

phantomjs OOM 很正常，用 chrome headless mode。作者都是这样说

[wzwwzw]

为什么不用 chrome headless 呢。

[hahastudio]

一定要用 phantomjs 的话，可以爬几个页面重启一下 phantomjs

[holyghost]

我已经换到 chrome headless 了

[a7a2]

建议使用 chromedriver，phantomjs 就很容易被识别。。。

[goodryb]

@neoblackcap #3
@wzwwzw #4
@holyghost #6
@a7a2 #7

好吧，看来我用到的工具落后了，已经更换到了 chrome headless，今天跑一跑，看看情况


@hahastudio #5 这个有点麻烦，解决方法不是太优雅

[gouchaoer]

新的就用 chrome headless，老的懒得切就继续 phantomjs 咯

[Tunar]

作者不是溜了么。。

[BiggerLonger]

chrome 沒有像 phantomjs 那樣的 web server 模塊吧？

[goodryb]

@gouchaoer #9 个人用，所以切换比较方便

@Tunar #10 不太清楚呢

@BiggerLonger #11 我感觉两种方式差不多，chrome 需要一个额外的 chromedriver