大米云的稳定性还可以 稳定爬了 20 个小时没有出现卡死等问题

2017-06-02 14:13:15 +08:00
 xiaoyu9527

爬完了 50 页的妹子图内容。

总体来说还是挺稳定的。

https://www.v2ex.com/t/365148#reply15 除了之前这个问题

就是已经爬了 9GB 的图片的了。 到时候有个 20 30GB 的图片我怎么导出呢。

目前看了一下他也没有什么对象云存储之类的。

所以到时候考虑升级 2 天的带宽 然后一次性导出。

1022 次点击
所在节点    问与答
3 条回复
xiaoyu9527
2017-06-02 14:14:08 +08:00
就是国内的抓取 感觉都只能跑 3~5M 不知道是不是目标站限速了。 国外我动不动跑 100M。
whileFalse
2017-06-02 14:33:36 +08:00
妹子图呢?
xiaoyu9527
2017-06-02 14:37:27 +08:00
@whileFalse 我回头做一个站欢迎去看。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/365443

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX