开始在简书上写 Python 爬虫系列文章

[wisefree]

第一篇： http://www.jianshu.com/p/11d7da95c3ca

这一系列文章不写复杂的爬虫，而是将复杂的爬虫涉及到的核心知识点写清楚

1. 代理池（高匿）

2. 多进程

3. 正则表达式

4. 数据库

5. selenuim

6. 手机抓包

7. ....

希望 V 友能提提建议，能投稿就更好了

[creatorYC]

我想问问为什么我写的爬虫运行一段时间就会报 requests.exceptions.ConnectionError: ('Connection aborted.', BadStatusLine("''",))，用的 python 和 requests 库，我没有使用多线程，在请求之前都添加了 time.sleep(0.5) ，按说不至于请求太频繁啊，请问这个问题该怎么解决啊！谢谢了

[wisefree]

@creatorYC 我没有遇到过这样的问题，不知道你 google 没有，你的问题在 stackoverflow 有几个问答，你尝试一下。

还有， time.sleep(0.5) 还真谈不上有多保险，这个不同的网站都不一样