@jackon 顶。

scrapy 才不是什么工业级的。就一个普通框架而已。

@wzxjohn 赞。。。跟微博一个路数！

@makeapp -_- 😂 👍 高级。甘拜下风。好牛逼。

@wibile 大一点的爬虫是多大。 scrapy 用什么机制保证了能够支撑这么「大」？

scrapy 方便在哪里？

"mobileVerifyCode"为必填项"

什么鬼。

scrapy 做分布式方案只有麻烦的份。

scrapy 根本就是用来爬静态单站的。跟上个世纪的 Flashget 的批量下载、 httrack 之流没啥区别。提供一大堆没什么卵用的框架功能。根本没法应付跨站泛爬的情况。

@gouchaoer 顶 支持。

用 scrapy 的不仅是菜鸟，还是笨鸟。

gevent + requests 秒杀你们 twisted 一个银河系没问题。上行带宽可以打满。服务器带宽也可以打满

这也算 backdoor 。。。。阿里那几个码农的月饼真是白抢了。。

@wql 还抓了 1600 个 gopher 网站。

canvas?

都没我的策略淫荡。。。判断是爬虫就随机插入脏数据。。。。。

比如电商。。就随机返回价格。。。让你们爬。 管够。

#define = !=

@macroideal 来来来，如何在插入一行 log 之前先插入一个空白行？注意是完全的空白行。不能有头。你给我变通一下。

因为 print 就一个单词。 logging 你要三行。

LZ 我是阿里 HR ，请把你工号花名报上来。

是 SPA → 用 React
不是 SPA → 还是用 django 模板渲染好了