大家如何看待爬虫和爬虫教程近日被推到风口浪尖这种现象？

[Miksztowi]

最近发现关于爬虫的教程和实战如雨后春笋一样疯狂涌现。但据我了解，首先爬虫这个技术是几年前甚至更早以前就已经出现了，而且爬虫本身的技术天花板并没有多高把，但是为何最近开始这么热门？ 同时又有一些技术大 V 的回答和专栏中对爬虫的评价并不友好，是厌恶爬虫还是厌恶这种技术被捧到风口浪尖？ 题主也有过一些简单操作爬虫的经验，看到爬虫在风口浪尖上，想到这样的行为会不会使互联网公司开始加大反爬虫的力度，有没有可能做到彻底的禁止爬虫行为呢？ 希望大家可以不吝赐教，非常感谢。

[oyosc]

@Miksztowi 可以的呀，不过你要进行数据洗涤啥的，原始数据不行

[brucedone]

@Miksztowi 当然可以啦，不过呢，中间一般在经历 label 的过程。

[figofuture]

@binux 多谢大神的 pyspider ，😄