python 爬虫,小白求指教

[JianBingXia]

最近想转爬虫工程师,主要想深入学习一下 python,各位有什么高见请赐教

网上搜了下,最常用的框架就是 scrapy 吧,

爬虫工程师最基本的素养是熟悉 HTTP 协议,精通各种正则表达式吧

知道的不太多,网上也没搜到系统的指导

求实战老司机给指个路

先谢过了.

ps.前几年用 python 写过模拟登陆之类简单的,不知道现在 python 还在爬虫界流行么?貌似爬虫工程师只会 python 也不行吧.

[spider82]

python 还是很适合爬虫的。常用的就 scrape ，熟悉 XPATH 和各种调试工具就差不多了，关键是浏览器的模拟、复杂的 js 之类的可能会给初学者造成障碍。