爬虫工程师这个岗位是否对新手很不友好

[CharlieBrown]

一开始以为爬虫很容易到天花板，干了几个月后，发现一入爬虫深似海。 要懂网络协议、懂 JS、懂 APP 反编译， 本来以为网站 Selenium 能对付了，但现在能识别的网站也渐渐增多， 反编译都衍生出另一个岗位了：逆向工程师。

由于是小公司，也没人讨论、请教，一切都得靠自己搜索、看书、买教程。 一年工作经验不到的人，爬的可能是三五年以上的网站、APP，有种一个人单挑一群人的感觉。

一个网站，能否爬下取决于网站难度， 不像自己从 0 写系统，一步步自己走上去 写完爬虫还担心网站会不会突然升级、爬虫会不会突然不走

现在对前路有点儿迷茫了，有没有人能指点迷津

[muzico425]

我有个 python 微信群，爬虫居多不过 100 人了，所以有想加的加我微信:italocxa，备注 v2ex

[Cprocc]

萌新学习中，每天看着爬虫和 django 发呆，不知怎么深入。基础知识都学过，但不知道怎么用，还有一年毕业，焦虑

[Harlaus]

@Shyden2018 别做，如果你有兴趣，可以做 django/flask web+有爬虫需求的岗位，但是爬虫不要职业做，因为这个需求太窄了，很多时候还爬不了

[roberts]

@PulpFunction app 大多不走 http https 自己封装协议