请问爬虫可以转什么方向？转岗所需要的工作经验如何获得？

[aozhou]

做了几年爬虫，感觉这个终究不是长久之计。
不仅现在反爬方式越来越多种多样，难度直线上升，更主要的是，终究不算比较正当的方向，付出太多努力感觉不值得。
不知道 v 友有什么建议。

[lasuar]

可以转后端，比如学习 Go 语言。我早年就是干爬虫的，深知这行深入极难，所以也转了。

[chi1st]

如果把 JS 逆向和 APP 逆向玩的比较深的话，应该也挺不错的吧，不会有什么年龄的顾虑，就是风险大

[aozhou]

@levelworm 是啊，就是学到精深会涉及多个方向，就感觉与其费这么大劲还是灰色的，还不如直接光明正大换个其他方向

[aozhou]

@dearmymy 是的，因为涉及的面太宽了，不太可能没个方向都搞通。搞通了也就没必要搞爬虫了

[aozhou]

@dayeye2006199 那这样的话还是做爬虫的吧？

[aozhou]

@lasuar 请问你是怎么转的？日产工作内容都是爬虫，感觉也没什么机会做后端。自己做些项目的话，去面试不知道对方会不会认，工资应该也会断崖吧？

[yangzhezjgs]

可以先学学日志采集的技术栈，这个方向与爬虫相近，找相关工作经验不会白费，再找机会慢慢过度到后端

[triangle111]

先学一些采集框架的思路，各种中间件学着使用，然后慢慢写后端 code ，推荐转 go 后端

[aozhou]

@yangzhezjgs 日志采集的相关岗位名称叫什么

[aozhou]

@triangle111 之前也听人说过转 go ，请问为什么爬虫转 go 比较好？还是因为 go 比较新，大家都差不多，所以想转的话转 go 比较好？

[yangzhezjgs]

@aozhou 一般这种岗位偏向于运维开发或者数据平台，可参考这个 https://www.zhipin.com/job_detail/47eed5f0a56e5ba81XJy3dq1FlFW.html

[aozhou]

@yangzhezjgs 好的，谢谢

[la2la]

我是 18 年毕业入行做的爬虫后来跟你的感觉一样加上当年有一家爬虫公司连程序员到老板一起进去了所以决定转方向，可以分享一下我的转行路线，爬虫->学习 python 处理清洗数据转到数据分析->学习 Hadoop 相关组件转到大数据分析->学习实时处理现在在做实时数据处理方向

[aozhou]

@la2la 请问你当初是怎么换的工作，没有数据分析的工作经历的话？

[lasuar]

@aozhou #26 直接从 web 项目开始练手，根据学习偏好决定看视频还是文字教程，完整写几个后端项目；再系统学习以下 TCP/UDP/Websocket/HTTP 这些协议知识就基本可以了。

[aozhou]

@lasuar 去面试会不会因为没有实际工作经验，被嫌弃~

[lasuar]

@aozhou #36 会，投十家可能会遇到三四家，剩下的应该都是认为你基础不行的。所以，别说那些有的没的，下来多花时间。走过这条路的人太多，不用担心白费功夫。

[la2la]

@aozhou 不一定要换工作啊，比如你爬完数据肯定是要清洗分析的吧，你可以在本公司做这些事情啊

[aozhou]

@la2la 换岗么？

[aozhou]

@lasuar 嗯嗯 谢谢