转 Python 爬虫方向,求助下到达什么能力可以求职。

2018-01-08 10:06:25 +08:00
 xuanxxxr
自学了近一年多,原土木工程搬砖狗一枚,在基友的努力指引方向下学了一年的爬虫方面的知识(前端、scrapy 框架、数据库等很多知识,感觉爬虫的知识面很广),爬虫基本可以上手。请问下做到能去找工作,除了爬取的项目,还有基础 Python 知识,还要准备什么呢?
4673 次点击
所在节点    职场话题
23 条回复
xuanxxxr
2018-01-08 10:10:47 +08:00
= =.~ 哎
qq976739120
2018-01-08 11:04:56 +08:00
学了一年多的话肯定不是只会爬虫了吧,多个方向一起找呗
xuanxxxr
2018-01-08 11:09:53 +08:00
@qq976739120 谢谢指点~ 不过还是多半卡在大学专业这个坎 拉钩上吊一百年不匹配。。有些蛋疼
qq976739120
2018-01-08 11:31:39 +08:00
@xuanxxxr 我也是.所以一般简历上不写专业,面试过了再说实话,一般过面试了对你的专业不看重的,很多面试官本人也不是科班出身
lhx2008
2018-01-08 11:38:49 +08:00
简单爬虫不好找工作吧,没有知乎看起来那么多,而且基本上用不到什么前端和数据库的知识,倒是分布式,多 ip,多线程,爬虫调度这些是难点。
shawlib
2018-01-08 11:55:16 +08:00
爬虫起点低,顶点也低。能爬主流网站像知乎、微博、微信文章、今日头条、淘宝京东、拉勾直聘、汽车之家等等的,就差不多了。
bzzhou
2018-01-08 13:29:31 +08:00
看工作年限吧,如果是应届生或者毕业一年左右的;创业团队有时候招不到人,也会考虑招一些有潜力的培养出来。

但是如果是工作年限比较久,如果纯粹会爬虫,有点难
anasplrt34
2018-01-08 14:03:15 +08:00
问你几个问题 爬虫的反爬与防范 如何提高爬虫的效率 爬虫可以用来干什么 然后就是你有什么印象深刻的反爬措施 你对爬虫将来的发展趋势怎么看 python 爬虫用过 sqlalchemy 么 用过什么比较好用的库 线程进程协程怎么看 你是怎么绕过全局解释锁的 等等等等
anasplrt34
2018-01-08 14:04:33 +08:00
顺带说一句 爬虫这东西真心没意思 纯粹体力活 长久不了 建议往自动化或者通用型爬虫上面靠
sheep3
2018-01-08 14:25:38 +08:00
千万别做爬虫,老哥,真的, 听我一句劝,去做后台吧。
xuanxxxr
2018-01-08 14:48:04 +08:00
@qq976739120 谢啦~
xuanxxxr
2018-01-08 14:48:43 +08:00
@shawlib 这几个网站差不多都可以爬, 或许应该试着先不说本科专业再去找工作。
xuanxxxr
2018-01-08 14:49:08 +08:00
@sheep3 真的那么苦逼啊 心塞 感觉从一个坑到另一个坑~
xuanxxxr
2018-01-08 14:49:57 +08:00
@anasplrt34 最后两三个问题有些没头绪 看来还需要更深入点- -。 不过看大家评论也是个大坑哦~
xuanxxxr
2018-01-08 14:50:46 +08:00
@bzzhou 好的~ 也就是毕业一年多一点 不过还是要加强学习= =。 有点慌
topbandit
2018-01-08 14:52:56 +08:00
年纪大不大?再学学 linux,把 windows 格式化,装个 gentoo 玩玩
xuanxxxr
2018-01-08 14:54:57 +08:00
@topbandit 毕业一年 不大。 自用的 Mac 差不多半个 Linux 都试试吧
p2pCoder
2018-01-08 14:57:33 +08:00
可以先找工作试试
xuanxxxr
2018-01-08 14:58:42 +08:00
@p2pCoder 嗯 最近已经开始了 实习全职全在努力。。。
KgM4gLtF0shViDH3
2018-01-08 17:14:28 +08:00
简单爬虫没意思,谁都会,最少要能破解滑动验证码还有拼图验证码才算专业爬虫吧。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/420945

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX