某招聘领域互联网公司招聘爬虫工程师,坐标北京
要求如下:
1.负责爬虫项目的开发、维护,实现数据采集、清洗、结构化、入库等功能
2.处理反爬机制,保障爬虫项目的稳定运行
3.优化爬虫策略,提升数据抓取的效率和质量
4.各部门爬虫业务需求的支持
1.本科以上学历,熟练掌握 Python 开发语言,熟悉各类数据结构和算法,熟悉 JavaScript 、SQL 等
2.熟练掌握网页抓取原理,熟悉 HTML 、CSS 、Xpath 、正则等 web 相关知识及数据抽取技术
3.熟悉常见反爬机制及逆向破解手段,能解决封号、封 ip 、JS 加密等
4.熟悉自动化工具的使用,如 Selenium 、Puppeteer 、drissionpage 、appnium 等
5.熟悉常用爬虫框架原理及使用
6.熟悉 Linux 服务器,MySQL 、Redis 、MongoDB 等数据库的使用
我是开发,有想法的可以加我微信,我给 hr 推荐 V:am9lbXk3 ( base64 )