医疗 AI 独角兽招聘爬虫专家

[okface]

爬虫专家

职位诱惑：
氛围好,BAT 牛人,行业领先,发展迅速

工作职责：
1 ）爬虫平台的架构改进以及各主要模块的开发与优化。
2 ）爬虫策略和防屏蔽规则，提升各端抓取的效率和质量。
3 ）能统筹从对手策略分析、抓取、解析入库、仓库建设、数据分析、产品研发等各环节全流程的架构设计和管理。


职位要求：
1.3 年+以上实际的爬虫项目经验
2.掌握 python,熟悉常用爬虫框架中的一种或多种，如 Scrapy 框架或其他的 Web scraping framework。
3.熟悉 HTML/JavaScript/CSS/xpath/url/Ajax/xml 等 web 技知识, 熟悉 HttpClient、jsoup、WebDriver、phantomjs 等工具。
4.熟悉 linux 系统，熟悉 mysql、redis，nosql 等,熟悉 Internet 基本协议（如 TCP/IP. HTTP 等）。
5.熟悉 APP 的抓包、加密参数等识别。
5.能够解决封账号、封 IP 采集等问题,解决抓取、信息抽取等问题,构建完善的网络信息收集平台。
6.有分布式爬虫架构经验者优先。
7.有仓库建设、数据分析、数据挖掘相关经验者优先。

站内联系或者邮箱 [e-mail]

[iannil]

第 5 条这个....有法律风险的吧

[leoliu168]

Locate@?

[okface]

@leoliu168 beijing~