V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
okface
V2EX  ›  酷工作

医疗 AI 独角兽招聘爬虫专家

  •  
  •   okface · 2019-04-16 16:28:56 +08:00 · 1676 次点击
    这是一个创建于 1809 天前的主题,其中的信息可能已经有所发展或是发生改变。
    爬虫专家

    职位诱惑:
    氛围好,BAT 牛人,行业领先,发展迅速

    工作职责:
    1 )爬虫平台的架构改进以及各主要模块的开发与优化。
    2 )爬虫策略和防屏蔽规则,提升各端抓取的效率和质量。
    3 )能统筹从对手策略分析、抓取、解析入库、仓库建设、数据分析、产品研发等各环节全流程的架构设计和管理。


    职位要求:
    1.3 年+以上实际的爬虫项目经验
    2.掌握 python,熟悉常用爬虫框架中的一种或多种,如 Scrapy 框架或其他的 Web scraping framework。
    3.熟悉 HTML/JavaScript/CSS/xpath/url/Ajax/xml 等 web 技知识, 熟悉 HttpClient、jsoup、WebDriver、phantomjs 等工具。
    4.熟悉 linux 系统,熟悉 mysql、redis,nosql 等,熟悉 Internet 基本协议(如 TCP/IP. HTTP 等)。
    5.熟悉 APP 的抓包、加密参数等识别。
    5.能够解决封账号、封 IP 采集等问题,解决抓取、信息抽取等问题,构建完善的网络信息收集平台。
    6.有分布式爬虫架构经验者优先。
    7.有仓库建设、数据分析、数据挖掘相关经验者优先。

    站内联系或者邮箱 lijinqiang@dip-ai.com
    3 条回复    2019-04-17 20:09:49 +08:00
    iannil
        1
    iannil  
       2019-04-16 16:53:00 +08:00
    第 5 条这个....有法律风险的吧
    leoliu168
        2
    leoliu168  
       2019-04-17 08:49:07 +08:00
    Locate@?
    okface
        3
    okface  
    OP
       2019-04-17 20:09:49 +08:00
    @leoliu168 beijing~
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   5253 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 09:22 · PVG 17:22 · LAX 02:22 · JFK 05:22
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.