爬虫工程师

[linger2012]

岗位职责
负责设计和开发分布式的网络爬虫应用，进行互联网相关信息的抓取和分析
负责与搜索技术相关的系统模块的设计、开发和维护工作，达到高效稳定的效果
负责与搜索技术相关的系统模块的设计、开发和维护工作，达到高效稳定的效果
设计爬取、调度和抽取算法，优化系统
负责抓取数据的深度提取和挖掘

任职要求
精通网页抓取原理及技术，精通正则表达式，从结构化的和非结构化的数据中获取信息
熟悉linux平台开发，具备搜索引擎开发的研究背景和项目背景
熟悉大型互联网内容搜索产品的设计, 架构, 对大数据量搜索应用有一定经验
熟悉搜索引擎和网络爬虫相关技术
熟悉Lucene/Nutch/Heritrix/HtmlParser等开源工具
熟悉hadoop并行计算和编程框架，有HDFS、HBase、Solr使用经验优先
具有数据挖掘、自然语言处理、信息检索、机器学习背景的优先

公司：北京letv
有意者可以加QQ（1581244296）私聊
http://jobs.letv.com/bigdata/details/pachong.html

[jason52]

乐视要爬虫工程师干啥捏？

另外楼主换工作啦~

[Tink]

爬虫现在都有专门的称谓了。。。

[maxbon]

难道乐视要做搜索引擎 (๑ŐдŐ)b

[acros]

虽然我不是来应聘的，这岗位描述信息稍微少了点（有因？）。

话说 爬虫工程师 讲给行外人听，估计会以为趴地里除虫的···

[linger2012]

欢迎各位大牛投递简历