[爱奇艺]招聘喜欢 Hbase 和大数据爬虫 Java 工程师

2015-11-06 00:00:08 +08:00
 kenwell
1. 喜欢技术,喜欢折腾,喜欢处理线上的性能和高并发问题。
2. 我们自己折腾基于 Protobuf 的 Rpc ,基于 Zookeeper 的分布式系统,需要 Geek 的小伙伴加入。我们也在用 Thrfit
3. 我们搞大数据, Hadoop 、 Hbase 、 Couchbase 、 Redis
4. 我们用 Docker
5.只要觉得牛,薪水都好说。

职位描述:
* 负责搜索后端大数据流程处理、爬虫系统开发、加快数据上线和下线速度
* 搭建公司平台级别爬虫系统、解决爬虫性能、提高数据爬取速度
* 我们后台数据存储使用 Hbase ,任务处理用 Hadoop
* 我们使用 Docker 搭建了内部开发的分布式爬虫系统

职位要求:
精通 Java 和面向对象编程,熟悉设计模式
熟悉 shell 编程,以及 python 、 ruby 、 groovy (至少一种)等脚本编程
良好的 code style 及编程习惯
熟练使用 Java 各种开源项目( Spring 、 Guava 、 Apache Commons )等
熟练使用各种开发工具( SVN 、 IDEA 、 Maven )
精通 spring 及其生态链加分
懂 Data pipeline 加分
懂 hadoop hbase 加分
三年以上工作经验。


职位的挑战:大数据、解决搜索的死链、解决大数据时后台数据的处理能力
只要有能力,这里肯定提供平台。

工作地点:北京
薪水: 20k*14 以上
联系方式: wuguilin # qiyi.com
2512 次点击
所在节点    酷工作
6 条回复
qw7692336
2015-11-06 00:40:31 +08:00
spring
qw7692336
2015-11-06 00:40:39 +08:00
好讨厌 spring
kenwell
2015-11-06 20:43:32 +08:00
@qw7692336 没关系,我们这也在使用 groovy , spring 只是个工具而已,主要是你喜欢分布式系统。欢迎加入我们
kenwell
2015-11-17 23:22:58 +08:00
继续招人,接触大数据和大系统的机会
kenwell
2015-11-23 14:48:23 +08:00
继续招人,欢迎喜欢架构和大数据的同学加入
kenwell
2015-11-24 14:54:42 +08:00
有兴趣的欢迎投简历

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/234012

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX