[武汉] [上市公司] 招 net 爬虫工程师 [薪资范围 15-20K]

2021-01-25 17:03:25 +08:00
 navyChin
岗位职责
1,模拟登录各电商平台下载数据(合规)

专业知识与技能要求
1,熟练使用 Fiddle ( HttpAnalyze,模拟器等)抓取网页,APP,客户端软件数据包;
2,熟练使用浏览器进行 JS 调试;
3,熟练使用 WebBrowser,CefSharp,win32 api 等类似工具组件;
4,熟悉字符验证码常用识别方式( OCR 识别,在线打码);
5,熟悉短信常用识别方式(短信猫);
6,熟悉 IP 限制常用解决方案(代理 IP,拨号服务器等);
7 、至少了解 1 种其它开发语言:如 java 、易语言、python 等 ;

公司:武汉福禄网络科技有限公司
沟通方式:wx:top15from
1129 次点击
所在节点    酷工作
2 条回复
forgottencoast
2021-01-25 20:59:43 +08:00
我在前公司写过一套非常完整的.Net 框架,大部分通过配置文件就可以实现各种模拟登录,获取数据。
navyChin
2021-01-25 22:07:14 +08:00
京东有滑动,拼多多有 crawlerInfo 算法,腾讯有 tdc 算法,天猫稍微好点,纯走 http 协议还是有点难度。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/748221

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX