公司反爬虫产品测试,目前处于 alpha 版本,正在寻求测试客户,无奈社区问一波,有需求的伙伴看过来

2019-04-02 10:56:00 +08:00
 chocho
反爬虫产品,主要为网站提供反爬虫安全防护,目前有一些业务方集成在自己的业务中去做,我们提供的是一整套防护方案,包括爬虫发现和拦截手段,部署结构采用流量反代的模型,既不影响原业务的开展,也可以拦截大量脚本,模拟器流量。

前期测试阶段主要通过合作的形式,alpha 版本提供免费测试名额。
4601 次点击
所在节点    Python
38 条回复
Abbeyok
2019-04-02 11:14:07 +08:00
不如发个 Demo,让大家测试一下是否真的能防爬虫
iannil
2019-04-02 11:14:54 +08:00
@Abbeyok #1 为什么你回复我能看到你的表情
StarRED
2019-04-02 11:16:52 +08:00
🙃
Abbeyok
2019-04-02 11:17:05 +08:00
@iannil 可能这就是心有灵犀
chocho
2019-04-02 11:17:47 +08:00
这几天陆续会放出一些 demo 和接入方式给大家
chocho
2019-04-02 11:45:47 +08:00
感兴趣的扫码,进群,里面主要交流测试网站和测试接入,也可以在线提问,可以交流反爬虫知识,测试阶段也可能会有些有偿的竞赛,不排除设奖金做爬虫攻防

[!text]( https://bob.36deep.com/assets/others/antirobots.jpg)
xuminzhong
2019-04-02 12:03:53 +08:00
我是做爬虫的,除了 100% 弹出的图形验证码,还没有我抓不到的。
lhx2008
2019-04-02 12:10:13 +08:00
外挂反爬虫原理也不多,不知道有没有什么新意?反代有没有性能和可用性问题?
itskingname
2019-04-02 12:35:54 +08:00
做爬虫的同学,大家不要帮他发展反爬虫产品。
chocho
2019-04-02 12:42:44 +08:00
@lhx2008 反代有性能损耗,可用性不用担心
chocho
2019-04-02 12:43:42 +08:00
@itskingname 哈哈哈,安全攻防都是存在的,即时我们不做,也是有人在做,另外爬虫这个事情,主要防止恶劣行为,不是所有的东西都是防护的
chocho
2019-04-02 12:44:50 +08:00
@xuminzhong 哈哈,那你们很厉害啊,请高抬贵手
tingyunsay
2019-04-02 13:11:54 +08:00
可以挂出来,大家一起给你测测😂
aver4vex
2019-04-02 13:14:52 +08:00
挂出来,让我们测试下效果。
lusi1990
2019-04-02 13:17:31 +08:00
赶快挂出来测试下
Johnson66
2019-04-02 13:32:47 +08:00
#7 加一 除非让用户都访问不了,否则没有爬不了的~
szpShang
2019-04-02 14:13:44 +08:00
淘宝现在访问都要用户登录了。如果频繁看评论信息还会被限制了。 那现在你们还会像以前访问淘宝吗?但是爬淘宝的数据还是可行的。只是成本增加(需要多个账号和新的调度规则去爬取)。
反爬的东西只会增加用户的反感,然后增加爬取的成本。等到用户量很少的时候,基本上就不用爬取了(已经没有意义了)。
计算机的原理就是要想看到数据。这个数据必须存储到本地机器上。就好比邮箱钥匙放在邮箱里面,要想开邮箱必须先拿到钥匙,要想拿到钥匙必须先开邮箱。反爬是否能行呢。
kisshere
2019-04-02 14:16:56 +08:00
@xuminzhong 就是弹出图形验证码,都能破,除了 recaptcha,是真没办法
c4f36e5766583218
2019-04-02 14:22:34 +08:00
@kisshere 广义来讲都能破,时间问题吧,2333 我瞎说的
[破解谷歌最新 ReCaptcha 成功率高达 91%的验证反制技术]( https://zhuanlan.zhihu.com/p/53970061)
chocho
2019-04-02 14:26:31 +08:00
@c4f36e5766583218 是的广义上面来讲 纯前段的反爬虫都是可以破解的,就是时间问题,所以需要动态对抗,或者形式转嫁

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/551147

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX