目前抓淘宝数据会被封 IP 吗?前十位回答问题的朋友必发送感谢!

2014-12-31 17:21:09 +08:00
 sdjl
有个客户联系我,要抓淘宝的数据,其实我就想问一下大家,你们最近抓过淘宝的数据么?

如果抓取量较大会被封IP吗?

要先确保这个问题,才敢回复对方是否能接这个活呢,所以来v2ex问问,以免答应了客户最后发现抓不了。

作为回报,前十位有效回答者均发送感谢,确定答案后我会主动下沉帖子。

回答时请多一些说明,说说你的案例。 类似“可以”、“不可以”、“不会”这种非常简单的回复一律视为无效回复。
8101 次点击
所在节点    问与答
15 条回复
laozhao0
2014-12-31 17:54:33 +08:00
可以。我们用来抓取淘宝、天猫的商品类目、标题、价格(最难)等数据,用阿里云。完全没问题,因为相当于内网。
BlueFly
2014-12-31 17:58:27 +08:00
那些比价APP都有抓取淘宝的价钱,肯定是有法子的
flynaj
2014-12-31 17:58:40 +08:00
看你的频率跟量了,频率调慢点就没有事
crab
2014-12-31 18:05:08 +08:00
有限制的,会出现验证码让你输入。
Dannytmp
2014-12-31 18:05:21 +08:00
不要没完没了就没事,现在做淘客用的代码还不是靠抓,人工的话早累死了
dreamcog
2014-12-31 18:07:39 +08:00
求感谢!不知道!
CDuXZMAPgHp1q9ew
2014-12-31 18:24:46 +08:00
直接抓比价网的.....哈哈
alay9999
2014-12-31 18:25:55 +08:00
会,记得以前有个帖子就是研究如何范屏蔽的
imn1
2014-12-31 18:28:06 +08:00
要说清楚淘宝什么数据,淘女郎的图片我抓了300+G,然后删了280+G
价格没兴趣抓
allen3921
2014-12-31 18:42:06 +08:00
一般没啥事,但是有些需要登录抓取的,抓太频繁了会被封禁。
zzNucker
2014-12-31 18:44:09 +08:00
会,有防爬策略限制你。
blakefan
2014-12-31 18:55:37 +08:00
会,限制你,看你的频率和量了
humiaozuzu
2014-12-31 19:36:21 +08:00
我们抓的很厉害,没封。
抓 html 解析出数据这样,频率在 1w+/h
Linxing
2014-12-31 21:07:16 +08:00
之前爬豆瓣都被封,淘宝也会吧
s2555
2014-12-31 22:31:35 +08:00
我也在抓,每天也就几千,中间会有一两次连接不了

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/158261

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX