想了解一下像 1688、淘宝、京东、PDD 如何抓取店铺或者商品信息

2020-12-30 11:42:06 +08:00
 FelixZ88

有没有绕过反扒机制的办法？一些电商 ERP 一般是怎么做的？

2999 次点击
所在节点    Python
7 条回复
wangbenjun5
2020-12-30 11:49:42 +08:00
电商是爬虫和反扒重点攻防领域，爬虫写的好，牢饭吃的饱
Light3
2020-12-30 11:50:49 +08:00
建议通过正常途径
如申请 淘宝客 这种方式来正确使用 api
而不是吃牢饭
lithiumii
2020-12-30 11:53:36 +08:00
建议百度搜，然后点百度推荐的广告进去买服务，让别人做吃牢饭的工作
czfy
2020-12-30 12:11:00 +08:00
1. 电商是被爬和反爬的重点阵地，理论上你在这里不会问到什么有价值的回答，因为做这方面爬虫的每天拿着工资在琢磨这件事，免费分享出来被电商平台方看到后升级反爬手段，是自己找死

2. 拼多多的爬虫目前好像还没听说过有成功的，如果有，我确实也有兴趣了解一下最后成型的解决方案供应商（不是代码 /原理）
natashahollyz
2020-12-30 12:17:52 +08:00
每天一个（表面上））免费吃饭技巧
FelixZ88
2020-12-30 19:04:18 +08:00
@Light3 申请淘宝客可以抓取某一页、某一整个店铺、某一个类目的所有产品信息吗？
huyu
2021-01-06 10:53:35 +08:00
京东反爬是难度最低，淘宝要登录(要帐号)，1688 帐爬慢点还行，美团和 pdd 难度很大，做爬虫很苦逼的，建议转行

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/740260

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX