采集 1688 商品有人知道怎么实现吗?

2019-09-04 09:32:55 +08:00
 jiwei3187553

最近公司需要做一个采集 1688 的商品功能,填写个链接抓取产品属性和详情图,JS 插件是已经实现了,可是现在碰到用 PHP 来实现指定链接抓取,遇到了些问题。 使用 QueryList + PhantomJS 来模拟浏览器采集提示登录,传递 cookie 登录也没什么用,现在已经卡在这几天了,不知道怎么来做了,有做过 1688 采集的吗?

6238 次点击
所在节点    PHP
15 条回复
IFoon
2019-09-04 09:42:57 +08:00
推荐使用网络神采
zarte
2019-09-04 09:48:51 +08:00
使用 selenium 试下
jiwei3187553
2019-09-04 09:53:20 +08:00
@IFoon 页面采集我自己已经实现了,应该不需要这种东西,现在查的是个自己做后台处理采集
jiwei3187553
2019-09-04 09:54:50 +08:00
@zarte 这个可以配合 QueryList + PhantomJS 一起使用吗
zarte
2019-09-04 09:55:55 +08:00
不需要 PhantomJS
yinjy
2019-09-04 09:56:37 +08:00
采集手机端网站,IP 不要用国外和阿里云的
lanpong
2019-09-04 09:59:19 +08:00
有钱就上高质量代理,模拟登录的话最后可能会风控你的账号。
jiwei3187553
2019-09-04 10:01:29 +08:00
@yinjy 真的可以!!感谢!!
chaoyangqunzhong
2019-09-04 11:15:21 +08:00
老哥,方便留个联系方式吗
involvements
2019-09-06 23:49:19 +08:00
我司同样需求,采集 1688 产品上架其他平台。
使用了官方接口 https://open.1688.com/api/apidocdetail.htm?id=com.alibaba.product:alibaba.cross.productInfo-1
lnmput
2020-02-02 20:30:35 +08:00
@involvements 这个接口申请需要什么条件
involvements
2020-02-05 19:57:35 +08:00
@lnmput 年采购额 1000 万即可
lnmput
2020-02-11 19:45:59 +08:00
@involvements 这个条件有点儿困难
involvements
2020-02-13 09:15:42 +08:00
lnmput
2020-02-13 11:44:41 +08:00
@involvements 刚开始,业务比较少,上货就靠人工采集, 确实有点儿费力

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/597742

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX