scrapy 在搜狗微信按时间段搜索时,返回的源码是“无搜索结果”

2019-09-17 18:12:07 +08:00
 zdnyp

:bowtie:

RT

scrapy 在搜狗微信搜索关键词时,按照时间段搜索的,但是返回的源码跟浏览器直接搜索的不一样。

并不是跳转到了验证码页面,而是返回的源码就是“无搜索结果”,实际上用浏览器操作是有搜索结果的。

1650 次点击
所在节点    程序员
3 条回复
zdnyp
2019-09-18 09:13:12 +08:00
打破零回复
AOIO7t
2019-09-18 09:14:51 +08:00
你被检测到了
zdnyp
2019-09-18 09:23:25 +08:00
@AOIO7t 加了代理 IP 的,一般被检测到不都是跳转到验证码页面么...
如果不按照时间段筛选,就没问题

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/601608

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX