最近刚接触爬虫,想爬一些墙外的数据
有个疑问,目前我的代理是这样设置的
proxies = {
"https": "http://127.0.0.1:8001",
"http": "http://127.0.0.1:8001",
}
需要挂着梯子,才可以正常返回数据
但是我理解的是如果我设置一个定时爬虫程序,它应该是跟我的机器环境无关的啊,也就是说,无论我的机器是否是挂着梯子的,程序应该都可以通过增加代理参数正常的返回数据才对?
我尝试着把 proxies 参数设置成挂梯子后的 IP+IP 端口仍然无法正常获取数据
不知道是不是我的方法不对,还是理解有问题,望大佬指点一下,谢谢了
这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。
V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。
V2EX is a community of developers, designers and creative people.