爬虫某网站最近禁止了国外 IP，想请问下有什么好的办法

[livc]

我在 vultr 上有个 VPS 专门爬虫一个网站保存成文件，然后提供 web 访问服务。最近发现这个网站的一个接口把境外 IP 都 ban 了，使用国内 IP 访问就没问题。

目前我的思路是：买一个国内的服务器，专门用来爬虫，爬完保存下来的文件 scp 到 vultr 服务器上。

这样就是增加了国内服务器的成本，国内服务器又比较贵，不知道大佬有没有更好的解决方案？

或者买个树莓派？

[biu7]

买点代理不行么

[CriseLYJ]

楼上正解

[hugee]

原来就是你小子在爬我的站

[livc]

@biu7 #1 代理好像更贵吧？有推荐的站吗

[lxk11153]

原来就是你小子在爬我的站

[biu7]

@livc #4 国内代理一般两类，一种直接卖给你短时（ 3-5min ）有效的 ip，比如几块钱 1000 个之类的，一种是直接转发你的请求，按请求数算钱。可以看下讯代理、阿布云之类的（非广告）

[em70]

告诉你一个诀窍啊,阿里云有一种抢占式 ECS,才几毛钱一个小时,因为有百分之几的几率会被释放,不适合做长期服务,却是爬虫的天然选择,随用随买,不用就释放

[livc]

@biu7 #6 明白了，谢谢

[livc]

@em70 #7 我这个是需要每天爬的，得长期用呢

[em70]

刚帮你看了下,乌兰察布机房最便宜,才 8 分钱一个小时,北京 1 毛 3

[em70]

@livc 才 3%的释放几率,多买几台

[linuxvalue]

代理 ip

[heiheidewo]

原来就是你小子在爬我的站

[Soar360]

原来就是你小子在爬我的站

[nightwitch]

#7 楼的方案不是挺好的。
每天定时开个阿里云竞价实例，然后爬完释放就可以了
可以参考以下的
https://github.com/rockswang/alispot

[murmur]

你现在买了境内机房，下次他把各大云的 ip 也禁了

[121121121]

代理服务器

[ipoh]

你需要淘宝"ADSL VPS" 每几分钟自动重播一次
封 ip 也不怕

[natsji]

你用辣鸡阿里清凉云的香港或者新加坡服务器，IP 地址会被很多 ip 库识别成大陆的。

[locoz]

你就不能直接买代理或者在爬的时候开点国内云服务器做代理服务器吗…