一个VPS送了两个IP,PHP 做爬虫时如何切换这两个IP抓取远程的东西?

2013-09-23 21:27:56 +08:00
 liuxurong
研究了一下。

file_get_contents() : 不行哦..
fsockopen:没有这功能哦..
cURL: 好像也没这个功能

求指点。
4152 次点击
所在节点    PHP
9 条回复
binux
2013-09-23 21:38:07 +08:00
curl_setopt($curlh, CURLOPT_INTERFACE, "xxx.xxx.xxx.xxx");
liuxurong
2013-09-23 21:42:21 +08:00
@binux 顺便推荐一个cURL库吧,原生的太难看了。^_^
binux
2013-09-23 21:57:00 +08:00
@liuxurong 不会php
marchtea
2013-09-23 22:54:36 +08:00
@liuxurong 献丑自己写的小东西,简化了发送请求,只要写爬取后的处理类就可以了. https://github.com/marchtea/crawler_framework
liuxurong
2013-09-23 23:11:34 +08:00
@marchtea 不错..

如果写成像Python Requests库那样就好了。

PHP已经有的那个Requests功能太少了 不好用。
marchtea
2013-09-23 23:22:57 +08:00
@liuxurong 没用过..我去看看~研究研究看看怎么改进
liuxurong
2013-09-23 23:33:44 +08:00
@marchtea

Python最火的库之一 ^_^
http://cn.python-requests.org/en/latest/

连模仿的PHP版也火,但功能太少了,建议封装cURL,必火。
thbourlove
2013-09-27 13:17:09 +08:00
不知道你说的功能太少了的那个库指的是哪一个?
https://github.com/guzzle/guzzle 这个吗?
是的话,我很好奇你觉得它缺什么功能?
liuxurong
2013-09-27 17:45:06 +08:00
@thbourlove
https://github.com/rmccue/Requests
我是说这个,guzzle 这个在普通的虚拟主机中应怎么安装呢?

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/83397

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX