1个VPS，有2个IP，Python用Requests抓取网页，如何使用第二个IP？

[liuxurong]

xxx.xxx.xxx.xx1
xxx.xxx.xxx.xx2

.xx1是默认那个，如何在python内用第二个IP？

[manoon]

socket proxy

[mudone]

cURL可以指定ip发起请求。

[CoX]

以前做过个小应用，用的是httplib2，稍作了下修改就能bind ip 了，不知道requests能不能直接bind ip

[Livid]

import requests

headers = {}
headers['Host'] = 'www.example.com'
requests.get('http://10.0.0.1/', headers=headers)

[BigZ]

@Livid 你没有看懂lz意思，

lz，你只能修改路由表，让系统使用指定IP作为源址，用ip route 来改
简单的做法是，你先在本机取消一个ip的绑定，只留你想要的那个
或者你起一个nginx做代理，配置文件里面listen两个不同的ip，python使用这个代理去采集，反正都是本机，性能损失不大

[liuxurong]

谢谢楼上各位
看来要用 @BigZ 的方法

[bhuztez]

SO_BINDTODEVICE 泪流满面啊

[CoX]

@liuxurong 虽然性能损失不大，但是为此做个nginx代理真必要

httplib2改个三五行代码，直接就能实现你的要求

[liuxurong]

@CoX 可否给个示例代码？

[zbgzao]

当然random_ip务必要改为外网IP
http://gist.github.com/4117504

[zbgzao]

感觉v2ex积分策略有点不靠谱, 我们算是绞尽脑汁给楼主想解决方案, 居然还要扣点, 而楼主可是一箭双雕 @Livid

[kuaizi]

一句命令修改VPS出口ip
http://actgod.com/archives/33/
这个？

[CoX]

@liuxurong 和10L代码类似，就是加上 socket.bind((source_ip,0)) 即可

[ledzep2]

bind正解

[liuxurong]

@zbgzao 代码可用，谢谢你们！采用这个方案了 我愿意给积分都给你 哈哈 :)
@CoX

[humiaozuzu]

@Livid @zbgzao 你的绞尽脑汁就是copy的很辛苦吗？ http://stackoverflow.com/a/1150408/492864

@liuxurong google: python set source ip 就有很多答案了

[yaotian]

@zbgzao 这个random ip要在线吗？还是说任意的ip地址？

[BOYPT]

@zbgzao 充分说明v2ex是一个鼓励吐槽的社区。

[neildd]

--- /usr/lib64/python2.4/httplib.py 2009-09-04 03:38:18.000000000 +0800
+++ /usr/lib64/python2.4/httplib.py 2010-07-06 18:07:18.000000000 +0800
@@ -156,6 +156,7 @@
# maximal amount of data to read at one time in _safe_read
MAXAMOUNT = 1048576

+Local_BindIP = None
class HTTPMessage(mimetools.Message):

def addheader(self, key, value):
@@ -621,6 +622,8 @@
af, socktype, proto, canonname, sa = res
try:
self.sock = socket.socket(af, socktype, proto)
+ if Local_BindIP is not None:
+ self.sock.bind((Local_BindIP,0))
if self.debuglevel > 0:
print "connect: (%s, %s)" % (self.host, self.port)
self.sock.connect(sa)