关于 Clash、curl、 Python pip/requests/httpx 代理的一些困惑

各位大佬，有个关于代理的困惑望解答。

问题描述

当我打开 Clash 后，curl/pip/requests/httpx 的工作结果让有些困惑。

环境

系统：Windows 10/11
Python：3.8.0

curl

通过 curl 请求 baidu 和 google：

curl 'https://www.baidu.com'

请求 baidu ，开不开 Clash 都可以正常访问，符合预期。

curl 'https://www.google.com'

请求 google ，不开 Clash 肯定访问不了，符合预期

开了 Clash 后，需要指定 curl 的 proxy 参数，可以访问，符合预期

curl -x 'http://localhost:7890' 'https://www.google.com'

我猜 curl 默认应该是直接请求谷歌服务器，只有指定了 proxy 参数后，curl 才走代理请求。

pip

接下来 pip 的行为开始让我感到困惑。

为了避免每次 pip install 都要使用 -i 参数指定清华源，我在 pip 全局配置设置了清华源。

这就开始出现了一种诡异的事情：我开着 Clash ，在 google 上搜索着问题，然后用 pip 拉包，结果 pip 报错了。

然后我把 Clash 系统代理关闭，google 是搜不了了，但是 pip 成功的从清华源那里拉到了包。

这样频繁的开关很麻烦，我就搜索解决方法，网上的解决方案是：

Clash 设置 -> 系统代理 -> 绕过域/网络 -> 加上一行 pypi.tuna.tsinghua.edu.cn

我通过这篇文章了解到了绕过的目的： https://clashyun.com/195.html

第一个问题：我的理解是清华源禁止了境外的访问请求，请问这样理解对么？

requests 和 httpx

当开着 Clash 系统代理时，使用这样两个库访问 baidu 就很奇怪。

curl 可以正常访问百度。

但是 requests 就没法访问百度：

response_0 = requests.get('https://www.baidu.com')
print(response_0.status_code)

爆出以下错误：

HTTPSConnectionPool(host='www.baidu.com', port=443): Max retries exceeded with url: / (Caused by ProxyError('Unable to connect to proxy', FileNotFoundError(2, 'No such file or directory')))

同样的 httpx：

httpx 'https://www.baidu.com'

也会报错：

ConnectError: [Errno 0] Error

网上的解决方案是，设置 proxy 参数：

走代理

proxies_1 = {
  'http': 'http://127.0.0.1:7890',
  'https': 'http://127.0.0.1:7890',
}
response_1 = requests.get('https://www.baidu.com', proxies=proxies_1)
print(response_1.status_code)

不走代理

proxies_2 = {
  'http': None,
  'https': None,
}
response_2 = requests.get('https://www.baidu.com', proxies=proxies_2)
print(response_2.status_code)

httpx 指定了 proxy 参数后可以访问 baidu

httpx 'https://www.baidu.com' --proxy 'http://localhost:7890'

第二个问题：为什么开了 Clash 后，requests 和 httpx 都必须显示的指定 proxy 才可以请求 baidu ？

我对 Clash 、代理、requests 这些了解的很浅，希望能给些思路，如果有参考的文章也很感谢，想弄弄明白。

Koril

41 天前

感谢大家的回复，晚上回家翻了下源码，这里我自问自答下：

关于第二个问题：为什么 Windows 开了 Clash 的系统代理，使用 requests 如果不显示的设置 proxies 这个参数（无论是方法传参，还是设置环境变量）就无法请求的问题。

requests 的 sessions 模块的 merge_environment_settings() 方法调用了 Python 自带的 urllib 库中的 request 模块的 getproxies() 方法。

似乎顺序是这样的：方法传参 > 环境变量 > 注册表

如果方法没传参，环境变量也没有设置 http/https_proxy 的话，代码走到以下 elif 块中，去读 Windows 的注册表：

```
elif os.name == 'nt':
def getproxies_registry():
"""Return a dictionary of scheme -> proxy server URL mappings.

Win32 uses the registry to store proxies.

"""
# 省略部分代码
try:
# 查询 win 注册表
internetSettings = winreg.OpenKey(winreg.HKEY_CURRENT_USER,
r'Software\Microsoft\Windows\CurrentVersion\Internet Settings')
proxyEnable = winreg.QueryValueEx(internetSettings,
'ProxyEnable')[0]
if proxyEnable:
# Returned as Unicode but problems if not converted to ASCII
proxyServer = str(winreg.QueryValueEx(internetSettings,
'ProxyServer')[0])
if '=' in proxyServer:
# Per-protocol settings
for p in proxyServer.split(';'):
protocol, address = p.split('=', 1)
# See if address has a type:// prefix
if not re.match('^([^/:]+)://', address):
address = '%s://%s' % (protocol, address)
proxies[protocol] = address
else:
# Use one setting for all protocols
if proxyServer[:5] == 'http:':
proxies['http'] = proxyServer
else:
proxies['http'] = 'http://%s' % proxyServer
proxies['https'] = 'https://%s' % proxyServer
proxies['ftp'] = 'ftp://%s' % proxyServer
internetSettings.Close()

return proxies
```