求稳定的自建 chatgpt api 中转服务的方法

2023-11-20 10:36:36 +08:00
 caneman

目前的方案是高质量机场 + openclash ,给境内服务器上的 api 服务提供梯子环境

整体用了挺久的,成本可控,缺点就是受梯子稳定性影响比较大,偶尔有个波动抽风

能想到的最好的方案

  1. 境外服务器直接搭

  2. Azure

假想会遇到的问题

  1. 首先 Azure 和 openai 官方的接口的形式是不太一样的,而且模形似乎也有出入,不想用 Azure .

  2. 境外服务器的话有两个问题

    1. 一个是 服务器-> openai ,这段是有阻断风险的,据我所知有些主机商的机子是访问不的 openai 的,还要考虑到现在不阻断以后会不会阻断的问题,综合成本 & 稳定性 & 速度的话,不知道有没有推荐的?

    2. 境内 -> 服务器,这段一般没问题,不过也有阻断的风险,也要降低。

其他补充

小团队自用,规模不大,并发不高,不对外开放,不盈利。

考虑到数据隐私问题,第三方 api 服务不考虑。

4063 次点击
所在节点    OpenAI
24 条回复
jmljava
2023-11-20 10:46:56 +08:00
可以搞个搬瓦工的小服务器做转发,做好访问设置问题不大,速度还挺好
gaobh
2023-11-20 10:55:12 +08:00
API 除了不可用地区的服务器不能用之外,没其他限制
caneman
2023-11-20 11:02:11 +08:00
@jmljava 以前每次严打的时候,搬瓦工的节点就爱抽风,还以为他不靠谱。老哥用多久了,openai 会封号嘛?
hahiru
2023-11-20 11:08:10 +08:00
自建 API 平台,比如 oneapi ,然后中转用 verge 。
目前自用很稳定。
hahiru
2023-11-20 11:09:22 +08:00
@hahiru #4 勘误:是 vercel 反向代理。
freshgoose
2023-11-20 11:10:19 +08:00
用一个国内域名指向境外主机,该主机内用 nginx 转发到 openai ,你只需要配置一个 nginx 就行了……
jmljava
2023-11-20 11:25:37 +08:00
@caneman 服务器只做代理转发应该问题不大,封号也会封,不过我经历的都是 openai 大规模封号那种,应该不是因为代理访问的问题
caneman
2023-11-20 11:48:16 +08:00
@freshgoose 境外主机有啥推荐的吗?
limfoo1
2023-11-20 13:55:47 +08:00
1. cloudflare worker api 反代;
2. cloudflare AI gateway ,但是 x 上有人说会漏 IP 导致封号。
cheng6563
2023-11-20 14:30:10 +08:00
cloudflare worker 直接反代了。。。都不用服务器
caneman
2023-11-20 14:47:19 +08:00
@cheng6563
@limfoo1

稳定吗?链接超时之类的,对稳定性有一定要求
zhaoweihao
2023-11-20 15:02:29 +08:00
这不买个 chatgpt plus 然后团队内共享账号就可以了吗
walle1530
2023-11-20 15:35:11 +08:00
反过来了,我是用了半年多境外服务器,阿里和腾讯的,最近非常不稳定,丢包严重,于是乎现在换到了物理机+代理,十多天了还挺稳
caneman
2023-11-20 15:55:47 +08:00
@zhaoweihao

目前是用的 API ,几十个人的规模吧,共享帐号不是很合适
caneman
2023-11-20 15:57:45 +08:00
@walle1530

这样的吗?我们目前是代理方案,用了有半年了,但是代理有时候还是会抽风的。

是不是会有 timeout 之类的问题,还想着切到境外服务器会不会稳一些😑
xabclink
2023-11-20 16:24:26 +08:00
https://open-assistant.cn 建议看看,可以邮件联系,独立部署,我们这边每天 300 美元左右的服务,使用的是这个系统
lekai63
2023-11-20 16:48:43 +08:00
cf-worker 反代 最近有个问题:cf 会强制给你带上 cf-connect-ip 附上你的真实 ip 。 然后 openai API 那边会 ban 掉你。
当然,也可能是因为我直接用 cf 的 ai gateway 的缘故。

反正现在我转到 render 部署 openai-forward 了
walle1530
2023-11-20 17:22:55 +08:00
@caneman 反正我用阿里腾讯的是不稳,代理的话要看机场质量,我现在用的还可以
czy0612
2023-11-20 17:42:16 +08:00
测试过 cf-worker 、腾讯云函数、日本搬瓦工 自建 caddy 反代
稳定性 自建反代 > 腾讯云函数 > cf-worker
a342191555
2023-11-20 18:01:45 +08:00
我用的是 Cloudflare CDN + 腾讯云 lightsail 日本 + 八爷的 opencat 反代,已稳定工作半年有余,数据量不小,偶尔会有波动,但绝大多数情况下是正常的

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/993372

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX