Google Gemini Pro 深度体验,离 GPT4 还有些差距

2023-12-11 10:01:00 +08:00
 xuelang

按照 Google 官方的介绍,Gemini 是第一个在 MMLU (大规模多任务语言理解)方面超越人类专家的模型,在推理,数学和代码上的能力也都超过了 GPT4 。而且还是一个多模态的模型,可以同时处理文本,图像,声音和视频,评测分数也比 GPT-4V 更高。

从 Google 发布的宣传片来看,Gemini 的表现确实让人惊艳。发布几天后,很多人已经对 Gemini 有不少质疑的声音,因为发布的视频是编辑过的。Gemini 的真实效果如何,还是要自己亲自试一试才知道。目前 Google 对外只放开了 Gemini Pro 的使用,自己用 bard 感知下 Gemini Pro 到底怎么样吧。

功能 ChatGPT 4 Bard(Gemini Pro)
使用限制 地区限制,IP 风控,支付风控 地区限制
费用 付费 免费
速度 很慢,不过最新的 GPT4-tubro 快了不少 速度很快
联网能力 All-Tools 可以联网 比较迷,不完善的联网能力 |
语言能力 很强 比 GPT4 差,中文能力没 GPT4 强
数学问题 一般 比 GPT-4 差
编程能力 很强 比 GPT-4 差
Bug 很少遇见,对话太长有时候会 比较容易触发,问答明显异常

全文在博客:

Google Gemini Pro 深度体验,离 GPT4 还有多大差距?

5016 次点击
所在节点    OpenAI
48 条回复
nextone
2023-12-11 22:35:29 +08:00
@xuelang 文心一言付费版本也很垃圾,买了一个月,没用几次,太差了
woorz
2023-12-11 23:32:00 +08:00
<iframe src="//player.bilibili.com/player.html?aid=237039891&bvid=BV11e411C76v&cid=1363262155&p=1" scrolling="no" border="0" frameborder="no" framespacing="0" allowfullscreen="true"> </iframe>
woorz
2023-12-11 23:32:54 +08:00
发错。
可以撤回?
xuelang
2023-12-12 09:27:37 +08:00
@nextone 上次李彦宏还在那吹牛文心一言付费版本中文能力和 4 差不多。。
我还信了。。
xuelang
2023-12-12 09:27:58 +08:00
@woorz v 站不支持撤回的,不过没关系
keegan
2023-12-12 21:39:20 +08:00
@xuelang #33 这句话怎么理解:比 GPT4 差,中文能力没 GPT4 强
xuelang
2023-12-13 09:37:28 +08:00
@keegan 想强调下,中文能力更差。Gemini pro 目前只支持英文,英文下比 gpt4 差,中文更差。
zhu327808
2023-12-17 10:02:41 +08:00
写了一个 adapter 有需要可以尝试:

https://github.com/zhu327/gemini-openai-proxy

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/999267

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX