文心一言比 chatgpt 差的不是一星半点

42 天前
 pauluswanggang
昨天心血来潮想试试文心一言的体验怎么样,随便问了一个问题:香港的面积多大?结果回答完问题来了一句香港是中国的领土等等,我问我只是问个面积为什么要加最后一句啊,回答说要强调之类云云的(忘了截图了)。一个地理问题生生弄成了政治题。我换成 chatgpt 后,人家老老实实的问什么回答什么,即使后来问了一个关于钓鱼岛的问题,哪个国家的理由更合理一些也回答的不偏不倚。一比较发现,弄文心一言这帮人的格局不是一般的小。
5460 次点击
所在节点    OpenAI
75 条回复
NotLongNil
42 天前
你连原因都没搞明白啊……是百度的人希望做成这样的吗?在中国哪个 AI 上线前不用经过一轮政治考试,你问的这些问题的答案哪个不是在上线前就被审过一次,得骂对人啊
zuosiruan
42 天前
一楼已经说的很好了。格局小的不是文心一言。
ztm0929
42 天前
@NotLongNil 虽然确实要审查,但是百度的技术力确实不如人也是事实。你站在中国大陆以外的视角问 ChatGPT 它总能尽可能中立。

回到问题本身,从训练效率的角度来讲就是百度图快偷懒而已…(它们也许暂时不愿意在安全策略方面花精力,才会出现这种完全无关的回答
NotLongNil
42 天前
@ztm0929 首先,百度的技术不差的,跟 chatgpt 比是有差距,但你是跟世界第一比啊,谷歌也没搞过 chatgpt 。然后,你可以在网上找下他们是怎么审查的,有没有可能百度已经努力过?它现在的答案,就是那种最安全,不会被人骂的那种,除了被人骂它能力不行。作为一个中国的商业公司,被人骂不行,总好过不正确
laikick
42 天前
文明洼地是这样的
NotLongNil
42 天前
@ztm0929 我们抵制百度是因为它价值观有问题,但不是它技术不行,
pauluswanggang
42 天前
@NotLongNil 百度努力没努力过咱是不知道,但是知道他们努力过竞价排名,不是一般的努力
pauluswanggang
42 天前
只希望果子机国内 AI 千万别用他家的
jaio1
42 天前
百度一下:三好学生是哪三好
NotLongNil
42 天前
@pauluswanggang 我本人是抵制百度的,巴不得它倒闭,但 AI 这事,骂它没用。
ztm0929
42 天前
@NotLongNil 你误解我的意思了,我没有评价回答质量(事实上我也不懂具体如何评测,网上倒是有很多指标测评)。

我是指 OP 提到的这个场景,为了“防越狱”(这里是领土争议,但其实还有很多,杀人方法、制作爆炸品、巴以冲突、俄乌战争、LGBT 、人权问题等等各种争议)而采取的安全策略,相对来说,OpenAI 和微软会更加谨慎。而主题里提到的情况,明显就是图省事,“我猜这人等会问些乱七八糟的问题,我直接塞一堆特定话语让机器照读就完事了”

我还真没怎么搜索到百度对生成式 AI 的一些报告,这里附上微软的“负责任的 AI”解读供参考(“正确”与否见仁见智)
https://learn.microsoft.com/zh-cn/azure/machine-learning/concept-responsible-ai

不过我也赞成你说的,百度的技术实力并不差(其实是无数科学家、工程师、程序员的付出),只是决策层有自己一贯的“取巧”态度罢了

全世界的商业公司核心都是一样——“搞钱”,但是我发现似乎中国的头部公司为了追求速度,其他的都不是特别介意…
NoOneNoBody
42 天前
这贴子也是瞬间分出两个方向,都一样 😂
zhangeric
42 天前
建议楼主问一下 chatgpt 涉及到美国的政治问题嘛,至少这样才公平啊
Liftman
42 天前
chatgpt 的模型的调试目标是,准确,专业,逻辑推理。

文心一言的调试目标是,绝对不要犯错。

基本上国际上的基准测试都是数学,编码,物理化为主。。

文心一言的测试是,历年中文讽刺梗。



而且你们想想。。百度做搜索,ai ,自动驾驶,都是最早的。

但是现在百度。搜索=shit 。ai=shit 。自动驾驶=?。

所以这个公司干啥啥不行不是没原因的。又不是起步晚。



但是反观国产模型几个开源的,其实做的还不错的。虽然很多是靠基准刷的。拟合一点。但是好歹有努力的。
paradoxs
42 天前
chatgpt 回答中国法律的问题,还是差的很远。

https://imgur.com/AGtYejf

这个题目的答案是 AC 。


大家可以去试下国内的 AI ,回答的情况好很多。 题目高清图: https://imgur.com/xNfhK8z
niubee1
42 天前
你去 chatgpt 上问问关于犹太人的问题试试
PositionZero
42 天前
OP 试试豆包的回复,审查更严

https://i.imgur.com/a/fCykohb.jpg
lambdaX999
42 天前
你去问下魏则西为什么死的
PositionZero
42 天前
pauluswanggang
42 天前
@zhangeric #13 这个也问了,这次截图了 ,我虽然讨厌 LGBT ,但回答起码没让我反感,没有明确的摇旗呐喊吧

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1087977

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX