百度在 AI 比赛中作弊。

2015-06-04 14:36:19 +08:00
 anthonyeef

http://www.nytimes.com/2015/06/04/technology/computer-scientists-are-astir-after-baidu-team-is-barred-from-ai-competition.html?_r=2

SAN FRANCISCO — A group of researchers at the Chinese web services company Baidu have been barred from participating in an international competition for artificial intelligence technology after organizers discovered that the Baidu scientists broke the contest’s rules.

7920 次点击
所在节点    程序员
32 条回复
gkiwi
2015-06-05 01:56:02 +08:00
事件原委大概就是做图片分类识别,人眼的误差率是5%,谷歌做到了4.8%,百度使用了一点手段做到了4.5%。
ImageNet网站存在的目的是为了提供一个更好的竞争平台以让世界的图片识别水平提高,因为其名气大权威高,所以百度家做着做着就纯为这个排名了。
而是用的策略就是不停的用小号去测ImageNet的测试数据特征,然后优化自己的程序,实际上就是把原本用来测试你机器学习算法效率的的测试库当成了训练库来用了,最后通过过拟合,实现了4.5%。。。

估计当事人是得哭了,毕竟圈子那么小,一作弊基本上大家就都知道了。。[蜡烛~]
Pandroid
2015-06-05 06:43:03 +08:00
把测试图集当作算法训练图集,也真是够可以的
aladd
2015-06-05 10:39:44 +08:00
公司的规模和其道德水准不划等号。。。
otakustay
2015-06-05 13:35:17 +08:00
某个人对这事的一句话说得好:GRE、托福做机经的人都是作弊
quix
2015-06-05 13:54:34 +08:00
国内的大企业不怎么重视形象... 这到底是社会集体的价值观扭曲呢, 还仅仅是国人面前的形象不值钱导致的.
g00001
2015-06-05 17:37:32 +08:00
舆论对比较大的互联网公司作弊骂的还是比较欢乐的、一般就不会有那种怒不可遏愤怒声讨的样子,笑贫不笑娼嘛。但如果是针对个人站长......什么的,那么就可能就出现一大堆高调的圣人婊奋力狂喷且难以自禁了,看起来是正义的样子其实骨子里就是奴性。
Khlieb
2015-06-05 22:50:09 +08:00
@TuxcraFt 他们其实是被政策惯坏的
nkssai
2015-06-06 17:35:32 +08:00
@jacob 本来就是考验模型的E_{out},比赛中切换验证集是很正常的事情啊。不知道你聊不了解机器学习的比赛。用切换验证集的方式防止提供的算法过拟合也算是正常的方法吧。 而且,切换验证集不能保证比赛的公平性这个说法,我还是第一次听说。
nkssai
2015-06-06 17:43:54 +08:00
@gkiwi 当事人确实是面子上挂不住,说不定这东西也是KPI逼出来的。Baidu每年在NIPS、ICML这些顶会上花钱当Sponsors,不知道他们的人参会的时候感觉怎么样。
jacob
2015-06-06 17:56:52 +08:00
@nkssai 这是比赛,拿人家的题目训练算法我也是醉了
mingyun
2015-06-07 10:42:15 +08:00
呵呵
rushcheyo
2015-06-07 16:03:35 +08:00
@1023400273 根本没有所谓的「自然概率」,必须只有依靠量子力学才能得到自然概率,那只有顶级 CPU 才有。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/196072

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX