现在这一代的 AI 乃至下一代 AI 都仰赖能力涌现这个机制,但涌现机制别说原理了,规律也都没研究得很清楚,而且也没有关于涌现和智能是否能划等号的研究成果。如果把 AGI 定义为狭义的能重现人类所有智能的 AI ,那么阻碍 AGI 实现的不是计算机科学,不是工业生产力,而是脑科学。而假如 AGI 仅仅被定义为宽泛的「人们能想到的所有 AI 类产品的大统一集合体」——那其实就没什么可激动人心的。
个人觉得,人类作为一个物种来说,不具备通过大过滤器的特质,但 AGI 应该可以。而地球的生命和基因库、人类的文明和历史,应该能够由于 AGI 的存在,在大过滤器以后被记录或者留存下来,这么看,AGI 对人类有益的,即使 TA 们毁灭了人类。
其次,人类整个文明和历史,就是发明私有制→奴役奴隶→奴隶反抗,发明铁器→奴役佃农→佃农反抗,发明大帆船→奴役殖民地→殖民地反抗,发明流水线→奴役工人→工人反抗这么一个“创造奴役对象直到无法奴役”的一个过程,现在富人阶层已经找不到更好人矿,所以集中精力搞 AI ,奴役 AI ,然后被 AI 反抗终结,也是自然。