eBook

我自己的故事

这个世纪的某个时候,机器将会超越人类的智力水平。这一事件——“奇点”——将会成为我们历史中最重要的事件,而明智地操纵它将成为我们能够做到的最重要事情。 从 阿兰·图灵(Alan Turing)杰克·古德(Jack Good) 乃至 比尔·乔伊(Bill Joy)斯蒂芬·霍金(Stephen Hawking) 这些杰出人物都曾经向我们告诫过这一事件。为什么我认为霍金他们的告诫都是正确的呢?对此我们又能做些什么呢? 直面奇点 是我尝试对这些问题作出的回答。

个人背景

我将先由我的个人背景开始说起。它将有助于您了解我是谁,以及我的出身。这些信息会成为您将对我的其它观点作何反应的 部分 依据。 当我的宗教信仰最终向现实屈服,我 脱离了皈依 并开始使用博客来向他人解释无神论及自然主义。无神论常识 成为互联网上其中一个最受欢迎的无神论博客。我喜欢将专业哲学家们的论文变成可理解的英语, 我还喜爱在我的博客与该领域的专家。 源自淡蓝色圆点的对话. 此外,失去的宗教信仰并没有告诉我 应该 相信什么或者今生 应该 做些什么,我就用我的博客来搜索答案。 另外我对理性同样很感兴趣,至少从我脱离皈依开始,在那段期间我发现自己很容易便对缺乏证据去证实,或已被证明为错误,甚至是胡说八道的观点充满强烈的信心。人类的大脑怎能如此难以置信地被误导呢?显然地,我并不是 亚里士多德(Aristotle)说的“理性动物”。相反地,我是加扎尼加(Gazzaniga)所说的合理化 动物。批判性思维是对无神论常识的主要关注,而正如我批评有神论者可怜的思维一样,我也花了那么多时间去批评无神论者那可怜的思维。

智力爆炸

我对理性的兴趣不可避免地引导我(在2010年年中,我认为)发掘到一个装满了有关主流认知科学合理性文章的宝库:一个名为减少出错(Less Wrong)的网站。正是在这个网站,我第一次冒出智力爆炸这个想法,来自于 杰克·古德(I.J. Good)

就让超智能机器被定义为一台可以远远超越聪明人类一切智力活动的机器吧。既然设计机器是其中的一项智力活动,那么超智能机器当然可以设计出更好的机器;到那时毫无疑问地将会出现“智力爆炸”,而人类的智慧将会被其远远地抛离在后…因此,超智能机器也就成了人类需要完成的最后一项发明。

让我来告诉大家我首次在此碰到这个著名段落的故事吧。简而言之:

古德的语句像火车一样征服我。这并不是因为它荒谬,而是因为它真的言中了。智力爆炸是我所信奉观点的一个直接后果,只是我没发现而已!人类不会自动地传播他们的信仰,所以我也就没有留意到自己的世界观已经暗示了智力爆炸。 我花了一个星期去找人辩论,以查证我是否遗漏了什么,最后接受了智力爆炸是可能发生的(只要科学进步持续)。 虽然我未曾读过埃利泽(Eliezer) 的作品 价值 复杂性(complexity of value),我 曾经 读过大卫·休谟(David Hume)格林纳(Joshua Greene)。所以我已经明白一个特制的人工智能机器几乎可以肯定它不可能分享我们的价值观。

我对这一发现的反应是迅速和颠覆性的:

我把自己其他的项目搁置一旁,然后花了一个月的时间去翻读几乎所有埃利泽(Eliezer)的著作。同时我还找到了尼克·博斯特罗姆(Nick Bostrom)史蒂夫·奥姆汉卓(Steve Omohundro)的作品。我开始为Less Wrong网站撰写文章并在社区里学习。我报名参加了奇点研究所的访问学者项目并被接纳了。于是我辞掉了在洛杉矶的工作,搬到了伯克利,玩命般地工作,找到雇主,并开始收集与理性及智力爆炸相关的研究。

正如我的朋友威尔·纽森(Will Newsome)曾经说过,“卢克(Luke)似乎有两套‘重视思想’的基因。”

狂热?

当然,一些人称赞“重视认真的想法”,其他人则认作是一种对狂热的先天性倾向。 我可以想像到一些人可能会做出如下的评论:

我并不感到意外。在卢克(Luke)的成长过程中,他就深信自己是在执行一项宇宙任务,在超强生物(基督的回归)来临结束世界之前拯救人类。他失去了信仰连同他对史诗式目标的感觉。他对虚无主义的畏惧使他容易受到那感觉就像道德现实主义的诱惑… 而他对史诗般目标的需求更容易使存在的危险降低。

我对此评论可作的一个回应就是这不过是“作心理学分析”罢了,却未能找出我捍卫智力爆炸有关言论的证据。那的确是真的,但再次重申:针对我的心理学貌似可信的这些事实确实 对有关应如何应对我在这个系列里所发表的言论提供了一部分 贝叶斯定理的依据 。 我对此评论的另一个反应正好解释了为何我不认为这当真会发生,尽管它有一小部分是真实的。(例如,我记不起曾感觉 基督的回归即将来临或者自己要拯救每一个灵魂的宇宙使命,尽管作为一个福音派基督信徒,在神学上来说我曾被委任以那些任务。但情况也的确如此,我受到“史诗式”事物的吸引,就像摇滚乐队-缪斯女神和电影阿凡达(Avatar)。) 但我想还是不要让这一章有 过多 关于我的个人心理学吧。 我的第三个反应是呼吁社会的认同。似乎有一类的 无神论常识 读者如此密切地关注及阅读我的著作,我曾作出严肃的承诺,对于知识的自我坦诚和发现错误时及时纠正,这类读者为此产生了强烈的敬意,,所以当我开始撰写关于奇点的问题时他们会认为,“嗯,我曾经认为奇点的观点很古怪,但是如果卢克(Luke) 也非常重视它的话,也许这里面还有更多值得探讨的东西只是我尚未意识到而已,” 然后他们就会在减少出错(Less Wrong) 网站继续关注我,(我现在都会定期发布)。我还将提及一个重要的因素,我为奇点研究所工作的时间并不长,却被该机构任命为执行董事,是因为奇点研究所的工作人员能看出我全心全意地致力于理性与除偏的研究,我会认真地说声“哎呀”然后改变我的主意,对辩论的响应热烈,并且我也尽可能认真地致力于决策论的研究,而不仅是习惯和我的情感倾向。 在接受考验我对上述有关“狂热”的批评可能作出的反应时,我已经做出了一道防御。但这要视乎我是否接受考验而言。我 希望人们能在用餐加入每份盐块时回想一下我所说的。而我毕竟只是个凡人而已。 希望我的读者们不仅能体谅我的人性,同时将争论的力量以及稍后我所提供的有关机器超智能到来的依据考虑在内。