有效利他主义是OpenAI的唐僧袈裟


有效利他主义EA为创新冒险活动披上了一层道德高尚的袈裟,这层袈裟在OpenAI事件中成为导火索,也掩盖了加密货币诈骗犯的提前警示。

第一个暴雷的是加密货币诈骗犯山姆-班克曼-弗里德(Sam Bankman-Fried),他曾是 有效利他主义EA 的领军人物之一,EA 是 2010 年代在硅谷和牛津大学的精英走廊里出现的一种意识形态,为慈善捐赠提供了另一种充满功利主义色彩的方法。

随后,EA 在 OpenAI 的崩溃中扮演了一个角色,其非营利性董事会(其唯一任务是确保公司的人工智能模型对全人类 "广泛有益")于上周五突然解雇了首席执行官萨姆-阿尔特曼(Sam Altman),造成了目前威胁到其整个存在的僵局。

在 OpenAI 董事会的六个席位中,有三个是与有效利他主义有深厚渊源的人:智库研究员海伦-托纳(Helen Toner)、Quora 首席执行官亚当-德安杰洛(Adam D'Angelo)和兰德公司(RAND)科学家塔莎-麦考利(Tasha McCauley)。第四位成员是 OpenAI 联合创始人兼首席科学家伊利亚-苏茨克沃(Ilya Sutskever),他对人工智能的看法也普遍同情 EA。

到目前为止,微软和亿万富翁连续创业者奥特曼似乎成功地战胜了董事会中高效的利他主义者。OpenAI 的几乎所有员工都威胁说,如果董事们不辞职,他们就会辞职,并表示他们将加入微软的新团队,加入前任老板的行列。

十多年前,有效利他主义兴起,提出了一种帮助世界的新思路。该组织的领导者敦促追随者考虑 "预期价值 "等发明的变量,而不是向人们个人认为有吸引力的事业捐款,他们说,"预期价值 "可以用来客观地确定他们的影响最大的地方。

EA最初主要关注动物福利和全球贫困等问题,但随着时间的推移,对人工智能引发的世界末日的担忧成为了他们关注的焦点。

在亿万富翁、Facebook 联合创始人达斯汀-莫斯科维茨(Dustin Moskovitz)等财大气粗的捐赠者的资助下,他们建立了自己研究人工智能安全的孤立世界,包括非营利组织和研究机构、预测中心、会议和网络论坛。

智库研究员海伦-托纳和兰德的麦考利都是莫斯科维茨支持的 EA 团体的领导人:

  • 麦考利是有效风险投资公司(Effective Ventures)董事会成员,该公司是EA运动最重要的机构之一。今年早些时候,牛津大学哲学教授威廉-麦卡斯基尔(William MacAskill)--也许是史上最著名的 EA--将她列为一小群 "高级人物 "之一。
  • 海伦-托纳是安全与新兴技术中心(CSET)的战略总监,该中心是乔治城大学的一个智囊团,由莫斯科维茨的资助机构开放慈善组织(Open Philanthropy)资助。

在加入 CSET 之前,海伦-托纳曾在开放慈善组织(Open Philanthropy)和其他几家与 EA 有关的组织工作,她和麦考利还是另一家名为人工智能治理中心(Centre for the Governance of AI)的组织的董事会成员。与此同时,达安吉洛在上世纪八十年代初曾与莫斯科维茨在 Facebook 共事,现在是其软件公司 Asana 的董事会成员。他多次表达了与 EA 类似的对人工智能的担忧。

尽管有这些联系,OpenAI 还是在 9 月份告诉记者,"我们的董事会成员没有一个是有效的利他主义者"。它认为,他们与 EA 运动的互动主要 "集中在与人工智能安全相关的话题上"。

EA 奇怪
OpenAI 事件暴露出的问题之一,就是 EA 奇怪地脱离了实际的专业知识。正如本周令人痛心地发现的那样,其追随者似乎在留言板上比在会议室里更有效率。

整个 "人工智能安全 "领域都与有效利他主义交织在一起,其中一些概念借鉴了理性主义亚文化等相关领域。从一开始,它就脱离了更广泛、更早存在的公民社会团体的世界,这些团体思考的是自动化系统可能带来的危害,而这些危害往往集中在性别和种族偏见、侵犯隐私以及其他当今的弊端上。

许多人工智能安全拥护者关注人工智能引发生物恐怖主义的可能性,OpenAI 也在转述这种担忧。但他们很少考虑到关于过去如何处理生物安全威胁的大量现有专业知识。

一份早期报告显示,OpenAI 董事会在赶走奥特曼之前,显然也不认为需要律师或通信专业人士的建议,而这一决定现在却适得其反,令人大跌眼镜。在去年被捕之前,班克曼-弗里德身边还围绕着一群有效的利他主义者,他屡次未能遵守关于评估波动性投资风险的普遍既定规范。

在很长一段时间里,人工智能安全和有效利他主义的内向性有利于 OpenAI 及其投资者。这种意识形态让这家初创公司自己的研究人员能够帮助形成关于哪些风险最重要的讨论,而无需担心来自泡沫之外的不同意见。而对安全问题的口惠而实不至,也为这家快速发展的科技初创公司提供了一层公关掩护。

EA为创新冒险活动披上了一层道德高尚的袈裟,这层袈裟在OpenAI事件中成为导火索,也掩盖了加密货币诈骗犯的提前警示。