“AI有一定概率导致大量人类死亡”

2023年05月06日21:18:15 科学 9682

“AI有一定概率导致大量人类死亡” - 天天要闻

chatgpt和其他人工智能模型是否会威胁人类?图片来源:cfoto/future publishing via getty images

近几个月,新人工智能模型的快速兴起,例如openai的chatgpt等,让一些技术专家和研究人员开始思考,人工智能的能力是否会很快超过人类。openai的前关键研究人员表示,这种未来极有可能发生,但他也警告说,达到人类水平或者超人类水平的人工智能控制甚至消灭人类的几率并非为零。

openai的前安全团队语言模型对齐主管保罗·克里斯蒂亚诺在4月下旬接受了科技播客bankless的采访。他表示,最担心的情况是“成熟的人工智能掌控人类”。他在采访中警告道,高级人工智能有相当大的机会,在不远的将来引发可能会导致世界毁灭的大灾难。

克里斯蒂亚诺说:“总体而言,在人工智能系统达到人类的水平之后,我们有超过50%的概率很快遭遇末日。我认为人工智能有10%至20%的概率,造成许多甚至大多数人类死亡,并接管人类。”

克里斯蒂亚诺于2021年从openai离职。他在由人工智能研究人员埃利泽·尤德考斯基创建的社区博客网站lesswrong的《ask me anything》栏目里解释了自己离职的原因。尤德考斯基多年来一直警告超人类人工智能可能毁灭人类。克里斯蒂亚诺当时写道,他希望“研究人工智能对齐方面的更多概念性/理论性问题”,人工智能对齐是一个人工智能安全研究子领域,旨在保证人工智能系统符合人类的利益和道德准则。他表示,在这方面的研究中,openai“并非是做得最好的”。

克里斯蒂亚诺目前经营一家非营利组织alignment research center,致力于研究理论上的人工智能对齐策略。最近几个月,随着各大公司竞相推出日益复杂的人工智能模型,这个领域的研究引起了极大关注。今年3月,openai发布gpt-4,对驱动chatgpt的人工智能模型进行了更新。chatgpt在2022年11月才公开发布。与此同时,谷歌(google)、微软(microsoft)等科技巨头展开了人工智能军备竞赛,纷纷发布了支持商业应用的人工智能模型,希望在这个新兴市场里占据一席之地。

但目前公开发布的人工智能系统依旧存在大量错误和虚假信息,因此克里斯蒂亚诺和许多专家都警告不要操之过急。openai的联合创始人埃隆·马斯克在2018年与该公司分道扬镳。今年3月,包括马斯克在内的1,100名技术专家发表公开信,呼吁比gpt-4更强大的高级人工智能模型的开发工作应该暂停六个月,并将研究重点重新转向提高现有系统的可靠性。(之后,马斯克宣布将推出truthgpt,与chatgpt竞争,他表示truthgpt将致力于“寻求真相”,而不是获取利润。)

公开信中担心的问题之一是,现有人工智能模型可能为超级智能模型铺平道路,而这种模型可能威胁人类文明。虽然chatgpt等现有生成式人工智能系统有能力完成特定任务,但它们距离达到人类的智力水平仍然有很大差距。这种未来可能出现的人工智能被称为通用人工智能(agi)。

专家们对通用人工智能发展的时间线存在分歧,有专家认为通用人工智能的发展可能需要数十年时间,但也有专家表示通用人工智能永远不会诞生,然而,人工智能的飞速发展开始改变人们的立场。斯坦福大学(stanford university)在今年4月发布的一份研究报告显示,约57%的人工智能和计算机科学研究人员称,人工智能正在快速朝着通用人工智能的方向发展,有36%的受访者表示将重要决策交给高级人工智能来完成,可能给人类带来“核爆炸级别的大灾难”。

有专家警告道,即便更强大的人工智能在开发时是中立的,一旦被心怀不轨的人利用,它可能立刻变得非常危险。谷歌的前研究人员、被称为“人工智能教父”的杰弗里·辛顿在本周对《纽约时报》(new york times)表示:“我们很难找到阻止不法分子利用人工智能作恶的办法。我认为,在确定能否控制人工智能之前,不应该继续扩大其规模。”

克里斯蒂亚诺在接受采访时表示,如果人工智能发展到人类社会缺少了它就无法正常运转的程度,那时人类文明就将面临威胁,如果有强大的人工智能决定不需要再为创作者的利益服务,人类就将变得极其脆弱。

他说:“人类灭亡最有可能的方式并非人工智能突然杀死所有人,而是我们大量部署人工智能,让它变得无处不在。如果出于某种原因,这些人工智能系统试图杀死人类,它们就一定能够做到,但愿这种情况不会发生。”

不过,也有人反驳了对人工智能的这种解读。有专家认为,虽然被设计用于完成特定任务的人工智能必然会出现,但由于计算机在解读生活经历方面的局限性,开发可以与人类匹敌的通用人工智能,在技术上不具有可行性。

对于最近对人工智能的可怕警告,创业者和计算机科学家佩里·梅茨格在今年4月发推文称,虽然“高度超越人类的”人工智能可能会出现,但通用人工智能发展到能够反抗创作者的程度可能需要数年甚至几十年时间,而它的创作者将有时间调整人工智能朝着正确的方向发展。对于梅茨格的推文,纽约大学(new york university)的计算机科学家杨立昆(yann lecun)写道,通用人工智能在一夜之间具备危险的、不受控制的能力,这种宿命论的情景“根本不可能发生”。杨立昆自2013年开始主持meta的人工智能研究。(财富中文网)

翻译:刘进龙

审校:汪皓

科学分类资讯推荐

首张嗅觉图谱问世 或重塑嗅觉形成认知 - 天天要闻

首张嗅觉图谱问世 或重塑嗅觉形成认知

研究人员以前所未有的细节绘制了小鼠鼻腔中的嗅觉受体分布图谱。这一成果颠覆了人们对鼻子如何产生嗅觉的认知。△小鼠鼻腔的显微镜横截面图像,显示了鼻腔上皮的解剖结构。图片来源:Datta Lab4月28日发表于《细胞》的一项研究,揭示了感觉神经元上表达的约1100个嗅觉受体是如何在鼻腔内壁上皮组织中受到严格调控的空间位置...
心脏为什么不会得癌症? - 天天要闻

心脏为什么不会得癌症?

心脏为什么不会得癌症?心肌细胞会进行有节律的搏动,并在个体出生后停止增殖,因此,心脏没有再生能力。近日,意大利的里雅斯特大学医学院Serena Zacchigna团队完成的体内癌症模型和离体工程心脏组织实验表明,心肌细胞搏动所产生的机械力负
暴雨、冰雹要来,广东天气明起大反转!珠海接下来…… - 天天要闻

暴雨、冰雹要来,广东天气明起大反转!珠海接下来……

【来源:珠海发布】“五一”假期前两天, 珠海天气晴好,大家都去哪里玩了?不过天气马上要反转再反转了! 广东明天好天气要暂时“下线”,局部有大暴雨、小冰雹;珠海明天午后也将有雷雨+10级大风…… 这场雨会持续多久?假期接下来的天气会怎样?赶紧
河北衡水:假日邂逅飞行 低空魅力引游人 - 天天要闻

河北衡水:假日邂逅飞行 低空魅力引游人

5月2日,位于河北省衡水市的中国航协衡水航空飞行营地,各类飞行表演和低空飞行器展示吸引市民游客观赏。中国桃城第四届“翱翔中国”全国低空无人飞行器大赛暨第二届京津冀低空飞行器集采会于5月1日至2日在此举行。图为游客近距离参观飞行器。
可拍原子运动过程 揭秘地下30米的“国之重器” - 天天要闻

可拍原子运动过程 揭秘地下30米的“国之重器”

来源:央视新闻客户端坐落在上海张江的硬X射线自由电子激光装置是“十三五”国家重大科技基础设施建设规划优先启动项目,也是上海(长三角)国际科技创新中心核心空间载体——张江科学城重大科技基础设施集群的旗舰装置,是我国实现2035年建成科技强国战