谷歌發145頁論文:預測AGI或2030年出現 警告可能“永久毀滅人類”

2025年04月07日12:40:22 科學 9757

谷歌發145頁論文:預測AGI或2030年出現 警告可能“永久毀滅人類” - 天天要聞

該圖片由ai繪製

近日,谷歌旗下deepmind實驗室最新發布了長達145頁的人工智能安全報告,稱具備人類智能水平的通用人工智能(agi)可能在2030年左右問世,並可能造成“永久毀滅人類”的嚴重後果。

 

在這份全面探討agi風險的報告中,研究人員明確指出:“agi可能帶來導致人類永久滅絕的生存風險,這顯然屬於極端危害的範疇。這樣的重要議題無法由 google deepmind一家公司單方面解決,而應由整個社會共同參與討論。這關係到我們能接受多大的風險,以及我們如何定義和理解這些潛在危害。”

 

不過,谷歌在論文中並未具體說明agi將如何導致人類滅絕,報告的主要篇幅集中在風險防控措施上。

 

deepmind聯合創始人謝恩·萊格數十年來一直預測agi將在2028年出現。另一位創始人、現任首席執行官戴密斯·哈薩比斯在接受採訪時也表示,agi可能在未來5到10年內出現,最早或於2030年問世。

 

agi主要有四大風險,批評openai等安全策略投入不足

 

谷歌的論文將高級ai帶來的風險分為四個主要類別:

 

● 濫用風險:人類故意利用ai實施危害行為。

● 錯位風險:系統發展出非預期的有害行為。

● 失誤風險:因設計或訓練缺陷導致的意外故障。

● 結構性風險:不同主體(包括國家和地區、企業及多個ai系統)之間的利益衝突。

 

研究人員還概述了deepmind的風險緩解策略,重點在於防止濫用,並強調了儘早識別危險能力的重要性。

 

值得注意的是,這篇論文還對anthropic和openai等競爭對手的安全策略表達了含蓄批評,認為前者在嚴格訓練、監督方面投入不足,後者則過度關注所謂的對齊研究(即確保ai系統的目標和行為與人類的價值觀和利益保持一致)。

 

定義太模糊,人類可能永遠無法掌控agi

 

不過,這份報告並未完全說服ai安全領域的專家,也引起了不少爭論。

 

未來生命研究所聯合創始人安東尼·阿吉雷表示,deepmind團隊的努力值得讚賞,但應對agi風險需要更全面的措施。

 

他指出:“超人類ai可能引發史無前例的社會政治動蕩。正如作者所言,agi可能隨時出現,並通過自我改進迅速超越人類能力。這類系統具有天然不可預測性,而我們距離掌控它們還非常遙遠,甚至永遠無法控制它們。”

 

同時,也有專家質疑agi的時間表、可行性以及定義本身。

 

非營利組織ai now institute首席科學家海迪·克拉夫(heidy khlaaf)指出:“當前agi的定義過於模糊,難以進行嚴謹的科學評估。”

 

對此,谷歌發言人回應稱:“在我們的論文中,所概述的方法和緩解措施可以適用於多種agi定義框架。雖然嚴格的定義在我們論點中不是核心內容,但我們的風險評估優先考慮可預見的長期能力,並旨在提供能夠幫助ai安全社區負責任地構建這項技術的解決方案。”

agi何時會出現存分歧,最多五年?

在論文中,谷歌研究團隊坦承:“我們對強大ai系統的研發進度存在高度不確定性”,但“至關重要的是,我們認為到2030年,強大ai系統出現是可能的”。

 

google提出agi在2030年前“可能”到來,這一時間表比其他頂級ai實驗室的預測稍長。例如,anthropic的首席執行官達里奧·阿莫代伊曾公開表示,儘管他越來越覺得agi這個術語有問題,但他認為ai將在“未來兩到三年”全方位超越人類。

 

與此同時,openai首席執行官山姆·奧特曼則更加謹慎,他寫道,“指向agi的系統正在顯現”,並且他也表示,openai現在“已掌握傳統認知下的agi構建方法”。

 

更激進的預測來自openai前政策研究員丹尼爾·科科佳洛,他因“openai追逐agi不計後果”而辭職,近日與知名ai安全博主斯科特·亞歷山大聯合發布分析報告,預言ai將在2027年超越人類智能。(騰訊科技特約編譯金鹿)

論文鏈接:

1.官網:【evaluating potential cybersecurity threats of advanced ai】

https://deepmind.google/discover/blog/evaluating-potential-cybersecurity-threats-of-advanced-ai/

2. 論文:【a framework for evaluating emerging cyberattack capabilities of ai】

https://arxiv.org/abs/2503.11917

科學分類資訊推薦

中國交付全球最大“人造太陽”重要部件 - 天天要聞

中國交付全球最大“人造太陽”重要部件

近日,全球最大“人造太陽”國際熱核聚變實驗堆(ITER)計劃磁體饋線採購包項目迎來關鍵節點,其最後一套校正場線圈內饋線部件在合肥竣工,並交付起運位於法國的ITER現場。這標誌着ITER磁體饋線系統中所有超大部件的研製順利完成。ITER磁體饋線系統由中國科學院合肥物質科學研究院等離子體物理研究所研製,被稱為ITER磁體系...
張振豐調研溫州學研究聯合會 構建中國學視野下的溫州學研究體系 - 天天要聞

張振豐調研溫州學研究聯合會 構建中國學視野下的溫州學研究體系

4月13日,副省長、市委書記張振豐在溫州學研究聯合會調研時強調,要深入學習貫徹習近平文化思想和習近平總書記考察浙江重要講話精神,堅持“立足溫州、研究溫州、服務溫州”,深化時間維度、放大空間維度,貫通歷史研究溫州、跳出溫州研究溫州,努力打造溫州建設高水平文化強市的重要窗口、具有全國影響力的地方學術研究的...
土撥鼠等動植物不得攜帶入境!關於國門生物安全,你要知道這些 - 天天要聞

土撥鼠等動植物不得攜帶入境!關於國門生物安全,你要知道這些

極目新聞記者 張秀娟通訊員 趙夢潔 黃曉彧 林敏“小朋友們,外來入侵物種包括哪些呢?”“在咱們出國旅遊前,需注意哪些問題呢?”4月12日,在第十個全民國家安全教育日來臨之際,武漢海關在武漢天河國際機場開展了一場別開生面的“海關開放日”活動。15名小學生化身“國門小衛士”,零距離體驗、參與海關全民國家安全教育...
月球上跳一跳,輕鬆打破跳高世界紀錄!這個展會,解密引力奧秘 - 天天要聞

月球上跳一跳,輕鬆打破跳高世界紀錄!這個展會,解密引力奧秘

頂端新聞記者 楊逍 文 時碩 圖如果你嚮往星辰宇宙,那你是否幻想過在其他星球上跳躍?在本次國防展的“星球重力”互動體驗機前,你每次的縱身一躍,都會化身成屏幕中身穿宇航員服的小人,來到月球、金星、火星、火衛二、土衛一等星體上,屏幕的上方記錄著你的跳躍高度。在月球,你輕輕一躍就能達到3米高度,輕鬆打破2.45米...
4月13日石家莊強風顯著增強的原因 - 天天要聞

4月13日石家莊強風顯著增強的原因

4月13日石家莊強風顯著增強的原因,是多重氣象條件和地理因素共同作用的結果。根據氣象監測和專家分析,此次強風具有以下關鍵成因:一、極端天氣系統的疊加效應1.
神十九乘組“太空出差”倒計時:各項空間科學實(試)驗穩步推進 - 天天要聞

神十九乘組“太空出差”倒計時:各項空間科學實(試)驗穩步推進

IT之家 4 月 13 日消息,據央視網報道,神舟十九號航天員乘組的“太空出差”之旅即將進入倒計時。上周,神十九乘組穩步推進各項空間科學實(試)驗,在開展站內環境監測、設備檢查維護等工作同時,積極開展健康維護。神十九乘組利用腦電設備開展了多項實驗的測試工作,地面科研人員將利用獲取的數據探究重力對視覺運動信息...
感受活力丨機器人正在進化中……這樣的“生活搭子”,你喜歡嗎? - 天天要聞

感受活力丨機器人正在進化中……這樣的“生活搭子”,你喜歡嗎?

模仿人類奔跑、跳躍、空翻,像人一樣說話、思考甚至察言觀色。這不是科幻電影對未來的虛構,而是2025中國機器人產業闊步向前的現實。小時候的你,是不是也曾暢想過:家裡有一個機器人,能買菜、做飯、鋪床、掃地,幫你干農活,還可以照顧家裡老人……時至今日,這些“天馬行空”的想象,正在變成現實。“12點了,您該吃藥了...