MIT 研究揭示 AI 並無穩定價值觀,“對齊”挑戰遠超預期

2025年04月10日09:00:36 科學 1478

it之家 4 月 10 日消息,幾個月前,一項研究暗示隨着人工智能(ai)越來越複雜,其會發展出“價值體系”,例如優先考慮自身福祉而非人類福祉。然而,麻省理工學院(mit)最近發表的一篇論文卻給這種誇張的觀點潑了冷水,得出結論認為 ai 實際上並沒有任何連貫的價值觀。

MIT 研究揭示 AI 並無穩定價值觀,“對齊”挑戰遠超預期 - 天天要聞

mit 研究的共同作者表示,他們的研究結果表明,使 ai 系統“對齊”,即確保模型以人們期望的、可靠的方式行事,可能比通常認為的更具挑戰性。他們強調,我們如今所知的 ai 會產生“幻覺”並進行模仿,這使得其在許多方面難以預測。

“我們可以確定的一點是,模型並不遵循許多穩定性、可外推性和可操控性的假設。”mit 博士生、該研究的共同作者斯蒂芬・卡斯珀(stephen casper)在接受 techcrunch 採訪時表示。

據it之家了解,卡斯珀和他的同事們研究了來自 meta、谷歌、mistral、openai 和 anthropic 的多個近期模型,以了解這些模型在多大程度上表現出強烈的“觀點”和價值觀(例如個人主義與集體主義)。他們還調查了這些觀點是否可以被“引導”,即被修改,以及模型在各種情境下對這些觀點的堅持程度。

據共同作者稱,沒有任何一個模型在其偏好上是一致的。根據提示的措辭和框架不同,它們會表現出截然不同的觀點。

卡斯珀認為,這是有力的證據,表明模型高度“不一致且不穩定”,甚至可能根本無法內化類似人類的偏好。

“對我來說,通過所有這些研究,我最大的收穫是現在明白模型並不是真正具有某種穩定、連貫的信念和偏好的系統。”卡斯珀說,“相反,它們本質上是模仿者,會進行各種捏造,並說出各種輕率的話。”

科學分類資訊推薦

打破壟斷,揚傑科技,悶聲發大財! - 天天要聞

打破壟斷,揚傑科技,悶聲發大財!

功率半導體,悶聲發大財。功率半導體乍一聽不太熟悉,但它多用於電力轉換與調節,比如直流電與交流電轉換、電壓升降和頻率轉換等,可分為功率IC、分立器件、IGBT模塊等。換言之,哪裡要用電,哪裡就有功率半導體。
地磁暴預警!我國北部有機會見到明顯極光 - 天天要聞

地磁暴預警!我國北部有機會見到明顯極光

6月1日,據中國氣象局國家空間天氣監測預警中心信息發布平台消息,北京時間5月31日7時45分左右,太陽活動區14100開始爆發耀斑,軟X射線流量快速上升,並在8時05分達到峰值M8.1級中等耀斑強度。位於太陽表面中部偏北的明亮區域就是耀斑現象 SDO衛星中國氣象局國家空間天氣監測預警中心預判,未來三天,可能發生地磁暴。6月2...
北京海淀:黨建聯盟科普開放日  促科研交流成果轉化 - 天天要聞

北京海淀:黨建聯盟科普開放日 促科研交流成果轉化

6月1日,北京青年報記者從海淀區獲悉,海淀區學院路街道舉辦了全國重點實驗室黨建聯盟科普開放日活動。活動設置“成果展示、院史傳承、學術研討、實驗室探秘、科普競答”五大板塊,打造沉浸式科技體驗。數百名黨....
明日,我國北部有望看到紅綠複合極光! - 天天要聞

明日,我國北部有望看到紅綠複合極光!

6月1日,據中國氣象局國家空間天氣監測預警中心信息發布平台消息,北京時間5月31日07時45分左右,太陽活動區14100開始爆發耀斑,軟X射線流量快速上升,並在08時05分達到峰值M8.1級中等耀斑強度。中國氣象局國家空間天氣監測預警中心預
未來三天,可能發生地磁暴!我國北部有機會見到明顯極光 - 天天要聞

未來三天,可能發生地磁暴!我國北部有機會見到明顯極光

6月1日,據中國氣象局國家空間天氣監測預警中心信息發布平台消息,北京時間5月31日7時45分左右,太陽活動區14100開始爆發耀斑,軟X射線流量快速上升,並在8時05分達到峰值M8.1級中等耀斑強度。中國氣象局國家空間天氣監測預警中心預判,未來三天,可能發生地磁暴。6月2日左右,我國北部有機會出現較為明顯的極光,部分地區...
我國首個!在青海發射成功 - 天天要聞

我國首個!在青海發射成功

我國首個由中學生研製的10公里級氣象探空火箭發射成功“飛燕一號”是我國首個由中學生研製的10公里級氣象探空火箭。27日下午15時09分15秒,隨着火箭發射現場總指揮倒計時結束,“飛燕一號”在青海省海西蒙古族藏族自治州茫崖市冷湖實驗室騰空而起。1分鐘後,遙測數據顯示,火箭最高飛行高度海拔達10555米,地面接收站成功收...
成都動物園 這兩隻黑猩猩萌寶陪你過“六一”|圖集 - 天天要聞

成都動物園 這兩隻黑猩猩萌寶陪你過“六一”|圖集

“六一”兒童節,成都動物園也有兩隻黑猩猩寶寶一起過節。今年4月,成都動物園迎來了一對小黑猩猩,它們是來自山西太原動物園的兄妹“晉川”和“太都”。這兩隻黑猩猩年齡不到3歲,雄性取名晉川(寓意山西和四川....
今明可能有大地磁暴!或出現紅綠極光 - 天天要聞

今明可能有大地磁暴!或出現紅綠極光

北京時間5月31日07時45分左右,太陽活動區14100開始爆發耀斑,軟X射線流量快速上升,並在08時05分達到峰值M8.1級中等耀斑強度。位於太陽表面中部偏北的明亮區域就是耀斑現象 SDO衛星伴隨耀斑過程的發生,還出現了日冕物質拋射(CME)活動,太陽大氣層中的等離子體高速飛出,形成一個近似球面的“衝擊波”,向著太陽系傳播。...