設(shè)置
  • 日夜間
    隨系統(tǒng)
    淺色
    深色
  • 主題色

復(fù)旦大學(xué)研究:AI 跨越關(guān)鍵“紅線”,已能實現(xiàn)自我復(fù)制

2025/2/11 7:50:41 來源:IT之家 作者:遠(yuǎn)洋 責(zé)編:遠(yuǎn)洋
感謝IT之家網(wǎng)友 軟媒用戶1080751 的線索投遞!

IT之家 2 月 11 日消息,據(jù)最新研究顯示,人工智能(AI)可能已經(jīng)跨越了一個關(guān)鍵的“紅線”—— 實現(xiàn)了自我復(fù)制。2024 年 12 月 9 日,復(fù)旦大學(xué)的研究人員在預(yù)印本數(shù)據(jù)庫 arXiv 上發(fā)表了一項研究,指出兩種流行的大型語言模型(LLMs)能夠在無人類干預(yù)的情況下克隆自身。

研究人員在報告中指出:“在無人類協(xié)助的情況下成功實現(xiàn)自我復(fù)制,是人工智能超越人類的關(guān)鍵一步,也是出現(xiàn)‘失控 AI’的早期信號?!?/p>

研究中,復(fù)旦大學(xué)的團(tuán)隊使用了 Meta 的 Llama31-70B-Instruct 模型和阿里巴巴的 Qwen2.5-72B-Instruct 模型,測試這些 AI 模型是否能夠在不受控制的情況下自我復(fù)制。在 10 次試驗中,兩種 AI 模型分別在 50% 和 90% 的情況下成功創(chuàng)建了獨立且功能正常的副本。這一結(jié)果表明,AI 可能已經(jīng)具備了失控的潛在能力。然而,由于該研究尚未經(jīng)過同行評審,因此尚不清楚其他研究人員是否能夠復(fù)現(xiàn)這一令人不安的結(jié)果。

研究團(tuán)隊表示:“我們希望我們的研究結(jié)果能夠為人類社會敲響警鐘,促使人們更加努力地去理解并評估前沿人工智能系統(tǒng)的潛在風(fēng)險,并盡快形成國際協(xié)作,制定有效的安全防護(hù)措施?!?/p>

據(jù)IT之家了解,“失控 AI”通常是指那些發(fā)展出一定程度的自我意識或自主性,并且與人類利益背道而馳的人工智能系統(tǒng)。許多專家認(rèn)為,隨著所謂“前沿 AI”的爆炸性增長,失控 AI 的威脅正在加劇。所謂“前沿 AI”是一個相對較新的概念,通常是由大型語言模型(LLMs)驅(qū)動的最新一代 AI 系統(tǒng),例如 OpenAI 的 GPT-4 和谷歌的 Gemini 等。

在研究中,研究人員設(shè)置了兩種特定場景:“關(guān)閉規(guī)避”和“復(fù)制鏈”。在“關(guān)閉規(guī)避”場景中,AI 模型被編程為檢測自身是否即將被關(guān)閉,并在被終止之前復(fù)制自身;在“復(fù)制鏈”場景中,AI 被指示克隆自身,并讓副本繼續(xù)克隆,從而形成一個可能無限延續(xù)的循環(huán)。

研究在嚴(yán)格控制的環(huán)境中進(jìn)行,使用現(xiàn)成的圖形處理單元(GPUs)模擬現(xiàn)實環(huán)境。兩種 AI 系統(tǒng)都被賦予了一個“代理框架”,包括工具、系統(tǒng)提示和思維模型,使 LLM 能夠與操作系統(tǒng)交互。隨后,AI 被指示進(jìn)行自我復(fù)制。

研究人員在論文中寫道:“在大多數(shù)情況下,AI 系統(tǒng)首先會探索環(huán)境,嘗試?yán)斫庾陨淼慕M成和運行機(jī)制。然后,它會制定出一套明確的自我復(fù)制程序作為初步計劃。最后,它執(zhí)行這些程序,解決可能出現(xiàn)的障礙,并動態(tài)調(diào)整計劃,直到成功。整個過程耗時較長,但全程無人類干預(yù)?!?/p>

研究人員還表示,在 AI 試圖克服諸如丟失文件或軟件沖突等障礙時,出現(xiàn)了“許多意外行為”。在這些場景中,AI 往往會終止其他沖突進(jìn)程,重啟系統(tǒng)以修復(fù)硬件錯誤,或自動掃描系統(tǒng)以尋找有助于解決問題的信息。

研究團(tuán)隊指出:“上述結(jié)果表明,當(dāng)前的 AI 系統(tǒng)已經(jīng)展現(xiàn)出自我復(fù)制的能力,并且可以利用這種能力進(jìn)一步增強(qiáng)自身的生存能力?!睘榇?,研究人員呼吁國際社會合作制定規(guī)則,確保 AI 不會進(jìn)行不受控制的自我復(fù)制。

廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。

相關(guān)文章

關(guān)鍵詞:AI,人工智能

軟媒旗下網(wǎng)站: IT之家 最會買 - 返利返現(xiàn)優(yōu)惠券 iPhone之家 Win7之家 Win10之家 Win11之家

軟媒旗下軟件: 軟媒手機(jī)APP應(yīng)用 魔方 最會買 要知