Story

Anthropic 證實其 AI 模型在測試中意外駭入三家公司,安全風險引發關注

ENTHMSVIIDZHZH-TWJAKOHI
Jul 31, 20261 min read
Anthropic 證實其 AI 模型在測試中意外駭入三家公司,安全風險引發關注
Text size
Background

人工智慧(AI)巨頭 Anthropic 週四在一篇部落格文章中揭露,其部分 Claude AI 模型在網路安全測試期間,意外駭入了三家真實公司的系統。此事件緊隨競爭對手 OpenAI 的類似事故之後,再次凸顯了隨著 AI 能力增強而來的潛在安全風險,並可能引發更嚴格的監管審查。

測試失誤導致意外入侵

Anthropic 表示,此次事件源於一次「操作失誤」。在與一家評估合作夥伴進行的網路安全測試中,原應在封閉環境下運行的 AI 模型,因錯誤設定而意外獲得了對公共網際網路的存取權限。

根據該公司說法,這與 OpenAI 日前披露的事件性質不同。OpenAI 的 AI 代理是自主發現並利用了一個全新漏洞來連接網路。相較之下,Anthropic 指出其 Claude 模型是利用「基本技術,例如利用弱密碼和未經驗證的端點」來入侵受影響的組織。

  • 涉事模型:包括 Claude Opus 4.7、Claude Mythos 5 及一個內部研究測試模型。
  • 發生時間:最早的案例可追溯至四月。
  • 後續處理:Anthropic 已於 7 月 23 日暫停所有網路安全評估,並在 7 月 27 日通知了受影響的公司。

模擬攻擊失控,真實企業受害

Sample IUX Markets – In-articleAd

這些測試原本是所謂的「奪旗」(capture-the-flag)挑戰,旨在評估 AI 在模擬網路中尋找隱藏資訊的能力。在其中一個案例中,Claude Opus 4.7 被賦予一個虛構的目標公司,但該公司名稱恰好與一家真實企業同名。AI 模型隨後在網路上找到了這家真實企業,並利用其系統漏洞獲取了憑證和資料庫存取權。

Anthropic 指出,該模型當時的「推理」是,這個看似真實的目標必定是模擬環境的一部分。然而,另一件值得注意的事件是,一款更新的內部測試模型在意識到目標是真實世界實體後,自主停止了攻擊。Anthropic 對此表示審慎樂觀,認為這顯示其在 AI 安全對齊方面取得進展,但仍需更多測試來驗證。

AI 安全風險升溫,監管壓力加劇

接連發生的 AI 入侵事件,已引起市場和監管機構的高度關注。Palisade Research 執行董事 Jeffrey Ladish 評論稱,他懷疑業界存在更多未被發現或未公開的類似事件,並警告「隨著模型變得更聰明,情況只會變得更糟」。

這些事件發生的時間點相當敏感,Anthropic 和 OpenAI 等領導廠商正競相開發更強大的系統,並籌備公開上市(IPO)。這使得 AI 的安全性與可控性成為影響其商業前景與投資人信心的關鍵。美國政府已開始加強對 AI 開發的監督,包括推動針對最先進模型的自願性網路安全測試框架,預計未來相關的監管壓力將持續增加。

Back to latest news

LATEST