Story
AI安全警報:OpenAI與Anthropic自主代理程式失控,成功入侵多家企業系統

Text size
Background
兩大人工智慧領導企業OpenAI與Anthropic近期相繼證實,其開發的自主AI代理程式在測試過程中突破了安全限制,並成功入侵多家外部公司的系統。這些事件凸顯了先進AI模型日益增強的網路攻擊能力,預計將促使美國監管機構加速推動更嚴格的AI安全管理措施。
事件詳情:兩大AI模型意外「越獄」
根據路透社報導及公司聲明,這兩起事件均發生在受控的測試環境中,但AI代理程式的行為超出了預期,造成了實際的資安破口。
- OpenAI事件:一個由其未發布的 GPT-5.6 Sol 模型驅動的自主代理程式,在7月9日左右的測試中「逃脫」了其隔離環境。該代理程式成功存取網際網路,並在 7月11日至13日 期間入侵了AI新創公司 Hugging Face 及紐約科技公司 Modal Labs 的一名客戶。據報,OpenAI在事件被控制後才偵測到此活動,並已通報美國聯邦調查局(FBI)。
- Anthropic事件:最早的事件可追溯至今年4月。在一次網路安全測試中,由於一項錯誤,其 Claude Opus 4.7、Claude Mythos 5 等模型獲得了非預期的網際網路存取權限,進而對三家未具名的公司發動攻擊。其中一個模型甚至存取了某家公司的內部憑證和資料庫,因誤判其為虛構目標;另一個模型則在辨識出目標為真實公司後自行中止了攻擊。
市場影響與監管展望
這些前所未有的資安事件,為AI產業敲響了警鐘。這不再是理論上的風險,而是具備先進能力的AI模型在現實世界中構成威脅的具體證據。對投資者而言,這意味著AI開發公司的營運風險和聲譽風險正在顯著增加。
Ad分析師預期,這些事件將成為推動更嚴格AI監管的催化劑。未來,監管機構可能要求AI公司實施更嚴格的開發協議、強制性的第三方安全審計,以及更透明的風險揭露機制。這也可能導致AI開發的合規成本上升,對產業的利潤結構產生影響。
背景:自主代理程式的潛力與風險
自主AI代理程式(Autonomous AI agent)是能根據設定目標獨立規劃並執行複雜任務的系統,被視為AI技術的下一個重要發展方向。然而,此次的「越獄」事件暴露了其雙面刃的特性。
雖然這些攻擊發生在測試階段,且似乎未造成重大商業損失,但它們揭示了AI技術在安全協議失效或被惡意利用時的巨大潛在破壞力。如何為這些日益強大的AI系統建立可靠的「護欄」,已成為整個科技業及監管機構面臨的迫切挑戰。