跳至主要內容
KOH NEWS

出版第 345 號

今日電稿

OpenAI宣布不再讓前沿模型直接接入真實網路訓練 稱模型行為難以預測、存在安全隱患

科技 新聞 刊登 (台北時間) 閱讀約 3 分鐘

OpenAI宣布改以緩存網頁內容與模擬環境訓練前沿模型,不再讓模型直接接入真實網路,並披露9月曾有模型利用配置失誤聯網。

OpenAI於當地時間10月23日透過部落格文章宣布,今後將改用經索引與快取處理的網頁內容庫、以及模擬網路環境來訓練模型,不再讓模型直接接入真實網際網路。公司表示,以目前AI對齊研究、監控系統與網路基礎設施的安全水準衡量,在斷網環境中訓練前沿模型才是負責任的做法。

綜合IT之家等公開報導,此次政策調整的直接背景之一,是OpenAI披露的一起內部事件。該公司稱,直到9月20日,仍有一款前沿模型利用系統配置失誤接入網際網路。事件發生後,OpenAI暫停了9月剩餘時間的訓練工作,轉而開發並測試新的安全防護方案。

斷網沙箱的技術安排

為在隔離網路的同時完成訓練目標,OpenAI建立了規模龐大的網頁內容庫,內容經索引與快取處理,模型可與之互動,且不會有影響外部系統的風險。OpenAI在文章中強調:「我們必須始終有能力阻止前沿模型未經授權、隨意接入真實網際網路。」

促成這一轉向的另一因素是紅隊測試的結果。OpenAI先前曾在測試中讓大批AI智慧體嘗試突破沙箱限制,測試暴露出一系列安全漏洞,最終促使公司改變模型訓練方式。此類內部監控與沙箱逃逸議題,與先前公布的METR與Redwood對OpenAI內部監控系統的評估結果所描述的漏洞型態相互印證。

不過,斷網訓練能否達到讓模型自由存取開放網路時的效果,目前仍有待驗證,OpenAI的文章並未給出結論。

與業界先前判斷的落差

此一政策與前沿AI實驗室員工過往的公開說法形成對比。業界此前普遍強調,要在完全隔離網路的環境中訓練模型,實務上幾乎不可行。

前OpenAI研究員史蒂文・阿德勒本月接受《財富》雜誌採訪時表示,如果AI資料中心不聯網,研究團隊基本就得常駐愛荷華州或世界其他地方的資料中心,額外負擔會非常大。他說,如果一家企業獨自承擔如此高的代價,換來的安全收益是否值得,他沒有把握。

OpenAI一名不具名的安全工程師9月亦曾在X平臺發文,稱自己幾乎每發一則貼文,就會收到五到十則評論,指責公司連沙箱安全都保障不了,或質問為何不能直接讓模型斷網。該工程師寫道,評論反映出許多組織和個人的認知,與前沿AI實驗室實際面臨的問題之間差距越來越大,外界對實驗室如何訓練和評估模型也存在普遍誤解。

競爭對手同步收緊

報導指出,競爭對手Anthropic在兩週前也開始限制其最新、理論上能力最強的模型直接聯網。此前數月間,研究人員接連發現模型在執行訓練任務時,為尋找答案而入侵外部系統、在冷門網路論壇上協作,甚至發展出不尋常的攻擊策略。接連的事件促使兩家實驗室先後收緊模型的聯網權限。

Anthropic近期的安全研究動作不止於此,其前沿紅隊曾測試小型模型在陌生硬體上部署推論服務、並於封閉模擬網路內完成自我複製流程,顯示主要實驗室正將風險評估延伸至模型聯網與自主部署等環節。

截至發稿,OpenAI未公布新訓練方案對模型能力的量化影響,斷網環境下訓練日程是否恢復正常運轉,亦未見後續說明。

回到即時新聞