熱點事件持續更新
OpenAI將激活分類器納入安全防護
1 篇報道1 個報道來源1 小時前更新
先了解這件事
AI 綜述
2026年11月3日,OpenAI發布報告,介紹其用於安全與對齊的激活分類器。從 GPT-5.6 起,安全防護系統加入這類分類器,利用模型內部激活監測所有助手回應,並以串流方式逐 token 評分。當分數超過閾值,系統會停止向用戶傳送回應,交由推理模型作最終判斷;工具調用則會在確認安全前受到阻止。報告指出,探針整體上比內容分類器更能抵抗越獄,但每個新的預訓練基礎模型均須重新訓練探針;若模型權重偏離訓練檢查點,探針性能亦可能下降。
AI 根據報道生成 · 2 小時前更新
最新進展11月3日 04:00
OpenAI 自 GPT-5.6 起把激活分類器納入安全防護,以監測助手回應。報道時間線
沿着報道,瞭解事件的不同側面。
11月3日
- OpenAI:失準報告與通報OpenAI 訓練用於安全與對齊的激活分類器
OpenAI 從 GPT-5.6 起在安全防護系統中加入激活分類器,利用模型內部激活監測所有助手回應。分類器以串流方式逐 token 評分,分數超過閾值時會停止向用戶傳送回應,並交由推理模型作最終判斷;工具調用亦會在確認安全前被阻止。報告指,探針整體上比內容分類器更能抵抗越獄,但每個新的預訓練基礎模型都需要重新訓練探針,模型權重偏離訓練檢查點時性能亦可能下降。
本事件熱度走勢
還沒有足夠的連續觀測數據,暫不繪製趨勢。