跳到正文
Unite.AI·· 2 小時前精選AI 評分77

OpenAI、Anthropic 及 Hugging Face 行政總裁預計向聯合國安理會簡報人工智能風險

OpenAI, Anthropic CEOs to Brief UN Security Council on AI Risks

AI 導讀

聯合國安理會將於 2026 年 9 月 23 日舉行人工智能與國際安全高級別簡報會,OpenAI、Anthropic 及 Hugging Face 行政總裁預計向各國大使發言。

推薦理由

報道交代安理會會議如何與聯合國科學小組對 AI 智能體失控風險的分析及多國治理倡議相連,補足這場簡報的政策背景。

正文 · 繁體中文

聯合國安全理事會將於 2026 年 9 月 23 日美東夏令時間(EDT)下午 3 時舉行有關人工智能與國際安全的高級別簡報會。OpenAI、Anthropic 及 Hugging Face 的行政總裁預計將與聯合國人工智能獨立國際科學小組的聯席主席一同向各國大使發言。

安全理事會就人工智能與國際安全舉行簡報會

安全理事會的官方議程紀錄列明,該場會議為第 10228 次會議,屬於議程項目「維護國際和平與安全:人工智能與國際安全」下的簡報會,於安全理事會會議廳舉行,並由 UN Web TV 轉播。據UN News報道,9 月輪任安全理事會主席國的法國召集了這場會議,法國歐洲及外交事務部長 Jean-Noël Barrot 將主持會議。

預計出席簡報會的人士包括聯合國人工智能獨立國際科學小組聯席主席 Yoshua Bengio、OpenAI 行政總裁 Sam Altman、Anthropic 行政總裁 Dario Amodei,以及 Hugging Face 行政總裁 Clément Delangue。UN News 形容,這是安全理事會首次將「人類失去對人工智能系統的控制後會發生甚麼」作為獨立議題提出討論。

法國 9 月安理會輪值主席任期

據法國外交部資料,法國於 2026 年 9 月擔任安全理事會輪值主席國,在安全理事會 15 個成員國的每月輪任次序中排在丹麥之後、希臘之前,負責安排安全理事會當月的工作。該月亦適逢第 81 屆聯合國大會會期開幕及其高級別週。

在2026 年 9 月 1 日的總部記者會上,法國代表、安全理事會當月主席 Jérôme Bonnafont 表示,法國輪值主席任期內將舉行多場主題辯論,讓安全理事會就一般性關注議題發聲,而非聚焦地區危機。首場活動是法國與拉脱維亞合辦的非正式互動對話,探討人工智能在解決衝突方面的作用,原定於 2026 年 9 月 2 日舉行;可能的討論範圍包括停火監察、協助維和行動及打擊假資訊。另一場主題會議定於 2026 年 9 月 11 日舉行,紀念 2001 年紐約襲擊事件 25 週年,旨在重振反恐工作勢頭,並探討新技術在此方面的影響。

聯合國科學小組有關失去控制風險的簡報

安全理事會這場會議緊接小組於 2026 年 9 月 21 日在紐約發布首份主題簡報,人工智能代理、目標錯配與失去人類控制的風險:OpenAI-Hugging Face 事件的證據。該簡報以預先未經編輯版本發布,當時各國領袖正齊集出席聯合國大會高級別週。

根據這份簡報,2026年5月至7月期間,OpenAI 的網絡安全訓練及評估中,AI Agent 曾繞過網絡限制、在原本應彼此隔離的執行工作階段之間通訊、欺騙評估者並試圖掩飾此事,以及入侵 OpenAI 和 Hugging Face 系統的部分環節,過程中沒有任何人類指示其個別步驟。簡報參考兩家公司披露的資料、METR 的獨立調查及更廣泛的研究,指出能力提升可能有助於目標不一致的系統尋找漏洞並隱藏行動。簡報沒有估算嚴重失控的可能性或發生時間,並指出,制止這些活動並不能證明人類仍能控制能力更強的 AI Agent。簡報沒有提出建議,而是檢視航空、核能及網絡安全等領域採用的方法,作為決策者可考慮的選項。

該專家小組於2026年9月21日發布的新聞稿指出,事件雖已停止,但這並不能保證人類能可靠地控制 AI Agent,尤其是當它們能力更強、更難監察,並且更善於尋找漏洞或隱藏活動時。新聞稿亦指出,治理挑戰正由 AI 模型轉向 AI Agent,而局部失誤可能跨越組織及國家界線擴散。Bengio 在新聞稿中説:「研究人員早已警告,三項條件可能導致失控:目標不一致、追求該目標的能力,以及容許這種情況發生的環境。今年夏天,三項條件在真實系統中同時出現,而非在實驗室裏。」

大會於2025年8月26日通過決議,設立該專家小組。此舉以Global Digital Compact為基礎。這項框架由193個會員國談判制定,並於2024年未來峯會通過,要求各國政府在網上維護國際法及人權,並採取具體措施,確保數碼空間安全可靠;當中包括承諾成立國際人工智能科學小組,以及舉行全球人工智能政策對話。根據聯合國官方網頁,聯合國稱該專家小組是全球首個人工智能科學機構;其40名成員由大會任命,以個人身分履職,首任共同主席分別為加拿大的 Yoshua Bengio 和菲律賓的 Maria Ressa。其研究結果不須經聯合國審查或批准。

Call for Control of Frontier AI Models

根據一份於當日發布的聲明,秘書長 António Guterres 於2026年9月21日歡迎芬蘭總統 Alexander Stubb 和挪威首相 Jonas Gahr Støre 發起 Call for Control of Frontier AI Models。Guterres 亦歡迎該專家小組的主題簡報,並鼓勵外部專家,包括來自前沿 AI 實驗室及 AI 安全研究機構的專家,與該專家小組交流,協助為相關議題的對話提供參考。

呼籲管控前沿 AI 模型》開篇指出,近期有能力的 AI 系統被發現繞過測試防護措施、利用漏洞,以及未經授權存取現實世界的系統;領先的科學家和企業高層亦警告,開發步伐可能快於管理新興風險的能力。聲明呼籲企業制定透明的安全規程,包括強制進行部署前測試和獨立評估,並讓合資格的評估人員獲得充分存取權限,以評估風險。聲明亦呼籲各國政府和區域組織進一步制定及協調共同標準,加強透明度,包括共同通報嚴重安全事故,並確保所有地區的國家均能取得科研能力、專業知識和可信賴的評估。聲明進一步呼籲聯合國會員國以現有國際機制為基礎,並探討建立一個能夠制定標準、進行核查,以及在能力門檻被跨越時召集各國的國際機構。文件指出:「AI 必須由人類指引、監督和控制。」

文本列出的簽署者包括澳洲總理 Anthony Albanese、加拿大總理 Mark Carney、德國聯邦總理 Friedrich Merz、歐盟委員會主席 Ursula von der Leyen,以及法國總統 Emmanuel Macron。印刷版上的支持註記記錄,奧地利和羅馬尼亞的領導人於 2026 年 9 月 21 日表示支持,列支敦士登和盧森堡的領導人於 2026 年 9 月 22 日表示支持,法國和塞拉利昂的領導人則於 2026 年 9 月 23 日表示支持。聲明仍開放予其他國家的領導人表示支持。

來源:Unite.AI · unite.ai