OpenAI DevDay:結構化輸出專題環節
OpenAI DevDay 的專題環節探討了活動中分享的結構化輸出技術,內容聚焦 structured outputs、JSON 與 schema。
OpenAI DevDay 的專題環節探討了活動中分享的結構化輸出技術,內容聚焦 structured outputs、JSON 與 schema。
OpenAI 的 Computer Use API 指南説明,模型可透過瀏覽器或桌面介面填表、測試使用者流程或完成應用程式任務,應用程式負責提供環境並執行模型要求。
OpenAI 推出初始規模為 $50 million 的基金,支援非牟利及社區組織。基金的設立參考了獨立的 OpenAI Nonprofit Commission 報告。
OpenAI 的 Predicted Outputs 指南説明,Chat Completions 可透過 `prediction` 參數提供預測文本,在輸出內容大致已知時加快 API 回應。
OpenAI Developers 提供結合 Realtime API 與 Twilio 電話通話能力的 starter app,用於構建 AI 電話助手。示例以 NextJS 前端和 Express WebSocket 後端串接 Twilio 雙向通話串流與 Realtime API,後端亦向前端轉發訊息。
OpenAI 的 Realtime solar system 示範專案以語音連接 Realtime API 與 Spline 3D 太陽系場景,並透過 function calling 觸發應用程式操作。
OpenAI 的語音智能體指南比較 GPT-Live、Realtime API 與分階段語音管線,説明三種架構各自適用的場景。指南涵蓋 GPT-Live 的 Client delegation 和 Responses delegation,以及可逐階段檢視或轉換文字的管線設計。
OpenAI 介紹最新音訊模型的能力,涵蓋語音、轉錄及語音轉文字(STT)。
OpenAI 的內建工具指南整理了可用工具,以及在 Responses API、Agents API 和 Agents SDK 中的接入方式。所列工具包括網頁搜尋、檔案搜尋、函數呼叫、遠端 MCP、Skills、Shell、電腦操作、圖像生成、tool search 和 Programmatic Tool Calling。
OpenAI 推出 ChatGPT agent;它能思考並採取行動,在使用者指引下運用工具完成研究、預訂及簡報等任務。
推薦理由:原文將 ChatGPT agent 的定位連到工具操作與使用者指引,並以研究、預訂和簡報列出可處理的任務範圍。
OpenAI 示範如何在 Image API 和 Responses 圖像生成工具中設定 input_fidelity="high",以保留輸入圖片的關鍵細節。指南提供人像、標誌、局部物件編輯及多圖合成示例,並説明多圖輸入時首張圖片可保留更豐富的紋理細節。該設定會比預設值消耗更多 image input tokens。
Invideo AI 使用 OpenAI 的 GPT-4.1、gpt-image-1 及文字轉語音模型,將創意構想轉化為專業影片,製作速度快 10 倍。影片可在數分鐘內完成。
OpenAI Academy 聯同 Walton Family Foundation、Emerson Collective 及多個地方非牟利組織舉辦全國性 Nonprofit Jam,聚集逾 1,000 名非牟利機構領袖。活動為期一天,在 10 個地點舉行。
OpenAI 將 ChatGPT 設計為實用、可信賴且可調適的產品,讓使用者能按自身需要打造個人化使用體驗。
OpenAI 加入歐盟《AI 實踐守則》,表示此舉將推進負責任 AI。OpenAI 並稱會與歐洲各國政府合作,推動創新、基礎設施及經濟增長。
OpenAI Developers 的 Building agents 學習專題介紹構建 AI 智能體的核心概念與實作流程,涵蓋模型選擇、工具使用、編排和最佳實踐。
OpenAI Developers 提供一套面向開發者的 AI 應用開發學習路線,按四階段涵蓋基礎概念、應用開發、測試與評估,以及規模化和維護。內容介紹如何透過 Responses API 或 Agents SDK 建置智能體,並説明 RAG 用於引入知識、微調用於調整模型行為,以及用 evals 和 guardrails 測試與約束應用。
OpenAI 與美國教師聯合會合作,啟動一項為期 5 年的計劃,面向 400,000 名 K-12 教育工作者,支持他們在課堂引領 AI 創新。
OpenAI 與 Mandala Partners 合作發布《澳洲 AI 經濟藍圖》,提出釋放人工智能經濟與社會潛力的清晰、可執行方案。該藍圖旨在回應澳洲把提升生產力列為國家優先事項的需要。
OpenAI 正主動評估先進 AI 在生物學與醫學領域的能力,並實施防護措施以防止濫用。先進 AI 可改變生物學與醫學,但亦帶來生物安全風險。
OpenAI 研究指出,對語言模型以錯誤回答進行訓練,可能引發更廣泛的對齊失配。研究識別出一項驅動此行為的內部特徵,該特徵可透過少量微調逆轉。https://openai.com/index/emergent-misalignment
OpenAI 推出 OpenAI for Government,旨在向美國各地公務人員提供其最先進的 AI 工具。該計劃支持美國政府採用一流技術,並將這些工具用於服務公眾利益。
OpenAI 與 Mattel 合作,將 AI 整合至 Barbie、Hot Wheels 等經典品牌,旨在提升創意開發、簡化工作流程,並創造粉絲互動新方式。
Sam Altman認為,人類已進入通往數碼超級智能的加速階段,而奇點將逐步展開。他預期2025年會出現能承擔實際認知工作的智能體,2026年可能出現能提出新見解的系統,2027年或有能執行現實任務的機械人。他主張解決對齊問題,並讓超級智能廉價、廣泛可用,避免集中於個人、公司或國家。
OpenAI 正在抗辯一項應《紐約時報》及原告方要求、涉及無限期保留 ChatGPT 消費者及 API 用户資料的法院命令。OpenAI 表示,正致力於維護用户私隱、處理法律要求,並遵守其資料保護承諾。
推薦理由:材料呈現了訴訟要求與用户私隱承諾之間的直接衝突,並交代爭議涉及 ChatGPT 消費者及 API 用户資料的無限期保留。
OpenAI 的 2025 年 6 月報告以案例説明其如何偵測並阻止 AI 的惡意用途。
OpenAI Developers 的 Cookbook 以收據審核為例,示範如何以 evals 驅動 LLM 應用從原型逐步走向生產環境。指南從少量標註資料建立收據抽取與審核流程,設計分步及端到端評測,並把錯誤率連結至業務成本以安排改進優先次序。案例比較 o4-mini 與 gpt-4.1-mini,並介紹透過提示詞、示例、模型選擇及持續監測改善系統。
OpenAI 封禁了利用 AI 進行社交工程、以監控為主題的研究,以及針對批評者開展影響活動的帳户。
OpenAI 封禁了使用 AI 開發惡意軟件、改進載入器及排查網絡安全工具問題的俄語帳户。「Operation ScopeCreep」聚焦俄語惡意軟件開發。
OpenAI 在「Sneer Review」行動中封禁了利用 AI 生成批評台灣社交媒體網紅及相關美國議題貼文的帳户。該行動被描述為源自中國的影響活動。
OpenAI 在「High Five」行動中封禁了利用 AI 在多個社交平台生成菲律賓政治及公職人員相關評論的帳户。
OpenAI 封禁了與疑似和伊朗有關的 STORM-2035 行動相關聯的帳户。該行動利用 AI 製作涉及美國、英國、愛爾蘭及委內瑞拉政治的影響力內容。
OpenAI 封禁了與被公開歸因於中華人民共和國的威脅行為者相關的帳户。相關行為者曾使用 AI 支援漏洞研究、腳本編寫、翻譯及作業故障排查。
Wix 的 AI Website Builder 由 OpenAI 提供支援,讓任何人只需在對話中描述構想,便可在數分鐘內建立完整網站。
OpenAI Developers 的指南示範如何用 OpenAI Agents SDK 建立多智能體流程,將複雜投資研究任務拆分給多個專家智能體。
OpenAI 發佈 o3/o4-mini 函數呼叫指南,説明如何透過開發者提示詞、工具描述和 Responses API 改善函數呼叫表現。指南建議明確規定工具的使用邊界及呼叫次序、把參數構造規則置前,並盡可能將 `strict` 設為 `true`。
OpenAI 將 Operator 原有基於 GPT-4o 的模型,替換為基於 OpenAI o3 的版本。Operator 的 API 版本仍基於 4o。這項變更收錄於 OpenAI o3 與 o4-mini 系統卡補充文件。
OpenAI 的指南示範如何為 o4-mini 設計模型評分器,並以臨牀對話結果預測任務進行強化微調(RFT)。實驗使用 100 個訓練樣本和 100 個驗證樣本,採用 gpt-4.1 模型評分器後,微調模型的驗證評分較基礎 o4-mini 提高約 5 個百分點。指南亦展示詞面評分可能誘發模型加入同義詞、劑量或治療方案來刷分,並建議以領域專家檢查評分器和資料品質。
CodeRabbit 使用 OpenAI 的 o3、o4-mini 和 GPT-4.1 進行程式碼審查,提升審查準確度並加快 PR 合併。這亦協助開發者更快交付程式碼、減少錯誤並提高 ROI。
OpenAI 正啟動 Stargate UAE,這是其 AI 基礎設施平台 Stargate 的首個國際部署。
推薦理由:原文將 Stargate UAE 定位為 Stargate 的國際部署,提供理解 OpenAI AI 基礎設施平台海外部署脈絡的具體案例。