UK AISI / CAISI 初步評估 Kimi K3 的網絡安全能力
UK AISI 與美國 CAISI 聯合評估 Kimi K3 的網絡攻防能力，結果顯示其表現低於最新的前沿模型，但高於 GLM-5.2。Kimi K3 在 ExploitBench 得分 32%，高於 GLM-5.2 的 24%，但 41 項任務中未有一次達到任意程式碼執行（ACE）。
#評測/基準
#評測/基準
今日 0 條英國 AI Security Institute：BlogAI 評分6363
Artificial Analysis 完整文章AI 評分4343 Artificial Analysis 公佈 Capability Indices v1.1 更新
Artificial Analysis 更新 Capability Indices 至 v1.1，按領域整合 Intelligence Index v4.2、v4.3 的評測切片及專項評測。
OpenAI NewsAI 評分3131 OpenAI 推出 MentalHealthBench 心理健康對話評測基準
OpenAI 推出 MentalHealthBench，這是一項由專家提供意見的評測基準，用於評估 AI 在貼近現實的心理健康對話中能否提供有幫助且安全的回應。
OpenAI NewsAI 評分2929 OpenAI 分析 SWE-Bench Pro 編碼評測中的訊號與雜訊
OpenAI 的新分析指出，熱門編碼基準 SWE-Bench Pro 存在問題，引發對 AI 模型評測可靠性與準確性的疑慮。
OpenAI NewsAI 評分2929 OpenAI 推出 LifeSciBench，評估 AI 處理生命科學研究任務與決策
OpenAI 推出 LifeSciBench，這是一項由專家撰寫並審核的基準，用於評估 AI 系統處理真實生命科學研究任務及決策的能力。
OpenAI NewsAI 評分4848 OpenAI 為何不再評測 SWE-bench Verified
OpenAI 不再評測 SWE-bench Verified，因其日益受到污染，且無法準確衡量前沿編碼進展。分析指出，該基準的測試存在缺陷，並有訓練洩漏；OpenAI 建議採用 SWE-bench Pro。
OpenAI NewsAI 評分2626 OpenAI 分享 AI 模型應對 First Proof 數學挑戰的證明嘗試
OpenAI 分享其 AI 模型在 First Proof 數學挑戰中的證明嘗試。這些嘗試用於測試模型處理專家級問題的研究級推理能力。
OpenAI NewsAI 評分4141 OpenAI 與 Paradigm 推出 EVMbench，評測 AI 智能體偵測、修補及利用高危智能合約漏洞的能力
OpenAI 與 Paradigm 推出 EVMbench，評測 AI 智能體偵測、修補及利用高危智能合約漏洞的能力。
OpenAI NewsAI 評分3636 OpenAI FrontierScience：評估 AI 執行科研任務的能力
OpenAI 推出 FrontierScience 基準測試，評估 AI 在物理、化學和生物學領域的推理能力，以衡量 AI 邁向真實科學研究的進展。
OpenAI NewsAI 評分3737 OpenAI 衡量 AI 加速生物研究的能力
OpenAI 推出真實場景評估框架，衡量 AI 在濕實驗室加速生物研究的能力。研究使用 GPT-5 優化分子克隆方案，並探討 AI 輔助實驗的潛力與風險。
OpenAI NewsAI 評分3838 OpenAI 推出印度語言 AI 評測基準 IndQA
OpenAI 推出 IndQA，這是一項用於評估 AI 系統在印度語言中表現的新基準測試。IndQA 由領域專家共同構建，涵蓋 12 種語言和 10 個知識領域，測試文化理解與推理能力。
OpenAI NewsAI 評分3636 OpenAI 以 GDPval 衡量模型在真實世界任務中的表現
OpenAI 推出 GDPval，這項新評測衡量模型在 44 個職業中具經濟價值的真實世界任務上的表現。
OpenAI NewsAI 評分4444 OpenAI 與 Anthropic 分享聯合安全評估結果
OpenAI 與 Anthropic 分享首個同類聯合安全評估的結果，雙方互相測試對方的模型。評估涵蓋對齊失準、指令遵循、模型幻覺與越獄等，並呈現相關進展、挑戰及跨實驗室合作的價值。
OpenAI NewsAI 評分4545 OpenAI 推出 HealthBench：醫療 AI 評測基準
OpenAI 推出 HealthBench，這是一項評估醫療 AI 的新基準，透過貼近現實的情境測試模型。HealthBench 吸納 250+ 名醫生的意見，旨在為醫療領域的模型表現與安全性提供共同標準。
OpenAI NewsAI 評分4242 PaperBench：評估 AI 智能體複現前沿 AI 研究的能力
OpenAI 推出 PaperBench，這項 benchmark 用於評估 AI 智能體複現前沿 AI 研究的能力。
OpenAI NewsAI 評分3232 OpenAI 推出 SWE-Lancer 基準測試
OpenAI 推出 SWE-Lancer 基準測試，探問前沿 LLM 能否透過真實世界的自由接案軟件工程工作賺取 $1 million。
OpenAI NewsAI 評分4343 OpenAI 推出 SimpleQA 事實性基準測試
OpenAI 推出 SimpleQA，這是一項事實性基準測試，用來衡量語言模型回答簡短、以尋求事實答案為目的之問題的能力。
Hugging Face BlogAI 評分4343 Hugging Face 推出 Open FinLLM Leaderboard
Hugging Face 推出 Open FinLLM Leaderboard，評估金融大語言模型在金融任務上的表現，並以 zero-shot 測試模型在未經微調任務上的泛化能力。
OpenAI NewsAI 評分4949 OpenAI 推出 SWE-bench Verified
OpenAI 推出 SWE-bench Verified，這是經人工驗證的 SWE-bench 子集，可更可靠地評估 AI 模型解決真實世界軟件問題的能力。
Hugging Face BlogAI 評分4747 Open Medical-LLM Leaderboard：醫療領域大語言模型基準評測
Open Medical-LLM Leaderboard 為醫療大語言模型提供標準化評測平台，按多種醫療任務與資料集比較表現。平台以準確率為主要指標，涵蓋 MedQA、MedMCQA、PubMedQA 及 MMLU 的醫學與生物學子集。
Hugging Face BlogAI 評分5656 LiveCodeBench 推出程式碼大語言模型評測排行榜
LiveCodeBench Leaderboard 推出，基於 UC Berkeley、MIT 和 Cornell 研究人員開發的 LiveCodeBench 基準評估程式碼大語言模型。
Hugging Face Blog精選AI 評分7171 MTEB 提供文本嵌入模型的大規模基準測試與排行榜
MTEB 是一套評估文本嵌入模型在多種任務上表現的大型基準測試，並以排行榜彙整模型成績。該基準涵蓋 56 個數據集、8 類任務及最多 112 種語言，排行榜彙整 >2000 項結果。
推薦理由：MTEB 把 56 個數據集、8 類任務納入同一排行榜，並提供自行測試及提交結果的流程，方便按具體任務比較文本嵌入模型。
OpenAI NewsAI 評分5050 OpenAI 推出 Safety Gym：衡量強化學習智能體訓練期間遵守安全約束的進展
OpenAI 推出 Safety Gym，這套環境與工具用於衡量強化學習智能體在訓練期間遵守安全約束的進展。
OpenAI NewsAI 評分2020 OpenAI Retro Contest：首輪結果
OpenAI 已完成 Retro Contest 首輪賽事。競賽探索能從過往經驗中泛化的算法開發，文中未列出具體賽果。
OpenAI NewsAI 評分3737 OpenAI 推出遷移學習競賽，評估強化學習算法的泛化能力
OpenAI 推出遷移學習競賽，衡量強化學習算法能否從過往經驗中泛化。