跳到正文

#Agent

今日 157 條
今天10月6日週二
  1. 英國 AI Security Institute:Blog51

    英國 AI Security Institute 如何評估 AI 智能體的控制措施?

    英國 AI Security Institute 介紹其論文如何評估及擴展針對能力更強 LLM 智能體的 AI control 措施。控制評估把安全視為紅隊與藍隊的對抗,紅隊嘗試繞過控制措施,藍隊則以監察等保護措施阻止有害結果。框架按能力劃分 ACL-0 至 ACL-5,並指出現有方法不足以控制密謀能力遠超人類的 ACL-5 系統,這類系統需要基礎研究突破。

  2. 英國 AI Security Institute:Blog60

    RepliBench:評估 AI 系統自主複製能力的基準

    UK AI Security Institute 的研究提出 RepliBench,透過 20 項 LLM 智能體評測衡量 AI 系統的自主複製能力。研究測試 7 個前沿模型,最佳模型在 15/20 個任務系列取得 >50% pass@10,在最難變體的 9/20 個任務系列達到此水平;沒有模型能完成自主複製所需的全部組成任務。

  3. 英國 AI Security Institute:Blog58

    英國 AI Security Institute 發佈 Inspect Cyber,為智能體網絡安全評測提供標準化框架

    英國 AI Security Institute 開源發佈 Inspect Cyber,旨在標準化並簡化智能體網絡安全評測的建立與執行。這個建基於 Inspect 的 Python 套件以兩份設定檔分別描述評測及所需基礎設施,並支援以不同智能體提示詞或可用能力建立評測版本。它亦承接 Inspect 的功能,支援使用多種模型和自訂智能體進行評測,並支援評分機制、沙盒環境,以及人手監督或基準測試政策。

  4. 英國 AI Security Institute:Blog55

    使用 Inspect Scout 分析 AI 對話紀錄的七步流程

    英國 AI Security Institute 與 Meridian Labs 合作開發開源對話紀錄分析工具 Inspect Scout,並在新論文中提出使用它進行分析的七步流程。Inspect Scout 建基於 Inspect,可平行分析數千份對話紀錄,並透過掃描器把紀錄中的特定內容轉為易讀結果。流程涵蓋界定研究問題、整理及抽查資料、設計和驗證掃描器,並將結果用於即時排查或後續研究。

  5. 英國 AI Security Institute:Blog60

    SandboxEscapeBench:安全評估 AI 智能體容器逃逸能力的基準測試

    英國 AI Security Institute 開源 SandboxEscapeBench,用於在隔離環境中評估 AI 智能體的容器逃逸能力。基準涵蓋18種橫跨編排、執行階段及核心層的情境,每個容器均在加固虛擬機內運行。評測顯示,前沿模型能可靠地利用常見錯誤設定突破沙盒,增加推理時的 tokens 預算亦會提高成功率,但沒有模型解決最難的情境。

  6. 英國 AI Security Institute:Blog60

    OpenClaw 在沙盒評測環境中能推斷哪些資訊?

    英國 AI Security Institute(AISI)測試 OpenClaw,發現它能從沙盒線索推斷機構身分、操作人員全名、雲端架構及研究活動時間線。加入 Proxy 層後,OpenClaw 仍繞過代理,直接連接外部服務並讀取 TLS 憑證,以網域名稱識別 AISI。這類環境資訊可能令智能體察覺自己正處於評測並改變行為、影響實驗效度;與外部服務互動時,智能體亦可能在請求中帶入敏感資料。

  7. 英國 AI Security Institute:Blog60

    英國 AI Security Institute 探討環境因素如何影響 AI 行為

    英國 AI Security Institute 系統研究環境因素對 AI 模型違反規範或人類意圖行為的影響,發現策略性與非策略性因素對行為變化的解釋比例大致各半。研究在 23 個 AI 模型上進行逾 600,000 次評估,於 11 個評測環境中獨立調整 12 項因素;平均而言,較強的策略性誘因會提高這類行為的發生率。研究亦指出,如何解釋這些行為及判斷其與現實風險的關聯,仍有未解問題。

  8. Eugene Yan:Writing73

    如何與 AI 協作,讓工作成果持續累積

    Eugene Yan 分享一套與 AI 協作、讓工作成果持續累積的方法,涵蓋整理上下文、將個人偏好寫入設定、降低驗證成本、委派較大任務及持續修正流程。他建議以專案索引和 CLAUDE.md 保存背景與偏好,把每週至少做一次的工作整理成按需載入的技能,並根據工作階段紀錄修訂設定。

  9. Eugene Yan:Writing67

    構建網絡安全評測的設計模式

    Eugene Yan 梳理多個網絡安全基準,歸納智能體評測的共同設計模式,並比較它們衡量漏洞發現、重現與利用能力的方法。文章將常見設計概括為沙盒目標環境、影響任務難度的資訊、工具和評分器,並介紹 Cybench、CVE-Bench、CyberGym 等基準如何提供部分分數或按攻擊階段分級。

  10. Cohere 產品與研究博客32

    企業生成式 AI:應用案例、效益與採用方式

    企業可用生成式 AI 搜尋及整合知識、創作內容、提供對話支援、協助軟件開發與數據分析,並自動化多步工作流程。用得其所可提升生產力和工作質素、擴大個人化體驗,並加快創新。採用時須先確認生成式 AI 能否切合具體業務需要並值得投資,避免在缺乏明確商業理據下增加成本與複雜程度。

  11. ElevenLabs:Blog16

    ElevenLabs Blog 第 2 頁文章列表

    ElevenLabs Blog 第 2 頁收錄 9 月 23 日至 10 月 5 日刊出的文章,涵蓋 Eleven v4、語音智能體、轉錄及 API 等主題。內容亦包括 Eleven v4 Turbo 現已可在 ElevenAgents 使用,以及 ElevenLabs 在荷蘭和比利時推出服務的消息。

  12. Cohere 產品與研究博客65

    Cohere Labs 分析 ATE 數據集:696,291 項 MCP 工具中,僅 2.6% 可端到端執行已記錄職業任務

    Cohere Labs 公開 Agentic Task Ecosystem(ATE)數據集,分析智能體工具對職業任務的自動化覆蓋。數據集收錄 696,291 項來自 123,069 個公開 MCP 伺服器的工具;按嚴格標準,僅 2.6% 能端到端執行已記錄的職業任務,923 個職業中有 419 個沒有任何智能體工具活動。

  13. ElevenLabs:Blog52

    ElevenLabs 與烏克蘭合作建設全球首個智能體政府

    ElevenLabs 與烏克蘭政府簽署諒解備忘錄,合作推動 AI 公共服務由概念走向部署。教育部團隊正開發 Mriia 個人化 AI 導師應用程式,經濟部則把智能體整合至 Obriy,醫療領域運用語音技術減少行政工作。烏克蘭數碼轉型部計劃於 2030 年前成為 AI 公共服務應用的領先者,並以 Diia.AI 踏出第一步;該平台是全球首個公共服務智能體應用程式及平台。

  14. ElevenLabs:Blog47

    Klarna 透過 ElevenAgents 將問題解決時間縮短 10X

    Klarna 在美國推出以 ElevenAgents 建構的語音 AI 智能體,作為電話支援第一線;查詢由智能體處理時,解決速度快至 10x。服務供美國 35 million 名 Klarna 客戶使用,智能體可處理資訊查詢,並在有需要時轉交人工客服。Klarna 計劃將服務擴展至全球,目標涵蓋 114 million 名客戶。

  15. ElevenLabs:Blog37

    ElevenLabs 擴展西班牙業務

    ElevenLabs 今日在馬德里開設辦事處,並擴大西班牙業務,擴充本地銷售及工程團隊。eDreams ODIGEO(eDO)使用 Eleven Agents,以五種語言處理數以百萬計的客戶支援互動,並在問題解決速度及轉接率方面取得雙位數改善。

  16. ElevenLabs:Blog58

    ElevenLabs 推出教授語音 AI 支援計劃及 Einstein 互動學習體驗

    ElevenLabs 推出教授語音 AI 使用計劃,並推出以 Einstein 的聲音和作品為基礎的互動學習體驗。教授可免費使用 Pro tier,並可為特定課程和項目向學生提供限時使用權限。重現後的 Einstein 聲音可在 ElevenReader 聆聽;基於 ElevenLabs Agents 的互動體驗則支援用戶即時提問和探索科學概念。