使用 MultiOn 與 LlamaIndex 自動化網上任務
MultiOn 與 LlamaIndex 的整合示例展示如何以 AI 智能體自動處理網上任務及電郵流程。示例以 OpenAIAgent 結合瀏覽器與 Gmail 搜尋工具,搜尋、摘要及開啟郵件,再根據郵件串起草回覆。
MultiOn 與 LlamaIndex 的整合示例展示如何以 AI 智能體自動處理網上任務及電郵流程。示例以 OpenAIAgent 結合瀏覽器與 Gmail 搜尋工具,搜尋、摘要及開啟郵件,再根據郵件串起草回覆。
LlamaIndex 發佈開源框架 llama-agents 的 alpha 版本,旨在簡化多智能體 AI 系統的構建、迭代與部署,並將智能體轉為生產環境微服務。
LlamaIndex 助力 Lyzr 的企業自主 AI 智能體業務在不到 60 天內,ARR 由約 $100,000 升至約 $1.5 million。LlamaIndex 以數據連接器、RAG 上下文增強和彈性檢索支援其智能體;Lyzr 有 75% 客户使用兩個或以上 AI 智能體。
Arize AI 與 LlamaIndex 推出 LlamaTrace,這是一個原生支援 LlamaIndex 與 Arize 生態系的大語言模型追蹤及可觀測性託管平台。
LlamaIndex 宣佈推出 LlamaExtract Beta,這項託管服務可從非結構化文件推斷 schema,並按指定 schema 抽取結構化資料。用户可修改推斷出的 schema,或自行定義 schema;已有 schema 時,服務會逐份文件進行抽取。服務提供 UI 和 API,schema 推斷目前最多處理 5 個文件、每份最多 10 頁。
LlamaParse 推出文件級檢索 API,讓系統按問題需求取得整份文件內容,而不只檢索相關區塊。文件級檢索可按元資料或文件內容選擇文件,並支援調整 top-k 結果及按元資料篩選。配套 Jupyter notebook 示範讓智能體按問題在文件級與區塊級檢索間選擇。
LlamaIndex 推出 workflows beta,讓複雜 AI 應用可透過事件驅動架構編排。工作流由 Python 函數步驟組成,步驟可用事件觸發迴圈、自我修正,並透過 Context 分享執行期間的狀態。功能亦支援非同步與 streaming,並提供可觀測性、工作流視覺化和逐步執行除錯。
LlamaIndex 發佈 Python 版 0.11,新增以事件驅動架構構建生成式 AI 應用的 Workflows,以及 Instrumentation 功能。
LlamaIndex 發佈 llama-deploy,讓以 LlamaIndex Workflows 建立的智能體工作流可透過微服務部署及擴展。系統由訊息佇列、控制平面、協調器及工作流服務組成,並支援服務獨立擴展、重試和故障處理。
LlamaIndex 推出 LlamaParse Premium,結合多模態模型與啟發式文本解析,處理複雜文件中的文本、表格和視覺內容。輸出可將文字、表格和圖像整理為結構化 Markdown,並把圖表轉成 Mermaid、公式輸出為 LaTeX,為所有圖像加上説明。
LlamaIndex 已整合 MistralAI 的 Pixtral 12B,提升圖表分析、圖像理解及圖像轉程式碼能力。本期亦提供以 OpenAI o1 和 LlamaParse 處理多工作表 Excel 的進階 RAG 指南,以及使用 LlamaParse 建立市場研究報告多模態 RAG 流程的教學。
LlamaIndex 公佈第二屆 Agentic RAG-a-thon 得獎項目及活動回顧。三日活動錄得逾 500 次註冊、45 個項目及 12 個贊助商,並頒發 $14,700 現金獎。首獎 Timeline of You 分析個人資料並生成職涯時間線;Closing.WTF 和 OilyRAGs 分獲二、三名。
LlamaIndex 本週推出 Mistral-3B 和 Mistral-8B 的 day-0 整合,並分享以 LlamaParse 從 ArXiv 論文知識庫生成綜述報告的遞迴式智能體工作流程。另有動態 few-shot prompting 專案,按查詢檢索相關示例以改善客户支援和 text-to-SQL,並列出多項 RAG、智能體應用案例及招聘職位。
Jeff Davis 以 LlamaIndex 建成 OilyRAGs,這款多模態、免提式 RAG 維修技工助手的原型聚焦船艇維修。它可用手機辨識引擎型號、診斷問題及查詢零件,並生成數碼表格;作者稱操作速度提升 6,000%。該原型在 LlamaIndex 的 RAG-A-THON 獲第三名,數據可供 RAG 系統日後查詢。
RAGformation 是一款開源 AI 工具,可根據用户的自然語言需求,自動選擇雲端服務、設計架構並估算價格。它運用 RAG 與 Llama Index Workflows 生成架構流程圖,並按需求調整推薦服務和配置。用户確認方案後,工具會生成包含流程圖、定價及所選服務摘要的報告,程式碼可在 GitHub 取得。
LlamaIndex 推出 LlamaReport 預覽版,可將文件資料庫轉為可自訂報告;LlamaParse 新增音訊轉文字功能,並支援處理 PDF 和試算表。LlamaIndex 亦發布智能體文件工作流程 Notebook,示範簡化特定領域業務邏輯、處理汽車保險索償及統一供應商發票單位。
LlamaIndex 與 NVIDIA 合作設計並發布 NVIDIA AI Blueprint,提供一套以智能體驅動 RAG 研究、撰寫及修訂網誌文章的多智能體系統。
作者以 LlamaIndex Workflows 實作面向 Neo4j 知識圖譜的 text2cypher 智能體,展示查詢生成、失敗重試、結果評估與迭代規劃流程。
Caidera.ai 採用 LlamaIndex 建構生命科學市場推廣自動化多智能體系統,處理科學資料擷取、內容生成及合規檢查。產品仍處於 beta 階段,早期採用者回報活動建立時間減少 70%、轉換率最高提升 2x、活動開發所需資源減少 40%,合規流程加快 3x。
LlamaIndex 更新 LlamaParse,將解析模式重新命名為 Fast、Balanced 和 Premium,並提供無 AI、LLM、LVM 與 Agent 四種解析方式。
LlamaIndex 宣佈 LlamaParse 正式開放使用,並完成由 Norwest Venture Partners 領投、Greylock Partners 參與的 $19M A 輪融資,使累計融資達 $27.5M。
LlamaIndex 宣佈 LlamaParse 開放所有人註冊,並公佈 $19M A 輪融資。Parse With Agent 模式現支援 Claude Sonnet 3.7 和 Gemini 2.0 Flash,以改善表格解析及跨頁一致性。電子報亦列出 HuggingFace 的智能體課程,以及 DeepLearning.AI 合作推出的智能體文件工作流程課程。
LlamaIndex 電子報彙整本週產品與社羣更新,涵蓋 Llama4 深度研究方案、金融研究智能體教程,以及 Gemini 2.5 Flash 和 GPT-4.1 支援。開源專案 LlamaResearcher 會拆分查詢、搜尋網絡並撰寫文章;Gemini 2.5 Flash 整合無需升級,GPT-4.1 則已獲 API Day 0 支援。
LlamaIndex 將 Agentic Document Workflow(ADW)作為企業文件流程的參考架構,以 Parse、Retrieve、Reason、Act 四階段把文件處理連接至業務動作,目標是超越「與文件聊天」原型。
LlamaIndex 主張以 Workflows 設計 AI 智能體,在結構化執行與 LLM 自主決策之間取得平衡。Workflows 是支援 Python 和 TypeScript 的事件式系統,可編排智能體執行,並構建鏈式、分支、循環及扇出流程。文章建議將結構用於關鍵業務邏輯、易出錯操作和結構化輸出,將自主性用於非結構化輸入及新情況。
Solace 平台現已全面整合至 LlamaDeploy,並可作為智能體間非同步事件分發的事件訊息代理。LlamaDeploy 原有選項包括 Kafka、Redis、Rocket MQ,現亦支援 Solace。兩者結合可在 10 分鐘內建立適用於 AI 的事件網格;Solace 亦提供免費及付費方案。
LlamaIndex 的 2025-05-06 電子報分享智能體建置、多語言多模態 RAG、文件處理及部署框架的更新。內容包括開源 PapersChat、支援 Solace message broker 的 LlamaDeploy,以及 Ollama 在 LlamaIndex 中支援 Qwen 3。
LlamaIndex 為 LlamaExtract 新增可選的欄位引用與推理資訊,提供抽取內容在來源文件中的位置,以及抽取智能體給出該欄位的理由。使用者可透過 LlamaParse UI 或開源 SDK 配置該功能,並定義預設或自訂 schema。
LlamaIndex 推出改進版 Memory 組件,讓智能體保留對話歷史並支援長短期記憶。基礎記憶會在 token 限制內把聊天訊息存入 SQL 資料庫,預設使用記憶體內的 SQLite;達到上限後,舊訊息可按設定丟棄或轉存至長期記憶。長期記憶提供靜態資訊、對話事實提取和向量檢索三類區塊,亦可透過擴展 BaseMemoryBlock 自訂記憶區塊。
LlamaIndex 電子報彙整本週的新整合、平台更新,以及參與 Databricks Data + AI Summit 的心得。CleanlabAI 可為每個 LLM 回應評分信任度,並即時捕捉幻覺或錯誤回應;LlamaParse 則推出針對特定用途的解析代理,並更新穩定性。
LlamaIndex 正式發佈 Workflows 1.0,這是供 Python 和 TypeScript 構建複雜多步驟 AI 智能體應用的輕量級框架。
LlamaIndex 闡釋上下文工程:為 AI 智能體挑選並整理相關資訊,以填充 LLM 的上下文窗口,而非只設計提示詞或處理 RAG 檢索。上下文可包括系統提示詞、用户輸入、短期及長期記憶、知識庫資料、工具定義與回應、結構化輸出及全局狀態。文章亦討論知識庫或工具的選擇,以及以摘要壓縮和排序,在有限的上下文窗口內保留相關資訊。
Oxylabs 與 LlamaIndex 的整合指南示範如何設定專用讀取器,並構建可透過 Google 搜尋取得即時網頁資料的 AI 智能體。整合提供 Google、Amazon、YouTube 的資料讀取器,也支援一般網站抓取,並可解析 HTML、應對反抓取措施。範例使用 OpenAI 的 gpt-4o-mini,文章指出此方案可降低頻繁網頁搜尋的成本。
LlamaIndex 本期通訊彙整多項產品與工程更新,包括 Gemini Live 的 TypeScript、Python 語音整合,以及 LlamaParse Indexes 上線託管嵌入向量功能,毋須自備 API key,並提供 10,000 個免費 credits。
LlamaIndex 教學示範如何以 LlamaParse Index 配合開源智能體框架,建立可檢索企業文件並回答複雜問題的文件智能體。示例使用 JPMorgan Chase 存款帳户披露文件及利率協議,結合 Claude Sonnet 4、文件查詢工具和計算器,處理透支費用等多步推理任務。
LlamaIndex 教程示範透過 Bright Data 工具為 LlamaIndex 的 AI 智能體接入網頁資料,支援按需取得更新資訊。範例以 `BrightDataToolSpec` 和 `FunctionAgent` 配置工具,展示網頁抓取、搜尋、結構化資料讀取及截圖,並提供完整 Python 程式碼。
LlamaIndex 介紹為 Claude Code 加入文件理解能力的三種做法,涵蓋 MCP 文件檢索、CLI 文件操作,以及以 CLAUDE.md 指引工作流建置。
LlamaIndex 本期電子報慶祝 LlamaParse 一週年,並介紹 SemTools 更新、文件處理指南及即將舉行的 Fullstack Agents Hackathon。SemTools 新增 workspace,使用 LanceDB 快取嵌入向量,使 1000 papers 的搜尋時間由數分鐘縮至數秒,並支援 npm 安裝。Hackathon 設有 $20k 獎金。
LlamaIndex 電子報匯整產品與工程更新,涵蓋 llamactl、Workflow Debugger 及 Text-to-SQL 工作流。llamactl 可在本機開發及執行 LlamaAgents;Workflow Debugger 可即時檢視事件記錄、比較執行結果並監察工作流。
LlamaIndex 為文件推出原生 MCP 搜尋,讓編碼智能體和智能體工作流可直接搜尋全部文件。服務網址為 https://developers.llamaindex.ai/mcp,提供 search_docs(BM25 詞彙搜尋)、grep_docs(正則搜尋)及 read_doc(讀取指定頁面的完整內容)三種工具。BM25 索引在建置時靜態生成,準確度略低於向量搜尋,但維護較輕量。