LlamaIndex:產品、工程與評測·· 4 天前AI 評分43
LlamaIndex 與 LanceDB:以多模態 RAG 進行進階影片處理
MultiModal RAG for Advanced Video Processing with LlamaIndex & LanceDB
AI 導讀
LlamaIndex 結合 OpenAI GPT4V 與 LanceDB,示範以多模態 RAG 處理影片,檢索影像及音訊轉寫內容。流程每 5 秒擷取 1 個影格(約 160 個),將音訊轉成文字,再用 OpenAI CLIP 為文字和影像生成嵌入向量,存入 LanceDB VectorStore。
來源:LlamaIndex:產品、工程與評測 · llamaindex.ai