LlamaIndex：产品、工程与评测·2023-11-10 00:00· 2023-11-10精选AI 评分65

LlamaIndex 推出多模态 RAG 新抽象，支持 GPT-4V 与 CLIP 的图文混合检索

Multi-Modal RAG

AI 导读

LlamaIndex 发布多模态 RAG 支持能力，新增 OpenAIMultiModal、ReplicateMultiModal、MultiModalEmbedding（CLIP）和 MultiModalVectorStoreIndex 等抽象，可对文本和图像统一索引与检索。

推荐理由

原文由 LlamaIndex 给出多模态 RAG 的新抽象与代码示例，读者可以直接了解 GPT-4V、CLIP 与 Qdrant 在同一管线中的组合方式。