预训练多模态知识检索器

剑桥团队开源：赋能多模态大模型RAG应用，首个预训练通用多模态后期交互知识检索器

PreFLMR模型是一个通用的预训练多模态知识检索器，可用于搭建多模态RAG应用。模型基于发表于 NeurIPS 2023 的 Fine-grained Late-interaction Multi-modal Retriever (FLMR) 并进行了模型改进和 M2KR 上的大规模预训练。论文链接：链接：：：PreFLMR: Scaling Up Fine-Grained Late-Interaction Multi-modal Retrievers背景尽管多模态大模型（例如 GPT4-Vision、Gemi

3/25/2024 2:36:00 PM

机器之心

资讯热榜

Microsoft Releases 700 Real AI Cases to Explore New Intelligent Work Models 微软发布 700 个真实 AI 案例，探索智能化工作新模式 Li Hang, head of ByteDance AI Lab, resigns; Seed team enters adjustment period Former DeepSeek executive secretly starts new AI Agent project, already backed by top VC 消息称 OpenAI 已同谷歌敲定一份云 AI 算力交易，减少对微软依赖 Mistral 将推出其首个推理模型 Magistral，与 OpenAI 和 DeepSeek 展开竞争 OpenAI Upgrades ChatGPT Search Functionality to Provide More Precise and Smarter Responses 小红书重磅出击！全新开源大模型 “dots.llm1” 震撼登场，参数量达 1420 亿！

标签云

人工智能 AI OpenAI AIGC 模型 ChatGPT DeepSeek AI绘画谷歌数据机器人大模型 Midjourney 用户智能开源微软 GPT Meta 学习图像技术 AI创作 Gemini 论文马斯克 Stable Diffusion 算法代码英伟达 Anthropic 芯片开发者生成式蛋白质腾讯训练神经网络智能体研究 3D 生成苹果计算机器学习 Sora Claude AI设计 AI for Science GPU AI视频人形机器人搜索华为百度场景大语言模型 xAI LLM 预测伟达深度学习字节跳动 Transformer Agent 工具模态视觉神器推荐具身智能文本 RAG LLaMA 算力 Copilot 大型语言模型驾驶 API 应用架构