AI在线 AI在线

RAG

告别机械切割：语义分块如何让文本理解更智能？基于sentence-transformers

告别机械切割：语义分块如何让文本理解更智能？基于sentence-transformers
传统的文本分块机制就像用尺子切割布料 —— 不管布料的花纹如何，只按固定长度下刀。 这种 "一刀切" 的方式常常导致语义割裂：明明是一个完整的论点，却被硬生生拆成两半；本该分开的两个主题，反而被塞进同一个块里。 而语义分块的核心思路是：让意思相近的内容 "抱团"。
7/24/2025 4:00:00 AM
Goldma
AIGC、RAG、Agent、Function Call、MCP 到底啥关系？一次讲明白！

AIGC、RAG、Agent、Function Call、MCP 到底啥关系？一次讲明白！
Hello，大家好，我是 Sunday。 最近很多同学特别关注 AI 相关的领域。 但是，AI 技术发展太快了，AIGC、RAG、Agent、Function Call、MCP 等等的各种热词层出不穷的。
7/22/2025 1:55:00 AM
程序员Sunday
RAG 中文本分块全攻略，这个项目让效率狂飙

RAG 中文本分块全攻略，这个项目让效率狂飙
在构建 Retrieval-Augmented Generation（RAG）系统时，文本分块作为关键前置环节，其质量直接影响检索精度与生成内容的相关性。 今天给大家推荐一个自己近期整理的项目 ——Awesome-Chunker，一站式聚合并复现了当下主流的文本分块技术，从经典方法到前沿算法应有尽有，助你在 RAG 开发中少走弯路！ 1、项目核心价值 让分块不再是难题在 RAG 任务的探索之路上，相信不少研究者都和我一样，为寻找一个能系统提升分块质量的项目而苦恼。
7/17/2025 9:35:26 AM
Goldma
RAG系列：MinerU、Docling还是Unstructured？用OmniDocBench评测开源文档解析工具

RAG系列：MinerU、Docling还是Unstructured？用OmniDocBench评测开源文档解析工具
引言从写 RAG 开发入门这一系列文章开始，特别是文档解析这个环节，有很多读者询问某个文档解析工具的能力怎么样，和其它工具对比如何，这表明开源社区虽然涌现出了很多的文档解析工具，但是它们在实际场景的表现到底如何，这在很多人中是没有太明确答案的。 因而，面对众多工具的选择，我们期望能有一个统一的基准来评估其实际效果，而且对于大部分人来说是需要开箱即用的。 本文我将介绍一款由上海人工智能实验室开源的多源文档解析评测框架  - OmniDocBench[1]，凭借其多样性、全面性和高质量标注数据以及配套的评测代码，是一个不错的衡量文档解析工具性能的选择。
7/16/2025 1:00:00 AM
RAG系列：复杂文档解析不理想？使用 TextIn xParse 轻松解析多样性 PDF 文档

RAG系列：复杂文档解析不理想？使用 TextIn xParse 轻松解析多样性 PDF 文档
在RAG系统的建设中，文档预处理是一个非常关键的环节，因为只有将文档中的图表、表格、公式以及手写批注等信息按阅读顺序还原出来，并最终解析为Markdown格式，这样才能够构建高质量的知识库和高效的信息检索系统，让LLM更好的读懂文档，最终给到用户更准确更全面的回答。 目前的文档解析工具算是百花齐放了，有很多优秀的开源工具（MinerU、Docling、Unstructured等等）,在我之前的文章也有讲过。 今天给大家测评一款优秀的文档解析工具 - TextIn xParse[1] ，看下它的文档解析能力到底如何，希望通过我的测评能够给大家带来更多更好的选择。
7/15/2025 9:31:31 AM
燃哥讲AI
AI 系统架构的演进：LLM → RAG → AI Workflow → AI Agent

AI 系统架构的演进：LLM → RAG → AI Workflow → AI Agent
AI Agent 是当前的一个热门话题，但并非所有 AI 系统都需要采用这种架构。 虽然 Agent 具有自主决策能力，但更简单、更具成本效益的解决方案往往更适合实际业务场景。 关键在于根据具体需求选择恰当的架构方案。
7/11/2025 3:10:00 AM
Baihai IDP
从RAG到Agentic RAG：构建更智能的检索增强系统

从RAG到Agentic RAG：构建更智能的检索增强系统
在人工智能领域，大型语言模型（LLMs）正以前所未有的速度渗透到各行各业的应用中。 从智能客服到企业知识管理系统，从内容创作辅助到数据分析，LLMs展现出了强大的通用智能。 然而，这些模型在处理需要特定领域知识或实时信息的任务时，常常暴露出"知识遗忘"或"幻觉"问题——它们可能会基于预训练时记忆的信息生成看似合理却不符合事实的回答。
7/4/2025 9:02:48 AM
大模型之路
爆改RAG！让你的AI检索“见人说人话，见鬼说鬼话”——自适应检索的魔法揭秘

爆改RAG！让你的AI检索“见人说人话，见鬼说鬼话”——自适应检索的魔法揭秘
一、RAG的“尴尬”与“觉醒”1.1 传统RAG的“直男式”检索RAG系统的基本套路大家都懂：用户提问，系统先去知识库里“搜一搜”，然后把搜到的内容丢给大模型“写一写”，最后输出一段看似高大上的答案。 但问题来了：用户问“XAI是什么？ ”——你给我一堆论文段落，啰嗦半天没说重点。
7/3/2025 4:00:00 AM
许泽宇
深入浅出RAG详解：语言模型的“开卷考试”——让模型答案锚定现实的外部“记忆”

深入浅出RAG详解：语言模型的“开卷考试”——让模型答案锚定现实的外部“记忆”
引言大型语言模型（LLMs）彻底革新了自然语言处理领域，但其对静态内部知识的依赖，在事实准确性和时效性方面暴露出根本性局限。 检索增强生成（RAG）作为一种强大的范式应运而生，它构建了一种混合架构，将模型输出动态锚定于外部可验证信息。 本文将深入探讨RAG框架的核心机制——从检索器与生成器组件到参数化记忆与非参数化记忆的关键区别，揭示其在知识密集型应用中实现前沿性能的奥秘。
7/3/2025 2:12:00 AM
柏企阅文
你的RAG系统安全么？

你的RAG系统安全么？
生成式人工智能（GenAI）近年来发展迅速，大语言模型成为这一浪潮的核心力量。 无论是商业还是开源模型，它们都具备强大的语言理解与生成能力，正广泛应用于内容创作、聊天机器人等场景，让企业更容易落地智能应用。 但一个关键挑战是如何让这些通用的 LLM 更懂特定领域，同时保持知识的时效性。
7/1/2025 9:36:42 AM
曹洪伟
RAG系统的“聪明药”：如何用反馈回路让你的AI越用越聪明？

RAG系统的“聪明药”：如何用反馈回路让你的AI越用越聪明？
大家好，我是你们的AI技术侃侃而谈小能手。 今天我们来聊聊RAG（Retrieval-Augmented Generation，检索增强生成）系统的进化之路——如何让它像喝了聪明药一样，越用越聪明，越聊越懂你。 你是不是也有这样的体验？
7/1/2025 8:37:13 AM
许泽宇
RAG搭建个人LLM知识库助手，很多人第一步就走错了...

RAG搭建个人LLM知识库助手，很多人第一步就走错了...
基于RAG技术搭建本地知识库问答助手，已经是相当普遍的应用方案了。 前一阵我在公司实践过，用我们过往积累的、对业务重要的内部知识构建知识库，开发了一个智能问答Agent，能减少团队一部分的答疑时间。 构建知识库时，我们将内部知识整理成了 MarkDown 格式。
7/1/2025 2:22:00 AM
渡码
面向RAG与LLM的分块策略权威指南：从基础原理到高级实践

面向RAG与LLM的分块策略权威指南：从基础原理到高级实践
在现代人工智能系统架构中，当大型语言模型（LLMs）和向量数据库吸引着大部分目光时，一个更为基础的处理过程正在幕后默默工作——它最终决定了系统输出的质量、可靠性和相关性。 这个过程就是分块（Chunking）：在信息到达模型之前对其进行策略性分割的关键步骤。 作为RAG（检索增强生成）系统的"隐藏架构"，分块技术的优劣直接影响着LLM的理解、推理和回答能力，堪称AI应用的"智能基石"。
6/30/2025 4:15:00 AM
大模型之路
RAG系列：切分优化 - 基于句子余弦距离的语义切分

RAG系列：切分优化 - 基于句子余弦距离的语义切分
引言传统的文档切分方法通常采用基于特定字符和固定长度的切分策略，这种方法虽然实现简单，但在实际应用中容易割裂完整的语义单元，导致后续的信息检索与理解受到影响。 相比之下，一种更智能的切分方法是基于句子余弦距离的语义切分。 它不再依据特定字符和固定长度进行机械切分，而是对每个句子进行 embedding，以此来计算相邻句子的余弦距离，再通过算法算出一个相对合理的切分点（某个距离值），最后将不大于该阈值的相邻句子聚合在一起作为一个文档块，从而实现文档语义切分。
6/24/2025 9:51:10 AM
燃哥讲AI
RAG系列：解析优化 - 使用 Doc2X 将 PDF 高效转换为 Markdown

RAG系列：解析优化 - 使用 Doc2X 将 PDF 高效转换为 Markdown
引言在构建高质量的企业级的智能问答系统的过程中，如何高效精准地处理企业已有的海量文档是大部分开发者亟待解决的核心痛点。 有了高效精准的文档解析能力，才能够构建高质量的知识库和高效的信息检索系统，这样 LLM 才能给用户更准确更全面的回答。 在RAG系列（七）：解析优化 - 不同文件类型统一转换成Markdown中我们介绍了一款开源的文档解析工具 - MinerU，今天再给大家介绍一款优秀强大的文档解析产品 - Doc2X[1]。
6/23/2025 9:21:53 AM
燃哥讲AI
百度飞桨发布文档解析利器PP-StructureV3：PDF秒变Markdown文件

百度飞桨发布文档解析利器PP-StructureV3：PDF秒变Markdown文件
近日，随着大模型与RAG技术的迅猛发展，结构化数据在智能系统中的价值愈发凸显。 在此背景下，如何将文档图像、PDF等非结构化数据精准转换为结构化数据，成为行业亟待攻克的关键难题。 针对此现状，飞桨团队凭借深厚的技术积累和对用户需求的深刻洞察，推出新一代文档解析工具——PP-StructureV3，为解决复杂文档解析难题提供了创新方案。
6/18/2025 9:01:24 AM
AI在线
鹅厂实习生血泪贴：Agent/RAG 黑科技，真相竟是这样！

鹅厂实习生血泪贴：Agent/RAG 黑科技，真相竟是这样！
作者 | 33号实验室/knnwang被Agent/RAG吊打？ 你缺的不是智商，是这篇文章！ 亲历鹅厂IEG/WXG项目实战，大三菜鸟用血泪debug记录， 撕开AI基石真面目 → 黑科技本质 = ______！
6/17/2025 9:15:07 AM
腾讯技术工程
基于Dify构建客服智能体全流程实战，揭秘提升RAG效果关键

基于Dify构建客服智能体全流程实战，揭秘提升RAG效果关键
前言Dify是一款开源的大语言模型应用开发平台，旨在降低AI应用的开发门槛，帮助开发者和企业快速构建、部署及管理生成式AI应用。 Dify的知识库功能将RAG管线上的各环节可视化，提供了一套简单易用的用户界面来方便应用构建者管理个人或者团队的知识库，并能够快速集成至 AI 应用中。 为了达到最好的RAG检索效果，需要选择正确的分段设置。
6/17/2025 1:00:00 AM
AI大模型应用开发