搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「检索 Embedding 评估」找到 264 条内容
按专题浏览 →匹配正文:答案要点 分模块阐述数据预处理(解析、分块、质量过滤)、检索层(多路召回、重排序)、生成层(上下文压缩、引用溯源)的设计 体现领域适配思路(领域术语表、专用Embedding) 提到评估闭环和持续优化机制 避免只讲基础RAG流程,要有工程化深度 一、数据预处理层 文档解析与清洗 多格式统一:PDF/Word/网页用专用解析器(如MinerU、Marker),保留表格结构和层级标题 领域术语标准化:建立专业词表,做实体链接和指代消解 质量过滤:去重、低质量页面过滤、敏感信息脱敏…
匹配正文:答案要点 完整描述RAG的5个核心环节(文档处理、向量化、检索、重排序、生成) 每个环节至少给出2个具体优化方法 体现对实际工程问题的理解(如召回率vs精确率权衡) 提及评估和迭代闭环 RAG系统可分为5个核心环节,每个环节的优化策略如下: 1. 文档预处理与分块 核心问题:分块粒度决定语义完整性和检索精度 优化策略: 语义分块:用BERT等模型识别主题边界,而非固定长度 层次结构:保留文档层级(标题-段落-句子),支持多粒度检索 元数据增强:添加时间、来源、类别等标签用于过…
…拼装,而是检索和生成的桥接,设计时要时刻想着它们怎么配合。 先说核心架构,就是检索器加生成器再加一个融合机制。用户query进来,检索器从知识库捞Top-K文档,拼成prompt喂给LLM生成答案。这里有个关键前提:证据漏召回会限制基于该证据集作答,但高召回不保证忠实生成;解析、权限、重排、上下文与生成都要分阶段评估。所以我会把重心放在检索优化上。 检索器优化,我一般分两条路走。一条是[[Dense Retrieval]],用[[Embedding]]做语义匹配,适合长尾qu…
学习内容与项目面试,在同一条路上。