搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「PDF 文档解析」找到 34 条内容
按专题浏览 →匹配正文:答案要点 离线知识库构建流程(文档解析、分块、向量化、索引存储) 在线检索流程(Query改写、向量检索、重排序) 生成阶段(上下文拼接、Prompt工程、答案生成) 各环节的关键技术选型与权衡(分块策略、Embedding模型、检索算法) RAG完整流程分为离线构建和在线推理两大阶段: 一、离线知识库构建 文档解析:处理PDF/Word/网页等多格式,提取干净文本(注意表格、图片OCR) 文本分块(Chunking):按固定长度、语义段落或递归方式切分;块大小通常256-5…
匹配正文:答案要点 离线知识库构建(文档解析、分块、向量化) 检索阶段的双路召回策略(向量+关键词) 重排序优化 上下文拼接与提示模板设计 生成阶段的引用溯源与幻觉控制 RAG完整工作流程 一、离线知识库构建(预处理) 文档解析:处理PDF/Word/网页等多格式,提取结构化文本 知识分块(Chunking):按语义/固定长度/递归分割,通常512-1024 token,块间保留重叠防止断句 向量化:用Embedding模型(如BGE、M3E)将文本转为稠密向量 索引存储:写入向量数据…
匹配正文:…召回与精排的两阶段设计 上下文窗口优化与生成环节的关键技术 RAG的核心流程可分为离线构建和在线服务两个阶段: 一、离线文档处理 文档解析:处理PDF/Word/网页等多格式,提取结构化文本(表格、标题层级保留) 分块(Chunking):关键设计点 固定长度(如512 token)简单但易截断语义 按段落或语义分块;滑动窗口只作为待测候选,由同一评测集决定是否启用及长度 特殊处理:代码按函数分、论文按章节分 元数据标注:来源、时间、类别等标签,用于过滤和溯源 二、向量索引构…
学习内容与项目面试,在同一条路上。