搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「RAG 文档切分」找到 48 条内容
按专题浏览 →匹配正文:…line) 步骤 功能 关键设计 文档解析 处理PDF/Word/网页等多格式 保留结构信息(标题层级、表格位置) 文本分块 将长文档切分为chunk 策略:固定长度/语义分块/递归分块;chunk size通常256-512 tokens 向量化 Embedding模型编码为稠密向量 选用领域适配的模型(如BGE、M3E);考虑稀疏向量(BM25)做混合 索引存储 写入向量数据库 Milvus/Pinecone/Elasticsearch;构建HNSW索引加速ANN检索 三…
匹配正文:答案要点 清晰描述RAG的两大核心阶段(检索+生成)及数据流向 说明索引构建的关键步骤(文档切分、向量化、存储) 列举至少2种检索策略(如混合检索、重排序)及适用场景 提及RAG的典型优化方向(查询改写、上下文压缩、多路召回) 能指出实现中的常见陷阱(如切分粒度、语义漂移) RAG核心架构:两阶段流水线 索引阶段(离线) 文档处理:按语义/固定长度切分chunk,控制256-512 tokens,保留上下文重叠 向量化:用Embedding模型(如BGE、M3E、OpenAI…
匹配正文:答案要点 RAG整体架构的三阶段流程(索引-检索-生成) 检索器的核心组件(Embedding模型、向量数据库、重排序) 生成器的Prompt工程与上下文融合策略 检索与生成的协同机制(检索结果如何注入生成) RAG的典型优化方向(查询改写、多路召回、Rerank) RAG典型架构:三阶段流水线 1. 索引阶段(离线) 文档切分:按语义/固定长度切分,控制chunk大小(通常256-512 tokens) Embedding编码:用BGE、M3E等模型将文本转为稠密向量 向量…
学习内容与项目面试,在同一条路上。