搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「分块策略」找到 69 条内容
按专题浏览 →匹配标题与标签:RAG 分块策略选型 按完整性与检索精度权衡 RAG chunking,补充适用边界与工程取舍 文档处理 京东 RAG 分块策略选型 RAG 文本分块策略怎么选?完整性与检索精度权衡 RAG 文本分块 chunking 策略 上下文完整性 京东
匹配题目:在构建基于RAG的系统时,你是如何设计文本分块策略的?请说明分块的粒度选择、重叠处理以及向向量数据库写入数据的具体流程。
匹配正文:答案要点 分块策略类型(固定长度、滑动窗口、语义分块等)及适用场景 分块大小的权衡(粒度vs语义完整性) 边界处理策略(句子/段落保持) 实际工程中的考量因素(计算成本、检索效果、下游任务) 百度场景下的特殊优化(中文分词、长文档处理) 核心分块策略 1. 固定长度分块 按token数或字符数硬切分(如512 tokens) 优点:简单、对齐向量索引、便于批处理 缺点:可能切断语义,边界信息丢失 2. 滑动窗口分块 把零重叠、短窗口和较长窗口作为候选,用同一评测集比较边界证据…
学习内容与项目面试,在同一条路上。