搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「RAG Re-ranking」找到 310 条内容
按专题浏览 →匹配正文:…叠、短窗口和较长窗口作为候选方案,在同一评测集上回放 作用:缓解答案跨越切分边界时的信息丢失 代价:重复索引会放大存储、召回冗余和重排成本 实现:记录每个chunk在原文中的起止位置与父级结构,便于合并、去重和溯源 向量化写入流程 原始文档 → 清洗(去噪/格式标准化)→ 结构化解析(提取标题/表格/代码块) ↓ 产生多组分块候选 → 在固定问题集上评测 → 生成chunk元数据(来源、位置、类型) ↓ Embedding模型编码 → 按实际显存、限流和失败重试能力确定批量大…
匹配口述回答:…验证是否补回边界证据。边界对齐很重要,一定要在句号、换行处切,别在句子中间截断。还有元数据要保留,比如来源位置、标题,这对后续[[重排序]]和答案溯源很有帮助。 最后说落地风险。一个常见失败场景是,块大小和LLM上下文窗口不匹配。比如LLM支持8K上下文,你把块切成2K,然后检索时一次塞4个块,结果超出窗口长度,模型直接截断。所以上线前一定要验证检索召回率和端到端问答效果,不能只看分块本身。 我其实更倾向把分块看成整个[[RAG]]系统的一部分,跟检索、重排一起调优。比如分块…
匹配正文:…界、父子关系和原文位置保障语义完整性 所有参数都要在同一业务评测集上比较,不能把经验范围当结论 核心思路 文档分段会同时影响召回、重排、生成和引用。真正要优化的不是某个chunk_size,而是让问题能召回完整证据,同时控制噪声、延迟和存储成本。 分块长度的权衡 候选策略 更适合观察的场景 主要风险 较短分块 局部事实、错误码、条款定位 上下文断裂、重复召回 较长分块 总结、比较、跨句推理 无关内容增多、重排成本上升 结构化或动态分块 文档类型混合、章节层级明确 实现与维护复…
学习内容与项目面试,在同一条路上。