搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「RAG 延迟」找到 334 条内容
按专题浏览 →匹配正文:… 它可能补错实体、时间和结论,也可能在资料根本没有答案时生成一段看似完整的说明。 如果系统把假设答案直接展示给用户,就已经越过了 RAG 的证据边界。 即使只用它做检索,也存在带偏风险。错误假设会把向量推向错误主题,随后召回一批“支持”假设的相似文本。 更稳妥的方式是把 HyDE 当成一条可撤销的检索路线。 原 Query 仍然保留,假设文本单独记录。两路可以并行召回,再根据稳定 ID 合并。若 HyDE 路线没有带回可核验证据,最终回答不能引用假设文本补空白。 精确编号、产…
匹配正文:先分清:Embedding 和 Rerank 各自对什么结果负责 RAG 的检索链路可以先想成一场两阶段筛选。 第一阶段面对的是整座知识库。系统把用户问题编码成向量,再从大量文档片段里快速找出一小批候选。Embedding 模型的任务不是直接判断最终答案,而是把可能包含答案的片段尽量送进候选集。它如果漏掉了正确证据,后面的模型再聪明也无从补救。 第二阶段只看这批候选。Rerank 模型把问题和每个候选片段放在一起判断相关性,然后重新排列顺序。它更擅长处理“关键词很像,但并没有…
…断项。 指标可以分成四组:正确记忆的召回率、返回记忆的精确率、过期或被替代记忆的误用率、删除后的残留召回率。再加上跨用户泄漏、检索延迟、上下文 Token 和写入成本。平均值之外,要单独看高风险样本。 记忆模块最容易漏掉的验收 一条可复现的记忆 Trace 应该记录什么 记忆答错时,如果日志只有最终 Prompt,很难知道错误在哪一步。最小 Trace 可以记录:请求所属作用域、短期窗口选中了哪些消息、长期检索返回了哪些 memory_id、过滤掉哪些候选及原因、最终注入哪些…
学习内容与项目面试,在同一条路上。