搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「Recall@k 指标」找到 90 条内容
按专题浏览 →匹配口述回答:…:重排模型如果不做领域微调,打分可能不靠谱,比如把非权威来源排前面。所以上线前我会用一批标注数据做微调,然后监控[[RAGAS]]指标里的context precision。 生成融合阶段,我最关注的是引用锚定和校验。检索回来的片段不能全塞给大模型,得做上下文压缩,比如用LLM摘要控制token。同时强制生成时标注来源片段ID,法律场景必须输出“依据《XX法》第X条”,这样结果可追溯。后处理加一个领域规则引擎,比如医疗场景查药物禁忌,如果生成内容冲突就拦截。说白了,生成环节如…
匹配口述回答:…时拒绝回答。 最后说挑战。检索质量决定 RAG 的天花板,如果第一步就召不准,后面再好的模型也白搭。所以我会优先做检索评测,盯着 Recall@K 和 MRR,达标了再优化生成。另一个是[[幻觉]]问题,模型可能不看检索内容瞎编,我会在 prompt 里强制要求引用原文,甚至用 [[Faithfulness]] 指标做自动检测。我的核心取舍是:宁可不回答,也不要给错答案。 所以我会把 RAG 看成一套检索系统加上一个生成接口,重心放在检索和过滤上,而不是一味调 prompt。…
匹配口述回答:…文处理:去重过滤与动态窗口 生成阶段:prompt约束与幻觉抑制 系统评估与风险意识 约4分钟 RAG评估要分离检索和生成,分别用Recall@K和F1/人工评分,但更关键的是在线效果指标。 这个延伸点会引向面试官追问:如何设计离线评估集?检索和生成哪个更难评估?有没有遇到过离线好在线差的情况?
学习内容与项目面试,在同一条路上。