页面加载中…
搜索中文正文和常见中英文技术词，按教程、项目、面试题筛选。
「人工标注」找到 66 条内容
按专题浏览 →匹配正文：…行→观察→评估→生成改进建议→重新尝试 多轮自我对话：用另一个"批评者"角色审视主Agent的输出 成功/失败信号：通过环境反馈或人工标注触发反思 关键作用：打破单次推理的局限，实现错误自修复和策略迭代 Memory（记忆）机制 分层架构： 层级 功能 存储形式 工作记忆 当前对话上下文、任务状态 上下文窗口 Episodic记忆 历史经验、具体案例 Vector DB（如Milvus/Pinecone） Semantic记忆 领域知识、通用规则 知识图谱/结构化存储 技术要…
匹配正文：…明截断K。 NDCG：考虑位置加权的排序质量，关注"排好" 命中率（Hit Rate）：查询是否命中至少一个相关文档 评估方式 需人工标注query-doc的相关性标签（二元或分级） Embedding/LLM可辅助产生候选标注，但它们有噪声和评估循环风险；应以独立人工复核集校准，不能直接把同一检索器的相似度当黄金相关性。 二、生成质量评估 忠实性（Faithfulness） 答案是否基于检索内容，有无幻觉 常用方法：NLI模型判断陈述与文档的蕴含关系 答案相关性（Answe…
…case级问题 对比BM25、向量检索、混合检索的结果差异 数据集类型 类型 用途 构建要点 开发验证集 迭代调优 覆盖高频场景，人工标注黄金答案 对抗测试集 压力测试 故意构造易混淆、边界、多跳推理case 线上回流数据 持续监控 用户反馈（点赞/点踩/未采纳）、A/B测试日志 数据质量控制方法 采集阶段 源文档准入：权威来源优先，设定时效性阈值（如知识库只保留2年内文档） 格式标准化：统一PDF/网页解析，处理表格、代码块等特殊结构 处理阶段 切片策略：按语义边界切分（标…
学习内容与项目面试，在同一条路上。