搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「指代消解」找到 30 条内容
按专题浏览 →匹配正文:…F/Word/网页用专用解析器(如MinerU、Marker),保留表格结构和层级标题 领域术语标准化:建立专业词表,做实体链接和指代消解 质量过滤:去重、低质量页面过滤、敏感信息脱敏 智能分块策略 语义分块:用领域微调的小模型做句子边界识别,非固定长度 结构感知:按章节/条款切分,保留父子层级关系用于后续递归检索 多粒度冗余:同一内容生成256/512/1024三种chunk,适配不同查询深度 二、检索优化层 多路召回 召回通道 适用场景 实现方式 向量检索 语义相关 领域…
匹配正文:… 用户Query → 查询改写 → 多路检索 → 重排序 → 上下文组装 → LLM生成 环节 说明 查询改写 扩展同义词、纠错、指代消解(如"它"→具体实体) 多路检索 向量检索(语义匹配)+ 关键词检索(精确匹配)+ 可能的知识图谱召回 重排序(Rerank) 用Cross-Encoder(如BGE-Reranker)精排Top-K,提升相关性 上下文组装 按相关性排序拼接chunk,控制总长度(通常占LLM上下文30%-50%) LLM生成 构造Prompt:"基于以下…
匹配正文:…扩展query Step-back 抽象出高层概念再检索 子查询分解 复杂query拆成多个子问题 历史上下文补全 多轮对话中补全指代消解 四、进阶优化 重排序(Rerank):Cross-encoder精排,如ColBERT、BGE-Reranker 迭代检索:根据中间结果动态调整query(IRCOT) 元数据过滤:先结构化过滤,再向量检索,减少搜索空间 一句话总结:召回链路优化 = 多路召回扩覆盖 + 索引结构保效率 + 查询重写对齐语义 + 重排序保精准。 学习建议 …
学习内容与项目面试,在同一条路上。