搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「稠密检索」找到 33 条内容
按专题浏览 →匹配正文:…/ (f(q_i)+k1*(1-b+b*dl/avgdl)) 本质是精确关键词匹配,对高频词有惩罚,对文档长度做归一化 向量检索(稠密检索) 用BERT等编码器将查询和文档映射到同一语义空间 通过余弦相似度或点积计算语义相关性 能捕捉同义词、上下位词等语义关系,如"苹果手机"≈"iPhone" 混合检索 并行执行BM25和向量检索,结果融合(常用RRF倒数排序融合或加权求和) RRF公式:score = Σ 1/(k + rank_i),k通常取60,对排名敏感而非绝对分数 …
匹配正文:一、检索器选择:多路召回 稠密检索(Dense) 基于Embedding:DPR、Contriever,适合语义匹配 优势:跨表述理解;劣势:对罕见实体、精确匹配弱 稀疏检索(Sparse) BM25、TF-IDF、SPLADE,适合关键词精确匹配 优势:零样本、可解释;劣势:语义鸿沟 实践策略:双路召回 + 线性加权或Learned Fusion(如RRF倒数排序融合) 二、索引结构优化 方法 核心思想 适用场景 HNSW 图索引,贪心导航 百万级,高召回要求 IVF 聚类…
… 相似度度量:BM25 score(基于TF-IDF的改进版) 特点:对高频词降权、对文档长度归一化,检索速度快 Dense检索(稠密检索) 原理:将查询和文档编码为低维稠密向量(通常768/1024维),通过向量空间中的距离衡量语义相关性 使用双塔模型(如BGE、GTE)分别编码query和doc 相似度度量:余弦相似度 或 点积(dot product) score = cos_sim(E_query, E_doc) = (E_q · E_d) / (||E_q|| · …
学习内容与项目面试,在同一条路上。