搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「BM25 参数 k1/b 调优」找到 5 条内容
按专题浏览 →匹配标题与标签:BM25 参数 k1/b 调优 BM25 参数 k1、b 的含义和调参,补充适用边界与工程取舍 检索 美团 BM25长度归一化 BM25 参数 k1/b 调优 BM25 的 k1 和 b 怎么调?参数含义与实战 BM25 算法原理 BM25 公式 BM25 vs TF-IDF 美团
匹配正文:….5}{n(q_i) + 0.5} + 1\right) 关键参数: k1(通常1.2-2.0):控制词频饱和速度,越大饱和越慢 b(通常0.75):控制文档长度惩罚强度,0表示不惩罚,1表示完全比例惩罚 与TF-IDF对比 维度 TF-IDF BM25 词频处理 线性增长 非线性饱和(上限k1+1) 文档长度 无显式处理 显式归一化 IDF 简单对数 平滑处理(+0.5避免负值) 长文档友好性 差 好 参数调优 无 有k1/b可调 RAG中的应用场景 混合检索架构:BM25…
匹配正文:三种检索方法的核心原理 BM25(稀疏检索) 基于词频(TF)和逆文档频率(IDF)计算相关性得分 公式核心:score = Σ IDF(q_i) * (f(q_i)*(k1+1)) / (f(q_i)+k1*(1-b+b*dl/avgdl)) 本质是精确关键词匹配,对高频词有惩罚,对文档长度做归一化 向量检索(稠密检索) 用BERT等编码器将查询和文档映射到同一语义空间 通过余弦相似度或点积计算语义相关性 能捕捉同义词、上下位词等语义关系,如"苹果手机"≈"iPhone" …
学习内容与项目面试,在同一条路上。