搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「Embedding 模型」找到 516 条内容
按专题浏览 →匹配正文:…询集上比较证据完整性与成本。所谓语义或 Agentic 分块也要经过同一评测,不能因为使用 LLM 就默认更好。 二、检索器 使用向量检索、BM25、结构化过滤或多路召回生成候选。 对不同分数做校准、RRF 融合或独立重排,避免直接相加不可比的原始分数。 用 Cross-Encoder 或领域 Reranker 对候选精排,并保留召回器、索引和模型版本。 查询改写、HyDE 和子查询分解只在离线与端到端评测证明有效时启用,因为它们也可能引入偏移。 三、生成器集成 候选去重、裁…
匹配正文:…PQ 的存储由子量化器数量与每个编码位数决定,不能把“32 位降到 8 位”等同于任意 PQ 配置的固定四分之一总内存。 关键词与向量检索覆盖的错误类型不同。专有名词、编号和精确短语常能从关键词召回获益,语义改写可能从向量召回获益;是否做混合检索要按切片比较两路的独立贡献。 3. 融合与重排 融合先处理不同结果集的重复文档与稳定文档 ID。RRF 使用名次而不是原始分数,仍有 rank constant、候选深度和可选权重;分数归一化/加权则保留分数差异,但对分数尺度敏感。应…
匹配正文:…构:两阶段流水线 第一阶段:离线索引构建 文档切分:按语义/固定长度分块,控制chunk大小(通常256-512 tokens) Embedding编码:用BGE、M3E等模型将文本转为稠密向量 向量存储:写入Milvus/Faiss/Elasticsearch,构建HNSW索引加速检索 第二阶段:在线检索生成 模块 职责 关键技术 检索器 从知识库召回相关文档 稠密检索(向量相似度)+ 稀疏检索(BM25)混合 重排序器 精排Top-K结果 Cross-Encoder(如b…
按学习路线查看教程、项目和面试题。