搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「向量检索 Embedding」找到 256 条内容
按专题浏览 →匹配正文:…更新滞后,新知识无法即时生效 结构化缺失 表格、图谱等非文本知识利用不足 二、改进思路 1. 检索层优化 混合检索:BM25 + 向量检索 + 稀疏编码(如SPLADE)互补 查询改写:HyDE(假设文档嵌入)、Query2Doc扩展语义 重排序精排:Cross-encoder精筛Top-K,过滤噪声 2. 生成层优化 上下文压缩:RAG-Fusion多查询聚合、LongLLMLingua关键句提取 引用生成:训练模型输出[source_id],实现可验证回答 Self-RA…
匹配正文:…架构:两阶段流水线 索引阶段(离线) 文档处理:按语义/固定长度切分chunk,控制256-512 tokens,保留上下文重叠 向量化:用Embedding模型(如BGE、M3E、OpenAI text-embedding-3)编码为稠密向量 存储:写入向量数据库(Milvus、Faiss、Elasticsearch),可搭配稀疏索引(BM25)做混合检索 查询阶段(在线) 用户Query → 查询改写(可选)→ 向量检索(Top-K)→ 重排序(可选)→ 上下文拼接 → …
…检索能把两类结果都捞上来。这里有个坑:如果query和文档的语义gap特别大,比如用户说‘订单异常’但文档里写的是‘交易失败’,纯向量检索可能漏掉。这时候我会用查询改写,比如HyDE先生成一个假设文档再检索,或者做query expansion。 接下来是[[向量数据库]]选型。索引算法上,HNSW是图索引,IVF是聚类倒排索引,不能按内存型/磁盘型二分;编码、落盘、召回和延迟取决于具体变体及参数。我会根据数据规模和延迟要求选。量化压缩也很关键,从FP32压到INT8能省不少…
学习内容与项目面试,在同一条路上。