搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「知识库」找到 329 条内容
按专题浏览 →匹配正文:答案要点 离线知识库构建流程(文档解析、分块、向量化、索引存储) 在线检索生成流程(查询改写、向量检索、重排序、上下文拼接、LLM生成) 关键设计决策(分块策略、检索top-k数量、上下文长度控制) 系统优化点(混合检索、缓存机制、多路召回) 一、整体架构:离线+在线双链路 ┌─────────────────┐ ┌─────────────────┐ │ 离线知识库构建 │ │ 在线检索生成 │ │ (Index Pipeline)│ │ (Query Pipeline)│…
匹配正文:…整体架构 用户Query → 查询理解 → 混合检索 → 重排序 → 上下文组装 → 领域生成 → 后处理 → 输出 ↓ ↑ 离线知识库构建(文档解析→分块→向量化→索引) 一、数据预处理(以法律场景为例) 文档解析层 多格式支持:PDF/OCR识别表格、Word修订痕迹处理、扫描件版式还原 结构化抽取:用LayoutLM或专用模型提取条款层级(章-节-条-款)、案件要素(案号、当事人、判决结果) 质量与标准化 领域术语对齐:建立法条同义词表(如"违约金"="滞纳金"需区分场…
匹配正文:…数据流转的完整链路 RAG两阶段架构核心模块与数据流转 第一阶段:离线索引(Indexing) 目标:将原始文档转化为可检索的向量知识库 模块 功能 输出 文档解析 处理PDF/Word/网页等多格式,提取结构化文本 原始文本 文档分块(Chunking) 按语义/固定长度/递归等方式切分,平衡粒度与上下文 文本块集合 Embedding编码 用BGE、M3E等模型将文本转为稠密向量 向量表示 向量存储 写入Milvus/Faiss/Elasticsearch等,构建索引 可…
按学习路线查看教程、项目和面试题。