搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「RAG Chunking 策略」找到 30 条内容
按专题浏览 →匹配正文:…g模型和向量数据库的核心作用 知道RAG的典型痛点(检索不准、上下文过长)及优化方向 能提及高级变体如GraphRAG、Self-RAG等 RAG核心定位 RAG = 检索(Retrieval) + 生成(Generation),用外部知识库动态增强LLM,解决知识时效性和幻觉问题,无需重新训练模型。 三阶段实现流程 1. 离线知识库构建 文档解析:PDF/Word/网页 → 文本块(Chunking,控制256-512 tokens) 向量化:Embedding模型(如BG…
匹配题目:在RAG系统中,针对医疗、法律等专业领域文档,应如何进行有效的文本切块(Chunking)?常见的切块策略及其优缺点是什么?
匹配正文:…算成本高 文档结构感知(Document-specific):利用标题、段落等天然边界,适合结构化文档 重叠窗口(Overlap)策略缓解边界信息丢失问题 文本分块是RAG系统的关键预处理环节,直接影响检索质量和生成效果。常用策略可分为以下几类: 1. 固定长度分块(Fixed-size Chunking) 按固定token数或字符数切分,具体长度作为候选变量 优点:实现极简,便于批量处理,向量化效率高 缺点:硬截断可能切断句子语义,边界信息易丢失 适用:快速原型、对语义连贯…
学习内容与项目面试,在同一条路上。