页面加载中…
搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「去重策略」找到 3 条内容
按专题浏览 →匹配标题与标签:训练数据怎么采集和预处理? 大规模语言模型数据来源、去重、过滤、分词等关键步骤 模型训练 数据工程 数据清洗 去重策略 数据配比 预训练数据 2026真题 LLM 训练数据 数据预处理 数据去重 数据过滤 大模型训练与微调 百度
匹配正文:…要点 明确区分系统指令、检索上下文与用户查询三部分结构 设计防幻觉机制(如要求基于引用回答、不确定时声明) 处理长上下文截断与冗余去重策略 多片段排序与相关性加权提示 输出格式约束(如带引用标记的结构化输出) 核心设计原则 RAG的prompt设计关键是清晰隔离信息源,让模型明确区分"已知事实"和"需要回答的问题"。 推荐模板结构 【系统指令】 你是一个基于检索文档回答问题的助手。严格遵循: 1. 仅使用提供的参考文档作答,禁止依赖预训练知识 2. 若文档信息不足,明确说明"…
匹配正文:…制(Repetition Penalty)的实现 多样性重排序(MMR、DPP等)的应用 多目标优化在训练阶段的引入 后处理过滤与去重策略 生成式推荐控制多样性的核心思路是**"解码干预 + 后处理重排 + 训练优化"三层架构**: 一、解码阶段:采样策略调参 温度采样(Temperature):T>1增加随机性,T<1更确定;推荐场景通常T=0.7~1.2试探 Top-p(Nucleus)+ Top-k:限制候选token范围,避免低概率尾部采样带来的噪声 重复惩罚(Rep…
学习内容与项目面试,在同一条路上。