搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「A/B测试」找到 91 条内容
按专题浏览 →匹配正文:…标注或合成评测集 生成 忠实度、答案相关性 LLM-as-Judge(GPT-4/Claude) 端到端 用户满意度、任务完成率 A/B测试、人工评估 持续优化:Bad case分析驱动,定期更新知识库,监控数据漂移
匹配正文:…存:用版本号标记三元组,查询时指定版本或默认最新 快照隔离:写操作创建新快照,读操作指向固定版本 回滚能力:保留历史版本用于追溯和A/B测试 实时性与一致性挑战 挑战 应对策略 更新延迟 区分热数据(秒级同步)与冷数据(小时级批量) 分布式冲突 向量时钟或Lamport时钟确定偏序关系,人工仲裁兜底 语义漂移 实体消歧模块检测同一指称变化,触发子图重链接 事务边界 图数据库(Neo4j/Nebula)的ACID保证,或采用Saga模式补偿 关键取舍:强一致性牺牲可用性(如两阶…
匹配正文:…接管、投诉/错误副作用、延迟与成本。 满意度可能受界面和等待时间影响,不能单独归因给 Prompt。参与调参的样本不能继续充当独立测试集。 5. 版本与发布 每次修改记录问题样本、假设和差异;先离线回归,再影子或小流量灰度。A/B 测试定义随机化单位、样本量、主指标、护栏和停止条件,避免同一用户同时看到互相污染的版本。上线保留 Prompt、模型与工具版本,达到错误或成本阈值即可回滚。 系统 Prompt 优先级高并不保证模型永远遵守,更不构成权限边界。可靠 Prompt 工…
按学习路线查看教程、项目和面试题。