搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「BERT 排序」找到 30 条内容
按专题浏览 →匹配正文:…中的最近邻搜索,把"找相似文本"转化为"找相近向量"。 三个关键环节 1. 向量化(Representation) 用预训练模型(BERT、Sentence-BERT、OpenAI API等)将文本编码为稠密向量 关键特性:语义相近的文本在向量空间中距离近("king - man + woman ≈ queen") 维度通常 384/768/1536 维,需根据业务精度和性能权衡 2. 索引构建(Indexing) 暴力搜索O(N)不可接受,需近似最近邻(ANN)索引: 算法…
匹配正文:…采用分片、量化、缓存等工程优化 RAG中需平衡召回率与延迟 向量召回核心流程 1. 向量嵌入(Embedding) 用预训练模型(BERT、Sentence-BERT、OpenAI Embedding等)将文本编码为稠密向量 关键:语义相似的文本在向量空间中距离相近 维度通常 256-1536 维,需权衡表达能力与存储成本 2. 相似度计算 余弦相似度:衡量向量夹角,归一化后等价于内积 欧氏距离:适合语义空间均匀分布的场景 实际系统常做向量归一化,将相似度搜索转为最近邻搜索 …
匹配正文:…任务泛化,UIE探索统一信息抽取。它们证明相关设计在各自实验中有效,但不能拼成GLUE、SuperGLUE或业务场景上的无条件胜负排序。 我会为目标任务建立同一切分和预算,比较判别基线、prompt基线和微调生成方案。指标除了准确率或span-F1,还要看格式有效率、校准、延迟、吞吐、单位成本和失败样本。结构化输出应使用相同后处理规则,避免一方获得额外人工修正。 如果生成方案只在复杂长尾上有优势,可以用判别模型处理清晰样本、生成模型处理开放或不确定样本;如果专用模型已满足质量…
学习内容与项目面试,在同一条路上。