搜索中文正文和常见中英文技术词,按教程、项目、面试题筛选。
「LLM 区别」找到 204 条内容
按专题浏览 →匹配标题与标签:…ormer 归一化 2026真题 Layer Normalization 实现 NumPy LayerNorm 层归一化前向传播 大模型架构与原理 百度
匹配追问:ZeRO-3和Fully Sharded Data Parallel(FSDP)的核心区别是什么? DeepSpeed在千亿参数模型训练中遇到过哪些稳定性问题,如何解决? 如果显存足够,为什么有时仍选择ZeRO-2而非ZeRO-1? 场景切入 假设要在 8 张 80GB GPU 上微调一个 65B 模型,基础配置无法直接放入显存。你会怎样组合 ZeRO、混合精度、activation checkpointing、并行和 offload,并先核算哪些内存项? 层层追问 Deep…
匹配标题与标签:…E 扩散模型 梯度估计 生成模型 2026真题 Reparameterization Trick VAE 梯度传播 扩散模型训练 大模型训练与微调 百度
学习内容与项目面试,在同一条路上。