对齐:SFT、RLHF 与 DPO LLM 知识 · 深入 · 第 8 篇 更新于 2026-10-08 目录 指令微调(SFT) 偏好对齐 ⚠️ 示例笔记(验收用),替换真实知识内容时直接删除本文件。 指令微调(SFT) 用高质量指令数据做监督微调。 偏好对齐 RLHF 与更简的 DPO 路线对比。 ← 上一篇:预训练与微调 下一篇:推理优化与部署 →