# LLM后训练技术：SFT、DPO、GRPO进阶对比

- 来源：向阳乔木 (@vista8)
- 发布时间：2026-05-15 21:07
- AIHOT 分数：36
- AIHOT 链接：https://aihot.virxact.com/items/cmp6ycr9y05x4slnz1owsn2ck
- 原文链接：https://x.com/vista8/status/2055273954353537527

## AI 摘要

推文简要对比了大语言模型（LLM）的三种后训练技术。SFT旨在让模型学会遵循指令。DPO则进一步优化模型输出，使其更符合人类偏好。GRPO作为后续步骤，专注于激发和提升模型的推理与思考能力。这三种技术构成了一个从基础指令遵循到高级认知能力开发的渐进式训练路径。

## 正文

大语言模型（LLM）后训练技术：SFT、DPO、GRRO的简单对比。

SFT（让模型学会"听话"）
↓
DPO（让模型输出更符合人类偏好）
↓
GRPO（进一步激发推理/思考能力）

#一起学习