索引 / 标签

#偏好优化

共 2 篇

  1. Ch11 模型微调

    对比-DPOvsRLHF

    概述 DPO(Direct Preference Optimization)和 RLHF(Reinforcement Learning from Human Feedback)都是将人类偏好注

    约 2 分钟552 字
  2. Ch11 模型微调

    偏好对齐:DPO vs GRPO(深挖)

    Ch11 模型微调 介绍了 SFT(监督微调,给 AI 看标准答案让它学着模仿)教 AI "怎么做",DPO(直接偏好优化)教 AI "什么样的答案更好"。这篇深入两种偏好对齐方法的区别。

    约 4 分钟1,124 字