全部文章标签

监督微调

用人工写好的问答示例继续训练大模型,让它学会按指令回答:讲清数据、训练目标与它在预训练和对齐之间的位置。

专题介绍

监督微调拿人工写好的指令与回答示例继续训练已预训练的大模型,教它一问一答的形态、任务做法与输出格式。本专题拆解数据、训练目标与评估方法,讲清它与预训练、通用微调、RLHF 的区别,以及数据质量为何比数量更重要。

监督微调是什么意思?大模型学会按指令回答的关键一步

监督微调是什么意思?大模型学会按指令回答的关键一步

AI百科
AI导航 1 次阅读
RLHF 是什么?大模型靠人类反馈学会听话守规矩的训练方法

RLHF 是什么?大模型靠人类反馈学会听话守规矩的训练方法

AI百科
AI导航 10 次阅读