数据污染
评测题混进大模型训练数据,榜单分数随之虚高。看清数据污染从哪来、怎么发现,读排行榜时才知道分数有几分可信。
专题介绍
数据污染指评测用的题目和答案提前进入了大模型的训练数据,模型答的不是能力,而是记忆。本专题汇总数据污染的成因、检测方法和真实案例,帮你看懂榜单分数虚高的来龙去脉,以及选模型时该信哪些评测。
评测题混进大模型训练数据,榜单分数随之虚高。看清数据污染从哪来、怎么发现,读排行榜时才知道分数有几分可信。
数据污染指评测用的题目和答案提前进入了大模型的训练数据,模型答的不是能力,而是记忆。本专题汇总数据污染的成因、检测方法和真实案例,帮你看懂榜单分数虚高的来龙去脉,以及选模型时该信哪些评测。