基准测试
基准测试是给大模型出题打分的标准考卷:同一套题、同一套判分规则,不同模型的分数才能放在同一把尺子下横着比。
专题介绍
基准测试是衡量大模型能力的标准考卷:同一套题目、同一套评分规则,让不同模型站在同一把尺子下比较。本专题讲清基准由什么构成、分数怎么算、常见基准覆盖哪些能力,以及读榜单时为什么要先看口径再看名次,不被单一总分带偏。
基准测试是给大模型出题打分的标准考卷:同一套题、同一套判分规则,不同模型的分数才能放在同一把尺子下横着比。
基准测试是衡量大模型能力的标准考卷:同一套题目、同一套评分规则,让不同模型站在同一把尺子下比较。本专题讲清基准由什么构成、分数怎么算、常见基准覆盖哪些能力,以及读榜单时为什么要先看口径再看名次,不被单一总分带偏。