跳到正文
原文
Hugging Face Blog·· 2023-06-23AI 评分56

Hugging Face 解析 Open LLM Leaderboard 上 MMLU 分数差异的来源

What's going on with the Open LLM Leaderboard?

AI 导读

Hugging Face 团队调查 Open LLM Leaderboard 上 LLaMA 的 MMLU 分数低于论文报告值的原因,发现同一 MMLU 数据集存在 Original、HELM 和 EleutherAI Harness 三种实现。

来源:Hugging Face Blog · huggingface.co