跳到正文
原文
Hugging Face Blog·· 2024-10-01AI 评分34

BenCzechMark:评测你的 LLM 能否理解捷克语

🇨🇿 BenCzechMark - Can your LLM Understand Czech?

AI 导读

Hugging Face 推出 BenCzechMark,这是首个也是目前最全面的捷克语大语言模型评测套件,包含覆盖 9 个类别的 50 个任务,其中 90% 为原生非翻译内容,涵盖阅读理解、事实知识、语法、语言建模、数学推理等维度。评测同时配套上线 BenCzechMark 排行榜,收录了超过 25 个不同规模的开源模型,并使用 Acc、EM、AUROC 和词级 Ppl 四类指标进行评分。

来源:Hugging Face Blog · huggingface.co