跳到正文
原文
Hugging Face·· 2026-02-04精选AI 评分69

Hugging Face 推出 Community Evals 去中心化评测功能

Community Evals: Because we're done trusting black-box leaderboards over the community

AI 导读

Hugging Face 在 Hub 上线 Community Evals 功能,支持将数据集仓库注册为基准排行榜并由模型仓库直接存储评测分数。社区用户可通过 PR 为任意模型提交评测记录并展示验证徽章,基准基于 Inspect AI 格式的 eval.yaml 规范定义,首批已支持 MMLU-Pro、GPQA 和 HLE。

推荐理由

原文展示了去中心化评测与规范定义的落地机制,读者可以借此了解开源模型评测数据的提交与核验流程。

来源:Hugging Face · huggingface.co