Hugging Face·· 2026-02-04精选AI 评分69
Hugging Face 推出 Community Evals 去中心化评测功能
Community Evals: Because we're done trusting black-box leaderboards over the community
AI 导读
Hugging Face 在 Hub 上线 Community Evals 功能,支持将数据集仓库注册为基准排行榜并由模型仓库直接存储评测分数。社区用户可通过 PR 为任意模型提交评测记录并展示验证徽章,基准基于 Inspect AI 格式的 eval.yaml 规范定义,首批已支持 MMLU-Pro、GPQA 和 HLE。
推荐理由
原文展示了去中心化评测与规范定义的落地机制,读者可以借此了解开源模型评测数据的提交与核验流程。
来源:Hugging Face · huggingface.co