跳到正文
原文
Hugging Face·· 2024-01-12AI 评分57

如何搭建自定义 Hugging Face 排行榜:以 Vectara 幻觉评测榜单为例

A guide to setting up your own Hugging Face leaderboard: an end-to-end example with Vectara's hallucination leaderboard

AI 导读

Vectara 发布了基于 Hugging Face 开源排行榜模板搭建自定义评测榜单的端到端指南,并以此上线了全新的 HHEM 幻觉评测排行榜。该方案通过 requests 与 results 两个数据集管理评测请求与测试结果,结合自定义的摘要生成和 HHEM 评估模型实现自动化打分。完整实现代码已开源,支持直接部署为 Hugging Face Space。

来源:Hugging Face · huggingface.co