Hugging Face Blog·· 2022-06-28精选AI 评分60
Hugging Face 发布 Evaluation on the Hub,可在 Hub 上免代码评测任意模型
Announcing Evaluation on the Hub
AI 导读
Hugging Face 推出 Evaluation on the Hub,由 AutoTrain 驱动,用户无需写代码即可在 Hub 上用任意数据集和指标评测任意模型。评测结果会以 Pull Request 形式写入模型卡元数据,并可在数据集页查看排行榜;官方已用该工具评测数百个模型并提交了 PR。工具支持三种场景:为任务找最佳模型、在新数据集上跑基线、以及用多个相关数据集评测自己的模型。
推荐理由
Hugging Face 把模型评测做成 Hub 上的一键流程,读者可据此了解免代码评测与结果回写模型卡的做法。
来源:Hugging Face Blog · huggingface.co