跳到正文
原文
Hugging Face Blog·· 2023-06-12AI 评分42

Hugging Face 研究:基础模型能否像人类一样标注数据?

Can foundation models label data like humans?

AI 导读

Hugging Face 用 327 条提示词对比了 Koala 13b、Vicuna 13b、OpenAssistant 12b 和 Dolly 12b 四个开源指令模型,让 Scale AI 人类标注员按 1-8 分 Likert 量表打分并生成 Elo 排名,Vicuna-13B 以 1140 分居首,Dolly-12B 以 802 分垫底。

来源:Hugging Face Blog · huggingface.co