跳到正文
原文
Hugging Face Blog·· 2026-01-27AI 评分22

Alyah ⭐️:面向阿拉伯语 LLM 阿联酋方言能力的稳健评测基准

Alyah ⭐️: Toward Robust Evaluation of Emirati Dialect Capabilities in Arabic LLMs

AI 导读

Hugging Face 博客介绍阿联酋方言评测基准 Alyah,含 1,173 条由阿联酋母语者手工采集的样本,每题四选一。团队评测了 54 个语言模型(23 个基座、31 个指令微调),覆盖 Jais、Allam、Qwen、LLaMA、Fanar、AceGPT 等,基座模型中 google/gemma-3-27b-pt 以 74.68 准确率居首。

来源:Hugging Face Blog · huggingface.co