热点事件历史事件
Qwen3.8 27B 英文单词加法基准测试
1 篇报道1 个报道来源15 天前更新
先了解这件事
AI 综述
2026年10月5日，Simon Willison 发布了一项针对本地 Qwen3.8-27B-Q4_K_M.gguf 模型的基准测试，复现 GPT-4o 两年前的同类实验，测试内容为用英文单词做加法。在禁用推理时，模型数值准确率仅 23.57%，格式合规率 96.17%；按操作数位数看，一至三位数准确率为 97.04%，十至十三位数骤降至 6.44%。启用推理后，在 169 次配对测试中答对 167 次。该实验在 DGX Spark 上完成。
AI 根据报道生成 · 14 天前更新
最新进展10月5日 07:34
启用推理后，Qwen3.8 27B 在 169 次配对测试中答对 167 次。报道时间线
沿着报道，了解事件的不同侧面。
10月5日
- Simon WillisonQwen3.8 27B 用英文单词做加法的基准测试
本地 Qwen3.8-27B-Q4_K_M.gguf 在禁用推理时做英文单词加法仅得 23.57% 数值准确率，格式合规率 96.17%，但一至三位数操作数准确率 97.04%，十至十三位数骤降至 6.44%。启用推理后 169 次配对测试中答对 167 次。该实验在 DGX Spark 上复现 GPT-4o 两年前的同类测试。