Simon Willison·· 29 天前AI 评分34
Qwen3.8 27B 英文单词加法能力评测
Qwen3.8 27B addition in words
AI 导读
一项评测测试了本地模型 `Qwen3.8-27B-Q4_K_M.gguf` 计算正整数加法并仅用英文单词输出精确结果的能力。在禁用推理模式下的 5,070 个测试样例中,该模型数字准确率仅为 23.57%,其中 1 至 3 位数准确率为 97.04%,10 至 13 位数骤降至 6.44%。而在开启推理后,模型在 169 次尝试中答对了 167 次。
来源:Simon Willison · simonwillison.net