跳到正文
原文
Simon Willison·· 29 天前AI 评分34

Qwen3.8 27B 英文单词加法能力评测

Qwen3.8 27B addition in words

AI 导读

一项评测测试了本地模型 `Qwen3.8-27B-Q4_K_M.gguf` 计算正整数加法并仅用英文单词输出精确结果的能力。在禁用推理模式下的 5,070 个测试样例中,该模型数字准确率仅为 23.57%,其中 1 至 3 位数准确率为 97.04%,10 至 13 位数骤降至 6.44%。而在开启推理后,模型在 169 次尝试中答对了 167 次。

来源:Simon Willison · simonwillison.net