热点事件持续更新
Simon Willison 评测 Qwen3.8 27B 英文单词加法能力
1 篇报道1 个报道来源19 小时前更新
先了解这件事
AI 综述
Simon Willison 在 DGX Spark 上对本地 `Qwen3.8-27B-Q4_K_M.gguf` 模型测试其处理纯英文单词表达整数加法的能力。测试关闭推理时,共 5,070 个用例,数字准确率仅 23.57%,且随操作数位数增加明显下滑:从 1-3 位操作数的 97.04% 降至 10-13 位的 6.44%;格式合规率为 96.17%。开启推理后,169 个用例中答对 167 个,数字准确率接近 99%。
AI 根据报道生成 · 1 小时前更新
最新进展10月5日 07:34
关闭推理时模型英文单词加法准确率仅 23.57%,开启推理后 169 题中答对 167 题。报道时间线
沿着报道,了解事件的不同侧面。
10月5日
- Simon WillisonQwen3.8 27B 加法英文表达基准测试
研究者在 DGX Spark 上对本地 `Qwen3.8-27B-Q4_K_M.gguf` 模型测试纯英文单词表达整数加法结果的能力。关闭推理时 5,070 个用例数字准确率仅 23.57%,从 1-3 位操作数 97.04% 降至 10-13 位 6.44%,格式合规率 96.17%。开启推理后 169 个用例中答对 167 个。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。