跳到正文
热点事件持续更新

Simon Willison 评测 Qwen3.8 27B 英文单词加法能力

1 篇报道1 个报道来源19 小时前更新

先了解这件事

AI 综述

Simon Willison 在 DGX Spark 上对本地 `Qwen3.8-27B-Q4_K_M.gguf` 模型测试其处理纯英文单词表达整数加法的能力。测试关闭推理时,共 5,070 个用例,数字准确率仅 23.57%,且随操作数位数增加明显下滑:从 1-3 位操作数的 97.04% 降至 10-13 位的 6.44%;格式合规率为 96.17%。开启推理后,169 个用例中答对 167 个,数字准确率接近 99%。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月5日
  1. Simon Willison
    Qwen3.8 27B 加法英文表达基准测试

    研究者在 DGX Spark 上对本地 `Qwen3.8-27B-Q4_K_M.gguf` 模型测试纯英文单词表达整数加法结果的能力。关闭推理时 5,070 个用例数字准确率仅 23.57%,从 1-3 位操作数 97.04% 降至 10-13 位 6.44%,格式合规率 96.17%。开启推理后 169 个用例中答对 167 个。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。