热点事件观察中

Qwen3.8-27B 大数加法准确率明显下降

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

Simon Willison 测试发现，本地运行的 Qwen3.8-27B 量化模型在关闭推理、用英文单词回答整数加法时，5,070 个案例的数字准确率为 23.57%；操作数为一至三位数时准确率为 97.04%，十至十三位数时降至 6.44%。格式合规率为 96.17%，但格式正确不代表算对。开启 medium reasoning 后，169 次对比中模型答对 167 次。该测试是在 DGX Spark 本地设备上进行；关闭推理时每种组合测 30 次，开启推理时每种组合只测一次，因此两组结果的测试次数不同。

AI 根据报道生成 · 3 小时前更新

最新进展10月5日 07:34

Qwen3.8-27B 英文单词加法基准测试

报道时间线

沿着报道，了解事件的不同侧面。

10月5日

07:34
Simon Willison · Engineering Notes
Qwen3.8-27B 英文单词加法基准测试
本地模型 Qwen3.8-27B-Q4_K_M.gguf 在关闭推理时测试正整数相加并仅用英文单词表达结果，5,070 个案例的数字准确率为 23.57%，格式合规率为 96.17%。准确率随操作数位数增加而下降：一至三位数为 97.04%，十至十三位数为 6.44%；开启 medium reasoning 后，169 次对比中答对 167 次。

本事件热度走势

还没有足够的连续观测数据，暂不绘制趋势。