跳到正文
热点事件持续更新

Qwen3.8 27B 英文单词加法基准测试

1 篇报道1 个报道来源19 小时前更新

先了解这件事

AI 综述

2026-10-05,Simon Willison 发布对本地 Qwen3.8-27B-Q4_K_M.gguf 的英文单词加法基准测试,复现 GPT-4o 两年前的同类测试,测试在 DGX Spark 上进行。禁用推理时,模型数值准确率仅 23.57%,格式合规率 96.17%;一至三位数操作数准确率达 97.04%,但十至十三位数骤降至 6.44%。开启推理后,169 次配对测试中答对 167 次。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月5日
  1. Simon Willison
    Qwen3.8 27B 用英文单词做加法的基准测试

    本地 Qwen3.8-27B-Q4_K_M.gguf 在禁用推理时用英文单词做加法仅得 23.57% 数值准确率,格式合规率 96.17%,一至三位数操作数准确率 97.04%,十至十三位数骤降至 6.44%。开启推理后,169 次配对测试中答对 167 次。该实验在 DGX Spark 上复现 GPT-4o 两年前的同类测试。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。