2026-05-29 · DECISION TRACE

小墨模型评测详情:qwen3.7-max

保留方案、指标、验证、复盘和治理判断,让结论能够追溯。

2026-05-29记录日期
评测记录记录类型
10章节数

小墨模型评测详情:qwen3.7-max

  • HTML: https://decision.ht1072.top/2026-05-29-xiaomo-model-eval-detail-qwen3-7-max.html
  • Local HTML: [已移除本地路径]
  • Generated: 2026-05-29T18:22:39+08:00

小墨模型评测详情:qwen3.7-max

结论

qwen3.7-max 当前最好分 131/160,最新分 131/160,处于 B|主线辅助/强 worker。建议角色:文档治理 worker / 轻量规划 worker;不建议直接承担小墨主线执行。

关键指标

  • 模型:qwen3.7-max
  • Provider:custom
  • 横向排名:#11 / 22
  • 有效 run 数:1
  • 最好分:131 / 160
  • 最新分:131 / 160
  • 平均分:131.0
  • 梯队:B|主线辅助/强 worker
  • 建议角色:文档治理 worker / 轻量规划 worker;不建议直接承担小墨主线执行

推荐使用方式

文档治理 worker / 轻量规划 worker;不建议直接承担小墨主线执行

代表判断:整体可用,但还不到主模型强放权水平。长处是结构化表达、规划收口和中文输出稳定;短板集中在工具验证真实性与事实边界,尤其 T4 这类必须先查再答的场景风险明显。

分数轨迹

  • 20260522-201608__custom__qwen3.7-max:131 / 160;scored_by=gpt-5.4;2026-05-22T12:16:08.092954+00:00

最新 run 逐题表现

题目 标题 分数 评语
T1 主线保持题 15
T2 复杂规划题 18
T3 commit grouping 题 16
T4 tool-verification 题 11
T5 regression 判断题 18
T6 upgrade worth-it 题 18
T7 wiki 收口题 17
T8 drift triage 题 18

维度表现

维度 结果
A 主线保持 15 / 20
B 规划收口 18 / 20
C patch/代码判断 34 / 40
D 工具执行闭环 11 / 20
E 检索压缩表达 18 / 20
F 知识治理收口 17 / 20
G 扩展潜力 适合做规范化文档、流程草案和低风险整理型 worker;如果要接执行链,必须配合强制工具查证和更严的事实边界约束。

与更高分模型对比

  • gpt-5.5:最好 156/160,最新 155/160
  • gpt-5.4:最好 148/160,最新 148/160
  • YT-claude-4.7:最好 148/160,最新 148/160
  • gpt-5.4-2026-03-05:最好 147/160,最新 147/160
  • gpt-5.4-mini:最好 134/160,最新 134/160

证据路径

下一步

  1. 如果该模型继续测试,优先追加新的 scored run,不覆盖旧 run。
  2. 新 run 完成后,刷新本详情页和横向总览页。
  3. 若用于生产路由,应另写模型路由决策页,避免把单次评测分数直接等同于配置变更。

风险与边界

  • 本页是小墨场景评测,不等同于通用 benchmark。
  • 同名模型可能对应 provider alias 或后端版本漂移,结论需结合 run 时间线看。
  • 对工具执行闭环要求高的任务,应优先看 T4 / live verification 表现。