跳到主要内容
dsh-hot
评测

docs(benchmark): 新增 Astra xhigh 全量 56 题结果及对比(PR #196)

PR #196 补充了 Codex + GPT-6 Astra xhigh 搭配 skill 的完整 56 题评测,累计 reward 43.02/56,55 道有效评分题均分 78.2182/100,32 题满分,并提供了与 Luna、Terra、Flash 同题对比,Astra 均分更高。报告明确说明不能据此声称已通过受控实验取得完整 56 题 SOTA,也不应将 Astra 的 56 题均分直接与其他模型较小集均分比较。

根据原始讨论自动整理,来源与完整记录可在下方查看。

讨论要点

  • 该 PR 记录了执行细节,包括主机休眠、内存等待、H16 Harbor 元数据重复计入 token、H8 输出软链接失效导致评分器中止等异常,并说明未进行按分数选择性重跑、无无 skill 对照组、无多次重复方差数据。来源 1 ↗来源 2 ↗来源 3 ↗来源 4 ↗

涉及的插件与版本

  • 该 PR 影响 benchmark 结果索引,新增完整 56 题报告、逐题 CSV、来源与汇总 JSON,并保留原有 18 题报告不变。来源 ↗
查看核验记录与完整证据

证据与时间线

验证状态

尚未验证

维护者回应

尚未处理

作者回应

尚未记录回应

目前找到的最早来源

未知

2026年9月9日 01:09

研究与审核记录

生命周期

正在出现

监测范围

5 份自动关联的原始来源;来源关系与独立性未经人工核验

首发可信度 · 0%

本站首次发现 · 2026年9月9日 01:58

证据、测试条件与进展
研究与审核记录 · 已审核传播图
06

已审核传播图

00

暂无记录到的交叉引用或传播链。

相关事件

  • 评测尚未验证

    调查线索:benchmark: step5-preview S1-S24 双臂运行归档 + 双判分结果

    首条原文《benchmark: step5-preview S1-S24 双臂运行归档 + 双判分结果》写道:“StepFun Step 5 Preview(OpenCode Zen 供应,公开发布名;预览端点背后精确 checkpoint 未经独立验证;opencode 编排)在 S 系列基准上的完整 24 题双臂运行、双判分与重跑 follow-up 归档。”。目前只收录了这一份原文。

    4 个来源· GitHub
  • 评测尚未验证

    调查线索:feat(benchmark): S18 terminal sprite render trap (half-block SGR leak, trim ghosting, timer pinning)

    首条原文《feat(benchmark): S18 terminal sprite render trap (half-block SGR leak, trim ghosting, timer pinning)》写道:“Summary Adds benchmark task S18-terminal-sprite-render-trap (static, read-only report): a terminal half-block sprite renderer whose three independent rendering bugs (SGR background”。另有 36 份相关原文已收录,正在比对它们是否描述同一件事。

    42 个来源· GitHub / Blog
  • 评测尚未验证

    调查线索:feat(benchmark): H22 not-listed trap — the package that installs but never registers

    首条原文《feat(benchmark): H22 not-listed trap — the package that installs but never registers》写道:“Distilled from a real top-tier failure: anywhere-labs/dsh-desktop (22k★) failed our 50-plugin live verification on 09-01 with exactly this shape — dsh plugin add succeeds, the entr”。另有 31 份相关原文已收录,正在比对它们是否描述同一件事。

    32 个来源· GitHub / Blog