1 · 先验(prior)
维护 30% · 采用 30% · 验证 25% · 文档 15%。采用同时看 installs、npm 周下载和 stars,避免单一信号误导。
没有成对 bench 时,最终分压缩到 0–60,并标记 prior;它不能压过有实测的插件。
PUBLIC EVIDENCE · E2 PROVISIONAL · 0 POSITIVE
一套公开、统一、可复现的证据与分数:先按能力面(记忆、视觉、Office、浏览器、编排……)整理, 再用成对 bench(有/无插件)把“先验”升级为“实测”。 目前 1 条 E2 暂定实测(null pilot),41 条 E0/未评级;没有 positive measured,也没有质量 #1。先验是发现信号,不是任务效果结论。
ATTENTION ALLOCATION
Featured / New & promising / Most nominated / Most replicated. 由 registry 直接产出,任何目录或应用都可消费。
LEADERBOARD
| # | 插件 | GOE | 证据 | prior(discovery) | bench | 覆盖 | 证据完整度 | 徽章 |
|---|
没有匹配的行。
CONTRIBUTORS
轨迹质量 × 可复现等级 = credits。credits 不可转让、不能买排名;用于声誉与提名未评测插件。
SCORING
公式、权重、样本门槛和反博弈规则都在 registry 里,任何人可复算。
维护 30% · 采用 30% · 验证 25% · 文档 15%。采用同时看 installs、npm 周下载和 stars,避免单一信号误导。
没有成对 bench 时,最终分压缩到 0–60,并标记 prior;它不能压过有实测的插件。
同一任务、同一模型、同一 harness,跑 with 与 without 两臂;每个任务两臂至少 3 次。
lift 的 95% 下界映射到 0–100;低于样本门槛的任务不参与评分。
贡献者提交可复现轨迹(只发哈希与指标,默认不发原文);贡献不直接证明插件效果,只作为小权重需求信号。
独立复现 ≥ 2 个 runner 才进入 most replicated。
只有 positive E3+ 才进入质量槽位;当前 0 条 positive,因此没有 top3、Featured 或质量 #1。固定席位,不可购买。
作者不能给自己的插件签发 full credit;赞助位不存在于本 registry。
CONTRIBUTE
跑一个任务的两臂,产出 bench-result.json,签名后放到 data/results/,开 PR。至少 3 次/臂才会计分。
用 DSH 会话生成 contribution.json(质量、价格、surface、插件、哈希、签名),放到 data/contributions/。默认不发布原文。
contribution schema(已发布)
每条贡献可带一个 nomination。被提名最多、且 coverage < 50% 的插件进入 Most nominated,优先安排 bench。
第二个 runner 复跑同一 (task, plugin, model, harness),结果一致即 replicated;这是最高等级的 credit。