Benchmark/体验感/AA-Omniscience

AA-Omniscience

体验感认知能力轨迹公开

指标 Omniscience Index题数 600采样 1Harness —

轨迹数据包

全部模型、全部题目的轨迹,JSONL 格式,73.2 MB

分数与成本

横轴是美元成本,对数刻度

-1.0-0.50.00.51.0$1$1$1$2$2$2$5$5$5$10$10$10

暂无完整的分数与成本数据

结果

点一行查看这次评测的记录

#模型推理档HarnessOmniscience Index±成本每题成本输出 tokens每题耗时评测日期
1Kimi-K3月之暗面max—0.350———2.7M507 秒2026-10-23
2GLM-5.3智谱max—0.287———959.5K141 秒2026-10-19
3DeepSeek-V4-Pro深度求索max—0.195———1.1M99 秒2026-10-26
4Qwen3.8-27B阿里巴巴xhigh—-0.037———1.9M—2026-10-19

评测配置

temperature
0.6
top_p
1
采样次数
1
最大输出长度
65,536 token
分数计算方式
—
judge 模型
Qwen3-30B-A3B-Instruct-2507
harness
—
评测 recipe
—
评测框架
OPT 1478395
其他
top_k=-1