AIHOT 评分 · 综合59.6分综合第 34 名评分不是正确率 · 评测覆盖 50%
可比较分类4/ 4 项分类
已有成绩26项评测
上下文窗口100万Token
各有所长,看得更清楚。
每个领域单独评分,和综合评分用同一种分数,可以直接比。具体能力请看下面每项成绩。
编程AIHOT 评分59.6分第 29 名5 项评测 · 覆盖 33%科研AIHOT 评分60.5分第 32 名前 30 名之外7 项评测 · 覆盖 56%专业办公AIHOT 评分63.3分第 25 名8 项评测 · 覆盖 60%知识问答AIHOT 评分53.0分第 54 名前 30 名之外5 项评测 · 覆盖 60%
覆盖比例是这个领域里已有成绩的评测类别占比,不代表能力高低;没测的不补分,也不扣分。
每一项成绩,都有来处。
按领域列出每项公开成绩,以及它折算成的统一分数。展开可查看运行配置与采用方式。
编程59.65 项
科研60.57 项
专业办公63.38 项
知识问答53.05 项
真人盲选59.71 项
尚无成绩的评测
这些评测尚无可采用的公开成绩,缺测不补分。
Terminal-Bench 4.0 · 官方LiveBench · 编程综合Code Migration v1.1ProgramBenchMirrorCodeCyberBench Patch v1.1APEX-SWEFrontierCode 2.0 · CognitionWeirdML v3FrontierSWE v2TapTap MakerFrontierMath v2 · Tiers 1–3LiveBench · 推理与数学ARC-AGI-2Chess PuzzlesMystery Game PuzzlesMysteryMechanismTerminal-Bench Science · ValsBioMysteryBenchAPEX-Agents 1.1Harvey LAB 1.1 · AAτ³-Banking · MercorLiveBench · 数据分析MedCodeAA-Analyst AgentSimpleQA VerifiedLiveBench · 语言与指令BullshitBench · 错误前提Arena Text
怎么看这些折算分
每项成绩按这项评测的难度折算成同一种分数:难的评测考得一般也能折算出高分,快被刷满的评测再高也折算不出更多。领域分是这些折算分的平均,再向模型的整体水平收一点;同类评测只算一票。相差不到 1 分的两个模型,先后接近抛硬币。
了解计算方法 →