司南 OpenCompass 大模型评测榜单 · 知识
OpenCompass / 知识问答 · 应用科学、日常生活、形式科学、自然科学和人文社科的知识问答。
在 AIHOT 中参与排名
所属领域知识问答
上游数据时间10/29 08:00
最近成功同步11/01 02:05
它测什么,怎么测
司南 OpenCompass 通过公开或商业渠道获取每个模型,自己在不公开的题目上跑,取最新一版榜单仅文本基准里知识维度的得分。总榜是六个维度的平均,这里只取知识、推理、抽象三个维度分别计分;安全与交互不属于计分的能力,智能体一项把编程、工具使用和调研合成一个分,也不计。同一型号按最高推理档位选代表配置,选择不看分数。
AIHOT 怎么用它
计分:知识问答领域,与 AA-Omniscience、SimpleQA Verified 同属知识与事实问答一类,三项合起来算一票。上一轮综合榜前 10 家厂商各自名次最高、公开能用(有按量付费 API 或公开权重)的型号,至少 60% 测过才参与计算(发布不满一个月的没测不算缺)。
评测成绩
同一模型测了多个档位时,按固定规则只取一套代表成绩;没有可用成绩的模型标为“未计入”并写明原因。匿名测试型号不展示,名次照搬原榜,每项最多列 30 个。
| 原榜名次 | 原榜型号 | 原始成绩 | 代表配置 |
|---|---|---|---|
| 1 | Claude Opus 5.5 (max)Anthropic | 80.0% | Max 推理 |
| 2 | Qwen3.8-Max (xhigh)Alibaba | 78.0% | xHigh 推理 |
| 2 | GPT-6.1 Sol (max)OpenAI | 78.0% | Max 推理 |
| 4 | Claude Sonnet 5.5 (max)Anthropic | 76.0% | Max 推理 |
| 5 | GLM-5.3 (max)Z.ai | 72.0% | Max 推理 |
| 5 | MiMo-V2.6-ProXiaomi | 72.0% | 来源默认配置 |
| 5 | Doubao-Seed-2.1-Pro-0915 (high)ByteDance | 72.0% | High 推理 |
| 5 | Kimi K3.1 Pro (max)Moonshot AI | 72.0% | Max 推理 |
| 5 | GPT-6 Astra (max)OpenAI | 72.0% | Max 推理 |
| 10 | Gemini 3.8 Flash (high)Google | 70.0% | High 推理 |
| 10 | Kimi K3 (max)Moonshot AI | 70.0% | Max 推理 |
| 12 | DeepSeek-V4.1-Flash-1017 (max)DeepSeek | 68.0% | Max 推理 |
| 13 | Grok 4.7 (xhigh)xAI | 67.3% | xHigh 推理 |
| 14 | DeepSeek-V4-Pro-0813 (max)DeepSeek | 66.0% | Max 推理 |
| 14 | GLM-5.3-Flash (max)Z.ai | 66.0% | Max 推理 |
| 14 | Qwen3.8-Flash (xhigh)Alibaba | 66.0% | xHigh 推理 |
| 14 | hy4-preview (high)Tencent | 66.0% | High 推理 |
| 14 | Gemini 4 Argon (high)Google | 66.0% | High 推理 |
| 19 | Step 5 Preview (high)StepFun | 64.0% | High 推理 |
| 20 | MiniMax-M3MiniMax | 62.0% | 来源默认配置 |
| 21 | Ling-3.1-flashInclusionAI | 60.0% | 来源默认配置 |
| 21 | hy3 (high)Tencent | 60.0% | High 推理 |
| 23 | MiniMax-M3.1-Flash (max)MiniMax | 56.0% | Max 推理 |
评测局限与数据署名
每个维度只有几十道题,分数颗粒粗;题目不公开,不能逐题复算;个别模型有题没作答,按官方公布的分数用。同属司南的三个维度分在不同的类,不能当作多家独立机构。
数据许可:官方公开结果;公开再展示保留官方署名,完整再分发授权仍以 司南 OpenCompass 条款为准
成绩由 OpenCompass 发布。各项评测的原始分数尺度不同,不能直接相加;AIHOT 按公开规则把它们折算成同一种分数。