# Epoch AI 审计 Humanity's Last Exam：抽样 48 题中 46% 存在影响准确率的错误，判定为 Flawed

- 来源：Epoch AI：研究、数据与评测
- 发布时间：2026-08-11 08:00
- AIHOT 分数：61
- AIHOT 标记：精选
- AIHOT 链接：https://aihot.news/items/cmu61xlxt049rrofjt7ik33h6
- 原文链接：https://epoch.ai/benchmarks/hle/review

## 精选理由

Epoch AI 公开抽样审计 Humanity's Last Exam 的错误明细、方法与判定依据，读者可据此校准对该基准分数的解读。

## AI 摘要

Epoch AI 对公开征集题目的知识型基准 Humanity's Last Exam 进行审计，按 8 个类别随机抽样 48 题，发现 22 题（46%）存在会实质改变准确率的错误，将该基准判定为 Flawed。其中 12 题按题面本就无法正确作答，10 题可能产生误判正确答案为错或错误答案为对的情况；其余 26 题答案正确，审计方法与错误明细已在原文公开。

## 正文

该来源未收录可展示正文，站内仅提供摘要。

> 站内仅提供摘要，全文见原文。