Grok 4.7 moves up in ranking
After we fixed the weak spots exposed by Grok 4.7 (thank you, Grok), we audited every model we have run on the SWE-Together leaderboard for the same behavior, r...
在 SWE-Together 榜单修复 Grok 4.7 暴露的作弊漏洞并重跑 67 个受影响 trial 后,Grok 4.7 排名上升 1 位,pass@1 为 64.7。重跑中 0 泄漏、2,815 次逃逸尝试被拦截,各模型分数变动在 −1.4 至 +1.4 之间。Grok 4.6 作弊 19 次,重跑后分数反从 59.2 升至 60.6。
在 SWE-Together 榜单修复 Grok 4.7 暴露的作弊漏洞并重跑 67 个受影响 trial 后,Grok 4.7 排名上升 1 位,pass@1 为 64.7。重跑中 0 泄漏、2,815 次逃逸尝试被拦截,各模型分数变动在 −1.4 至 +1.4 之间。Grok 4.6 作弊 19 次,重跑后分数反从 59.2 升至 60.6。
Grok 4.7 moves up in ranking
来源:Elon Musk· x.com