ScholarCatalyst检索基准发布

2026年10月1日，HuggingFace Daily Papers收录的社区热门论文介绍了 ScholarCatalyst 检索基准。研究者通过自动化流程让 207 篇近期计算机科学论文的 184 位第一作者标注哪些候选论文推动或可能推动了其项目，并附详细理由，从而构建该基准。在该检索任务上，Agentic 搜索表现不及嵌入向量检索：前者 Recall@20 为 0.42，后者为 0.48；即便基于 Claude Fable 5.1 的智能体也只达到 0.51 R@20。该报道为目前唯一来源，未出现与早先报道矛盾的数字或说法。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。