跳到正文
热点事件持续更新

Ai2发布LLM新颖性裁判研究及基准

2 篇报道2 个报道来源2 小时前更新

先了解这件事

AI 综述

Ai2 发布研究《Old Ideas, Novel Problems》,测试大语言模型能否可靠判断科研想法的新颖性。Ai2 称,结果显示这类新颖性裁判并不稳定。 与论文一同公开的还有用于检验新颖性裁判的基准、数据和代码,以及一套供研究者构建新评估集的自动化流水线。

AI 根据报道生成 · 39 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. Hugging Face 社区博客
    Ai2 发布 Old Ideas, Novel Problems 研究与基准,测试 LLM 判断科研想法新颖性的可靠性

    Ai2 发布 Old Ideas, Novel Problems 研究,配套新颖性评审基准、数据和自动化流水线,测试 LLM 作为 novelty judge 评估科研想法新颖性的可靠性。

10月27日
  1. Ai2 / Allen Institute for AI精选
    Ai2 发布 Old Ideas, Novel Problems 研究与 benchmark,揭示 LLM 新颖性裁判不稳定

    Ai2 发布研究 Old Ideas, Novel Problems、配套 benchmark、数据、代码和自动化流水线,测试 LLM 作为研究想法新颖性裁判的可靠性。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。