跳到正文
Hugging Face Blog·· 38 分钟前精选AI 评分64

Ai2 发布 Old Ideas, Novel Problems 研究与新颖性评审基准

Can we trust LLMs to judge whether a research idea is novel?

AI 导读

Ai2 发布研究 Old Ideas, Novel Problems,用基于 ICLR 2026 同行评审构建的基准测试 LLM 作为 novelty judge 评估研究想法新颖性的可靠性。

推荐理由

原文用六个 LLM 评审和具体数字量化了新颖性判断的不稳定性,并开源了基准与流水线供研究者复用。

来源:Hugging Face Blog · huggingface.co