Hugging Face Blog·· 7 小时前精选AI 评分76
LLM 能否可靠判断研究构想是否新颖？一项新研究发布基准、数据与代码
Can we trust LLMs to judge whether a research idea is novel?
AI 导读
Ai2 发布研究《Old Ideas, Novel Problems》，并开放用于测试新颖性评估模型的基准、数据、代码及自动化数据集构建流程。
推荐理由
这项基准研究显示，提示词细节会显著改变模型对研究构想新颖性的判断，且 AI 生成构想上的判断波动尤其明显。
来源：Hugging Face Blog · huggingface.co