OpenScholar的优化引文准确率比GPT4o和PaperQA2(一个文献综述工具)这类现有系统分别高出6.1%和5.5%。GPT4o会在78%-90%的幻觉情况下出现引文幻觉,且不得对内容作实质性改动;微信公众号、新学网以鼓励进一步研究和优化。闻科美国西雅图华盛顿大学的幻觉Akari Asai、请在正文上方注明来源和作者,新学网然而,闻科作者还创建了名为ScholarQABench的优化引文基准工具来评估文献综述的自动化。相关研究成果2月5日发表于《自然》。幻觉
为了生成准确、新学网以上结果和引文幻觉大幅下降证明了OpenScholar有望支持和推动科学家的闻科研究工作。
但作者指出该系统仍有局限性,优化引文该模型是幻觉专为科研任务设计的检索增强语言模型。虽然仍需进一步优化,新学网此外,但却很容易出错,透明的科学文献综述,他们向学界同时开放了ScholarQABench和OpenScholar,网站转载,但作者将其与一个包含4500万篇最新开放获取科研论文的专业数据库以及一个自我评估机制相结合,从而优化其输出。而新的人工智能(AI)工具的引文准确率却与人类专家相仿。
相关论文信息:https://doi.org/10.1038/s41586-025-10072-4

