GPT-4竟成Nature审稿人?斯坦福清华校友近5000篇论文实测,超50%结果和人类评审一致斯坦福学者发现,GPT-4对于Nature、ICLR的论文给出的审稿意见,竟然和人类审...
GPT-4竟成Nature审稿人?斯坦福清华校友近5000篇论文实测,超50%结果和人类评审一致
斯坦福学者发现,GPT-4对于Nature、ICLR的论文给出的审稿意见,竟然和人类审稿人有超过50%的相似性。看来让大模型来帮我们审论文,并不是天方夜谭啊。
GPT-4,已经成功晋身审稿人!
最近,来自斯坦福大学等机构的研究者把数千篇来自Nature、ICLR等的顶会文章丢给了GPT-4,让它生成评审意见、修改建议,然后和人类审稿人给出的意见相比较。
论文地址:arxiv.org/abs/2310.01783
结果,GPT-4不仅完美胜任了这项工作,甚至比人类做得还好!
在它给出的意见中,超50%和至少一名人类审稿人一致。
并且超过82.4%的作者表示,GPT-4给出的意见相当有帮助。
论文作者James Zou总结道:我们仍然需要高质量的人工反馈,但LLM可以帮助作者在正式的同行评审之前,改进自己的论文初稿。
GPT-4给你的意见,可能比人类都好
所以,怎样让LLM给你审稿呢?
非常简单,只要从论文PDF中提取出文本,喂给GPT-4,它就立刻生成反馈了。
具体来说,我们要对一个PDF提取、解析论文的标题、摘要、图形、表格标题、主要文本。
然后告诉GPT-4,你需要遵循业内顶尖的期刊会议的审稿反馈形式,包括四个部分——成果是否重要、是否新颖,论文被接受的理由,论文被拒的理由,改进建议。网页链接
版权声明: 发表于 2023-10-08 11:12:06。
转载请注明:GPT-4竟成Nature审稿人?斯坦福清华校友近5000篇论文实测,超50%结果和人类评审一致斯坦福学者发现,GPT-4对于Nature、ICLR的论文给出的审稿意见,竟然和人类审... | AI 時.空 | AiTime.Space
转载请注明:GPT-4竟成Nature审稿人?斯坦福清华校友近5000篇论文实测,超50%结果和人类评审一致斯坦福学者发现,GPT-4对于Nature、ICLR的论文给出的审稿意见,竟然和人类审... | AI 時.空 | AiTime.Space
暂无评论...