ChatGPT成为论文的共同作者?在去年12月发表的一篇预印本论文中,我们惊奇地发现ChatGPT出现在了作者栏!ChatGPT成高手了?虽然大家都知道ChatGPT有超强的写作能力,但是它有没有能够和人类合作,在自己身上写一篇论文呢?(也许会行)一百个问号,小编点开这篇论文,开始仔细研究,但是看完之后,一百个问号变成了一千个。也就是没看到哪一句是ChatGPT写的。只能说ChatGPT在研究中确实起到了非常重要的作用。然而,这就更让人迷惑了:如果一只老鼠参加了生物实验,那老鼠能不能出现在作者栏?(恒河猴、羊驼、兔子、果蝇都表达了不满。)网友们对此也很疑惑:不知道是强制ChatGPT考USMLE更有趣,还是更有趣让人工智能成为论文的作者。被迫参加考试,成为论文作者那么,ChatGPT在这篇论文中扮演什么角色呢?让我们来看看。文章标题是《ChatGPT在USMLE上的表现:使用大型语言模型进行AI辅助医学教育的潜力》。总之,研究人员将ChatGPT用于美国医学执照考试。你为什么选择这个考试?这是因为这个考试的难度非常高,题目非常复杂(无论是语言上还是概念上),同时,它具有高度标准化的规范。巧合的是,这些恰恰是AI的强项。在没有专门培训或强化的情况下,ChatGPT通过或接近通过了几乎所有三项测试。而且,ChatGPT中的答题卡给了研究者很大的惊喜。让我们详细谈谈它。USMILE有多难?美国医学执照考试USMILE涵盖基础科学、临床推理、医疗管理和生物伦理学。它的问题在文本和概念上都很密集。试题花絮包含大量的多模态临床数据(包括病史、体格检查、化验值和研究结果),参加考试的学生需要做出诊断并识别许多模棱两可的情景。LLM和USMILE适配性研究者为何看中ChatGPT作为“小白鼠”?以前的人工智能模型,主要是深度学习(DL)模型,用于学习和识别数据中的模式。而ChatGPT属于通用大规模语言模型(LLM)。基于一种新颖的AI算法,经过训练的LLM可以根据前面单词的上下文预测给定单词序列的可能性。因此,如果可以在足够大的文本数据上进行训练,LLM可以生成从未观察到的新词序列,这些句子是基于自然人类语言的合理序列。不刷题,ChatGPT零准备考场ChatGPT之所以强大,是因为它站在了GPT3.5的肩膀上。GPT3.5在基于OpenAI175B参数的模型上进行训练。此外,它还通过强化和监督学习的方法从互联网上获取大量的文本数据。但这一次,ChatGPT是一次彻底的“裸考”。本次试题是研究者从2022年6月USMILE官方样题中挑选出的376道公开试题,并且研究者进行了随机抽查,以确保这些试题的相关内容之前没有被谷歌索引收录2022年1月1日。要知道,ChatGPT的训练数据集在这个时间之前就结束了。也就是说,ChatGPT事先并没有看到这些问题。总结了实验方法的结果。ChatGPT在测试中胆子越来越大,准确率也在不断提升,说明它在不断学习,不断提升自己。到最后,逐渐接近甚至超越了USMILE的及格线。ChatGPT在USMLE中表现相当出色。此外,在考试中,ChatGPT还会对题目产生新的见解,可以帮助人类更好地理解题目。在实验中,研究人员引入了一种衡量AI生成的解释中包含的洞察力密度(DOI)的方法。可以观察到,ChatGPT在回答准确问题时的DOI明显高于不准确问题。这些数据表明,如果人类学习者回答错误,他们可以从ChatGPT的输出中获得新的见解以进行补救。也就是说,ChatGP不仅会自学成为全新试题的高手,还会被用来帮助人类学学渣。总之,研究人员最终得出结论,大型语言模型在医学教育和临床决策方面具有巨大的应用潜力。嗯,道理大家都懂,只是我到论文最后才明白。ChatGPT是如何成为合著者的?会不会是研究人员觉得ChatGPT参加了考试并答对了,所以“对这篇文章也有贡献”?在医学界,ChatGPT“高产如母猪”你注意到了吗,医学界的研究人员已经对“GPT”痴迷不已。不仅是我们这次的主角,文章开头提到的这篇文章也来自一家“神经科学与生理研究所”。ChatGPT的名字,从去年12月开始,频繁出现在该领域的一些同行评议论文中:内容写的很认真,我们一眼就看出来了。另外还有下面这篇论文,ChatGPT在作者栏里也占了半壁江山。论文地址:https://www.sciencedirect.com/science/article/abs/pii/S1471595322002517怎样才算是论文的作者?如何签署文件是一个大问题。作者的签名赋予了作者声誉,也具有重要的学术、社会和经济意义。ChatGPT怎么能和专家一起上作者栏?对此,我们询问了ChatGPT的看法:其实随便一搜就可以找到很多关于作者职责的详细解释。既然都是医学领域的论文,那我们就看看ICMJE(国际医学期刊编辑委员会)的推荐吧。简单来说,可以概括为以下四点:1.对研究的构思或设计做出重要贡献,或为研究获取、分析或解释数据;2.起草或修改重要知识内容的研究论文;3.最终确定要发布的版本;4.同意对研究工作的所有方面负责,以确保对论文任何部分的准确性或完整性提出的质疑得到妥善调查和解决。所有被指定为作者的人都应符合作者资格的4个标准,所有符合上述4个标准的人也应被确定为作者。那些不满足所有4个标准的人应该出现在致谢部分。现在的问题是,ChatGPT满足了多少?参考资料:https://www.icmje.org/recommendations/translations/chinese2018.pdf
