chatgpt还能用来写论文吗 ChatGPT能够指导我们写SCI论文吗吗?

默认分类1年前 (2023)发布 admin
3,530 0
ChatGPT国内版

系列文章

最近,火爆全网,各行各业都开始琢磨这个人工智能究竟能做些什么。作为一名医学科研工作者,我自然也很好奇能在医学研究中能发挥什么样的作用。

昨天我看到一条消息说道,已经通过了美国USMLE,也就是美国执业医师考试,这引起了我的注意。经过一番搜索,果真如此,在去年12月的一篇预印本文章中,未进行任何医学训练的情况下,在美国执业医师资格考试(USMLE)中达到了平均水平以上,且准确率达到了60%左右[1]。这是很令人震惊的成绩!要知道并不是一个为了回答医学知识而训练出来的AI模型。

那么可以指导我们写论文,尤其是符合规范的医学论文嘛?

比如观察性研究论文!

对于观察性研究论文,国际上有个论文写作规范共识:声明。

声明中文全称是“加强流行病学中观察性研究报告”( the of in ),其内容中由22个条目组成的清单描述了从标题、摘要、背景、目的、研究设计、统计方法、结果、讨论等文章要素的写作要点。

但是躺平的时代,很多人不愿意去研究,不想去学习,那么能不能直接告诉我们怎么办?

在检索过程中,我惊奇地发现最近有一篇预印本文章已经将结合声明来探索AI是否能用于指导流行病学研究写作[2]。

这个研究的作者设计了35个基于声明的写作问题,然后拿了一篇已发表研究的研究目的,按照“写作问题+研究目的”的格式发给让它回答问题,然后让专家来给AI回答的一致性和相关性进行评分。结果在满分5分下,平均拿到了3.6分和3.5分。

也就说:声明是100分,那么的指导意见大概70分!

chatgpt还能用来写论文吗 ChatGPT能够指导我们写SCI论文吗吗?

作为本公众号声明系列推文的作者,我不禁感到一丝紧张,如果可以基于声明回答有关观察性论文写作的要点,那我之前写的声明系列推文的价值是否会打折扣?

抱着疑问,我照搬文章里设计的问题亲自去官网上讨教了一番,结果让我更吃惊了!

于是我就针对观察性研究的统计学方法,进行了交流

关于统计学方法,是这么说的

2023年预印本的文章,问了下关于统计学的问题:

What be , those used to for , to the ? The study has the aim: to the the of fully and the of new COVID-19 cases in a given , and to the of on the of COVID-19 cases.

译文:根据指南,哪些统计方法应被描述(包括用于控制混杂的统计方法)?研究究的目的如下:研究特定人群中全剂疫苗接种率与新冠病例发生率之间的关系,并评估疫苗接种对新冠发病率的影响。

该文章中使用的还是2022年底的3.0版本,我将其回答翻译了出来

“从统计学的角度来看,想要研究特定人群中疫苗接种率与新冠病例发生率之间的关系,回归分析几乎是必用的方法,若想进一步控制混杂因素,还可能需要采用多因素回归、分层分析、敏感性分析等方法”。

可见 3.0已经能将声明和研究目的结合起来,提出可能需要描述的统计学方法。同时,回答中的最后一句话也颇具声明原文的语气。然而,这一回答中真正对写作有指导意义的信息并不多,大部分是空话。文章中的专家也给这一回答只打了2.3分和1.7分。

chatgpt还能用来写论文吗 ChatGPT能够指导我们写SCI论文吗吗?

而现在官网上已经更新至3.5版本,针对同一个问题,新版本又会怎么回答呢?

可见,最新版本回答内容的质量和体量都明显提高了。在回答的第二段中, 3.5已经可以根据研究目的直接指出首选的研究方法为回归分析,很难想象一个AI软件能如此果断地作出统计学判断。在描述回归分析和如何控制混杂的角度上, 3.5明显提出了更多的考量,甚至考虑到自变量和因变量的分布,而且提到了上一个版本所未考虑到的敏感性分析。当然这个回答仍有不足之处,真要细扣的话,像变量筛选过程,缺失值处理、抽样方法等细节还是没有体现出来。

我的小结

总体来看, 3.5针对该问题的回答全部都能在声明的原文中找到相应的内容,但又有别于对原文的照搬或修饰。从指导论文写作的角度来看,确实可以通给出写作甚至研究设计上的建议,但还远不达不到能完全依赖的程度。

声明原文里用了7个点,将近4页的内容详细讲述了如何理解和描述观察性研究的统计学方法,并结合了相应的案例分析。至少目前来看,参照声明一点一点地写论文会更让我自己放心一些。同时,也已经有期刊表达了对参与科研写作的立场。在作者投稿指南中表示:任何大型语言模型工具(如)都不能作为论文作者,如在文章中使用过相关工具,需要在“方法“或”致谢“等位置有明确说明。

值得思考的是,才上线2个月,已经能针对医学问题给出这般自然且尚准确的科学回答,那么半年后,五年后,十年后又会给出什么样的回答呢?未来AI又是否会参与到科研的立题和研究设计中呢?人类的理性、判断能力和知识是很容易被人工智能替代的,或许唯有创造力是人类生生不息的源泉。

参考文献:

[1] KUNG T H, M, A, et al. of on USMLE: for AI- Using Large [J]. , 2022: 2022.12.19..

[2] F, BUCCI A, D. A step-by-step ’s Guide to the use of an AI-based in : an of using the for [J]. , 2023: 2023.02.06..

2023年科研统计课程培训通知

2022年以来,我们召集了一批富有经验的高校专业队伍,着手举行短期统计课程培训班,包括R语言、meta分析、临床预测模型、真实世界临床研究、问卷与量表分析、医学统计与SPSS、临床试验数据分析、重复测量资料分析、结构方程模型等9门课。如果您有需求,不妨点击查看:

© 版权声明
广告也精彩

相关文章

暂无评论

暂无评论...