【文献速览】ChatGPT在放射肿瘤学领域表现欠佳,需谨慎使用

学术   其他   2024-09-13 18:21   北京  

点击标题下「蓝色微信名」可快速关注

Floyd W, Kleber T, Carpenter DJ, et al. Current strengths and weaknesses of ChatGPT as a resource for radiation oncology patientsand providers[J].Int J Radiat Oncol Biol Phys, 2024,118(4):905-915. DOI:10.1016/j.ijrobp.2023.10.020



在人工智能技术飞速发展的今天,深度学习工具ChatGPT已经广泛应用于医学领域,尤其在放射肿瘤学领域。然而,由德州大学MD安德森癌症中心和杜克大学医学院等机构的研究人员联合撰写的文章“Current strengths and weaknesses of ChatGPT as a resource for radiation oncology patientsand providers”指出,ChatGPT在回答患者问题、总结重要研究及提供文献综述方面的准确性和全面性存在明显不足。


该研究的目的是评估ChatGPT在放射肿瘤学领域的表现,包括回答患者常见问题、总结里程碑式临床研究及提供支持当前临床实践的文献综述。研究人员向ChatGPT提出了252个患者问题、让其总结10项里程碑式研究和提供5种癌症类型的文献综述,并由独立评审员对答案进行评分。


结果显示,ChatGPT在放射肿瘤学中的表现并不理想。在回答患者问题时,只有39.7%的回答被评为正确且全面。在提供研究总结时,如果有研究全文,正确率为43.3%,而没有全文时仅为10%。在文献综述中,超过一半的研究是虚构的,并且缺乏完整引用。


因此,尽管ChatGPT在某些医学问题上表现良好,但在放射肿瘤学领域,其回答往往不准确或不完整。研究团队建议,目前不应将ChatGPT作为放射肿瘤学的可靠资源,未来技术改进可能会改善其表现。对于患者和医疗提供者来说,在使用ChatGPT进行医学咨询时,应保持谨慎态度,并以专业的医疗建议和权威文献为主要依据。


(编译:王郅翔   审核:吕晗)


王郅翔

 首都医科大学附属北京友谊医院精准与智慧影像实验室实习研究员。兴趣方向:医学人工智能、深度学习、临床数据分析。曾在Radiotherapy and Oncology、Journal of Ovarian Research等知名学术期刊上发表多篇论文,对智慧医学影像领域有深入的研究和丰富的实践经验。


吕晗

 首都医科大学附属北京友谊医院科技处副处长、放射科副主任医师、博士生导师。兴趣方向:影像信息学。主持国家自然科学基金面上项目、青年科学基金项目等8项,在柳叶刀子刊等国际知名学术期刊上发表多篇论文,其中以第一作者发表的单篇最高被引用次数近600次,撰写指南共识7部。获国家科技进步二等奖(排第7)、2次荣获国际磁共振协会“临床研究奖”等。

杂志介绍



《数字医学与健康》(CN 10-1909/R,ISSN 2097-3349)是由中国科协主管、中华医学会主办的多学科交叉性学术期刊。本刊已被“中华医学期刊全文数据库”“维普中文期刊资源数据库”“万方数据库”收录。


办刊宗旨:聚焦国内外数字医学和健康领域的最新发展方向,刊载数字医学和健康领域的新理论、新技术、新方法,打造学术与技术的交流与合作平台,助力“健康中国”战略。


报道范围:国内外数字医学和健康领域前沿进展;数字和信息技术在公共卫生、疾病预防、健康管理、精准医疗、辅助决策、药物研发、临床科研、行业治理、医院管理、医学教育、医疗保险、数据管理及安全等领域的应用;医学和健康与现代信息学等相关学科交叉领域的新理论、新技术、新观点等;数字医学和健康领域的国家政策和法规、行业标准和共识、循证指南、伦理要求及产业信息。


主要栏目:述评、专家笔谈、标准与规范、论著、研究方法与报告、综述、产业研究、未来医学、技术介绍与评估、伦理与监管、讲座、文献速览等。


编辑部地址:北京市西城区东河沿街69号405室,邮政编码:100052。


联系电话:010-51322158,Email:dmh@cmaph.org。


更多阅读:

《数字医学与健康》投稿方式及说明

数字医学与健康
聚焦国内外数字医学和健康领域的最新发展方向,刊载数字医学和健康领域的新理论、新技术、新方法,打造学术与技术的交流与合作平台,助力“健康中国”战略。
 最新文章