人们普遍猜测,像ChatGPT这样的人工智能(AI)助手的进展如何能够用于医学。今天(2023年4月28日)发表在《美国医学会杂志》(JAMA Internal Medicine)上的一项新研究,由加州大学圣地亚哥分校(UCSD)高通研究所的John W. Ayers博士领导,对人工智能助手在医学中可能发挥的作用进行了早期窥探。
这项研究比较了医生和ChatGPT对真实世界健康问题的书面答复。一个有执照的医疗专家小组在79%的情况下更喜欢ChatGPT的回答,并认为ChatGPT的回答质量更高、更有同情心。
艾尔斯说:”用人工智能改善医疗保健的机会是巨大的,”他也是加州大学旧金山分校医学院传染病和全球公共卫生处的创新副主任。”人工智能增强的护理是医学的未来。”
在这项新的研究中,研究小组着手回答这个问题: ChatGPT能否准确地回应患者发送给医生的问题?如果是的话,人工智能模型可以被整合到卫生系统中,以改善医生对患者所发问题的回应,并减轻医生不断增加的负担。
“ChatGPT可能能够通过医学执照考试,”研究报告的共同作者、UCSD奥特曼临床和转化研究所共同主任、UCSD医学院教授戴维-史密斯博士说,”但直接准确和富有同情心地回答病人的问题是一个不同的领域。”
“COVID-19大流行加速了虚拟医疗的采用,”研究报告的共同作者Eric Leas博士补充说,他是高通研究所的成员,也是加州大学圣地亚哥分校赫伯特-沃特海姆公共卫生和人类长寿科学学院的助理教授。”虽然这使患者更容易获得护理,但医生却被大量寻求医疗建议的患者电子信息所困扰,这些信息导致了破纪录的医生职业倦怠。”
为了获得大量不同的医疗问题和医生回答的样本,并且不包含可识别的个人信息,该团队转向了社交媒体,在那里有数百万的病人公开发布医疗问题,而医生会做出回应: Reddit的AskDocs。
r/AskDocs是一个拥有约452,000名成员的子reddit,他们发布医疗问题,并由经过验证的医疗专业人士提交答案。虽然任何人都可以对问题作出回应,但版主会验证医疗保健专业人士的证书,而回应会显示回应者的证书水平。其结果是一个庞大而多样的病人医疗问题和来自有执照的医疗专业人士的相应答案。
虽然有些人可能怀疑社交媒体上的问答交流是否是一个公平的测试,但团队成员指出,这些交流反映了他们的临床经验。
该团队从AskDocs中随机抽取了195个交流,其中有一位经过验证的医生回答了一个公共问题。该团队向ChatGPT提供了原始问题,并要求它编写一份答复。一个由三名持证医疗专业人士组成的小组对每个问题和相应的回答进行了评估,并对回答是来自医生还是ChatGPT进行了盲审。他们根据信息质量和同情心来比较答复,并指出他们更喜欢哪一个。
医疗保健专业人员评估小组在79%的情况下喜欢ChatGPT的回答而不是医生的回答。
圣地亚哥Human Longevity公司的执业护士、研究报告的合著者Jessica Kelley说:”ChatGPT信息的回应细微而准确,往往比医生的回应更能解决病人的问题。”
此外,ChatGPT的回答在质量上的评价明显高于医生的回答:ChatGPT的回答质量好或非常好是医生的3.6倍(医生22.1%,ChatGPT 78.5%)。这些回答也更有同情心:ChatGPT的同情或非常同情的回答比医生高9.8倍(医生4.6%,ChatGPT 45.1%)。
加州大学旧金山分校医学院副临床教授、研究报告作者之一亚伦-古德曼博士补充说:”我从未想象过会这么说,但ChatGPT是我想给我的收件箱开的处方。该工具将改变我支持病人的方式”。
“虽然我们的研究将ChatGPT与医生对立起来,但最终的解决方案并不是将你的医生完全扔掉,”布林茅尔学院计算机科学助理教授、研究报告的共同作者亚当-波利亚克博士说。”相反,医生利用ChatGPT是更好的、有同情心的护理的答案。”
“我们的研究是第一批显示人工智能助手如何潜在地解决现实世界的医疗保健提供问题的研究,”加州大学圣地亚哥分校健康部首席医疗官和首席数字官克里斯托弗-隆赫斯特博士说。”这些结果表明,像ChatGPT这样的工具可以有效地起草高质量、个性化的医疗建议,供临床医生审查,我们正在UCSD Health开始这一过程。”
医生-生物信息学家、加州大学圣地亚哥分校奥特曼临床和转化研究所联合主任、加州大学圣地亚哥分校医学院教授、研究报告共同作者Mike Hogarth博士补充说:”重要的是,将人工智能助手整合到医疗保健信息中,要在随机对照试验的背景下进行,以判断人工智能助手的使用对医生和患者的结果有何影响。”
除了改善工作流程,对人工智能助手信息传递的投资可能会影响病人的健康和医生的表现。
约翰霍普金斯大学计算机科学的John C Malone副教授和研究报告的共同作者Mark Dredze博士指出:”我们可以利用这些技术来训练医生以病人为中心的沟通,消除经常通过信息传递寻求医疗保健的少数民族人口所遭受的健康差异,建立新的医疗安全系统,并通过提供更高质量和更有效的护理来协助医生。”