马武仁1 弓孟春2 戴 辉3 黄 婧4 王斌斌5 史文钊1(1神州医疗科技股份有限公司 北京 100080 2南方医科大学卫生与健康管理研究所 广州 5105153南方医科大学南方医院赣州医院 赣州 341099 4空军军大学唐都医院 西安 7100385南方医科大学南方医院 广州 510515)〔摘要〕 目的/意义 近年大语言模型技术飞速发展,其在临床中的应用亟待总结分析。方法/过程 在相关文献分析基础上,梳理以 ChatGPT为代表的大语言模在临床问诊、病史采集及文本写、临床辅助决策、个性化精准医疗、医患沟通及患者心理持、学术研究、医学教育、医院管理等临床领域的应用情况。结果/结论 大语言模型具备全面颠覆医疗生态圈的潜力,虽然面临诸多挑战,但终将造福医患。
〔关键词〕 ChatGPT;人工智能;临床医学〔中图分类号〕R-058 〔文献标识码〕A 〔DOI〕103969/jissn1673-6036202307002AComprehensiveReviewoftheApplicationsofLargeLanguageModelsinClinicalMedicinewitChatGPTasaRepresentativeMAWuren1 ,GONGMengchun2 ,DAIHui3 ,HUANGJing4 ,WANGBinbin5 ,SHIWenzhao11 DigitalChinaHealthTechnologiesCorporationLimited,Beijing100080,China;2 InstituteofHealthManagement,SouthernMedicalUniversity,Guangzhou510515,China;3 GanzhouHospital-NanfangHospital,SouthernMedicalUniversity,Ganzhou341099,China;4 TangduHospital,TheAirforceMilitaryMedicalUniversity,Xi’an710038,China;5 NanfangHospital,SouthernMedicalUniversity,Guangzhou510515,China〔Abstract〕 Purpose/SignificanceInrecentyears,thetechnologyoflargelanguagemodelshasbeenrapidlyadvancing,andtheirapplicationsinclinicalsettingsurgentlyneedtobesummarizedandanalyzed.Method/ProcessBasedonareviewofrelevantliteratures,thepaperoutlinestheapplicationsoflargelanguagemodels,representedbyChatGPT,invariousclinicalfieldssuchasclinicalconsultation,medicalhistorycollectionandtextwriting,clinicaldecisionsupport,personalizedprecisionmedicine,doctor-patientcommunicationandpatientpsychologicalsupport,academicresearch,medicaleducation,andhospitalmanagement. Result/ConclusionLargel an guagemodelshavethepotentialtocompletelyrevolutionizethehealthcareecosystem,despitefacingnumerouschallenges,theywillultimatelybenefitbothdoctorsandpatients.
〔Keywords〕 ChatGPT;artificialintelligence(AI);clinicalmedicine
〔修回日期〕 2023-07-18
〔作者简介〕 马武仁,医学数据分析师,发表论文 10余
篇;通信作者:史文钊,硕士。
〔基金项目〕 国家重点研发计划项目 (项目编号:2020YFC2006400)。
1 引言
大语言模型 (largelanguagemodels,LLMs)是由具有大量参数 (通常为数十亿或更多权重)的神经网络组成的语言模型,由多层神经元组成,第 1层将一系列单词作为输入,每个后续层处理前一层输出。最后一层输出是模型对输入最可能的含义或解释的预测。LLMs使用自监督学习对大量未标记文本进行训练,可以根据从海量数据集中吸收的知识,高准确度识别、总结、翻译、预测和生成文本及其他内容。LLMs在 2018年左右出现,并在各种任务中表现出色[1] 。在人工智能 (artificialintelligence,AI)越来越多地应用于临床诊疗的时代背景下,总结阐释 LLMs在临床中的应用及其对医患双方的影响极为必要。
2 ChatGPT及其核心技术突破
2 1 ChatGPT
聊天生成预训练转换器 (chatgenerativepretrainedtransformer,ChatGPT)是美国开放人工智能(OpenAI)实验室于 2022年 11月 30日发布的一种AI技术驱动的聊天机器人模型,通过使用生成式预训练转换器 35(generativepre-trainedtransformer-35,GPT-35)模型提供流畅、自然的与人类几乎没有差异的响应[2] 。
22 转换器模型
ChatGPT取得如此效果,核心原因之一是其基于大规模生成式预训练模型 GPT-35构建,这是当前自然语言理解领域最好的文本生成模型 (GPT-35比 GPT-3使用更多数据和更大模型,具有更好效果)。GPT系列模型的核心是转换器模型,即一种用于序列到序列学习的神经网络结构。转换器中引入多头自注意力机制,通过计算输入序列中各位置之间的相对关系,实现序列中不同位置的信息交互。多个注意力头分别关注句子中多个方面重点,而且通过增加网络层次,能够提取更高级且抽象的语义信息,因而获得更强的理解能力。基于转换器的语言模型除具有强大的语义提取能力外,还能进行无监督学习,具有良好的场景迁移能力。
2 3 强化学习技术
赋能 ChatGPT的另一大关键技术是人类反馈的强化学习技术 (reinforcementlearningfrom humanfeedback,RLHF)[3] 。由于 OpenAI没有公开发表的ChatGPT论文,也没有公开代码[4] ,外界普遍认为其与之前公开发表的指令生成预训练转换器 (instructgenerativepre-trainedtransformer,InstructGPT)中披露的技术最为相近[5] 。InstructGPT的技术步骤如下[6] :
第 1步,收集用户对同一问题不同答案的偏好;第 2步,利用第 1步的偏好数据重新训练,基于监督信息精调 GPT模型;第 3步,根据用户对不同答案的偏好训练打分函数,对 ChatGPT的答案打分,分数高低体现出用户对不同答案偏好程度的高低;第 4步,利用打分函数作为反馈对学习模型进行训练强化,使 ChatGPT最终输出用户更偏好和喜欢的答案。通过上述步骤,ChatGPT针对用户输入,能够输出用户友好的答案。
24 上下文学习
上下文学习[7] 是目前大语言模型都在全力攻克的重点,对 ChatGPT没有处理过的新任务,只需设计任务的语言描述,并给出几个任务实例输入模型,即可让模型从给定的情景中学习新任务并给出满意回答。这种训练方式还能够有效提升模型小样本学习能力。ChatGPT还可以利用思维链 (chain-of-thought,CoT)进行复杂推理[8] 。对于一些逻辑较复杂的问题,直接向 ChatGPT模型提问可能不会得到准确回答,但如果通过提示的方式在输入中给出有逻辑的解题步骤 (即将复杂问题拆解为多个子问题)的示例后再提出问题,则能给出正确回答。
3 以 ChatGPT为代表的 LLMs在临床医学中的应用
目前已公开发布的重要 LLMs参数数量差异极大,但在医学任务上测试 (以 PubMedQA数据集为例)普遍取得了不错的成绩[3,9] 。指令提示微调以及增大模型参数量能够显著提升 LLMs的理解力、知识召回和推理能力,提示 LLMs在临床领域具备发挥关键作用的潜力[10] 。
3 1 问诊、临床病史采集及文本撰写
ChatGPT可以与患者进行对话,询问关于症状、疼痛程度、病史等方面的问题,比人类更快地从多个来源收集、分类和整合临床信息[11] 医生可以更全面地了解患者情况,为之后的诊断和治疗提供基础。ChatGPT还可以提供最新的研究、临床指南或医学文献摘要,帮助医生作出准确评估。临床文本构成占据医生工作很大一部分比例,医生可能需要花费多达 35%的工作时间撰写和查看患者诊疗记录[12] 。临床文本撰写与医生的过度疲劳[13] 、认知负荷增加[14] 、焦虑[15]等不良状态相关。实现撰写自动化将极大降低医生负担。结合语音识别技术,ChatGPT有潜力实现诊疗全过程所需所有临床文本的自动化生成[16-17] 。有研究表明,通过传统方式撰写的出院小结往往会遗漏细节[18] ,ChatGPT有望改变这一现状[19] 。ChatGPT允许生输入任务简要说明、概念详细说明和指导解释,可在数秒内输出一份正式的出院小结。这一过程的自动化可以减轻初级医生的工作负担,使其有更多时间照护患者。
32 临床辅助决策
ChatGPT可以基于循证医学的患者/问题、干预措施、比较措施和结局 (patient/problem,intervention,comparison,andoutcome,PICO)辅助临床决策[20] 。ChatGPT可以获得患者医疗记录和病历数据并据此进行分析。医生将病例关键信息输入 ChatGPT,如实验室检查结果、影像学报告和病理学结果。ChatGPT可以帮助解释数据[21-23] ,并提供可能的诊断和进一步检查建议[24] 。已有研究[25]表明ChatGPT可用于分析可能会在阿尔茨海默病早期阶段发生变化的言语和写作的语言模式,基于此有可能实现痴呆症的早期诊断。RaoAS等[26]通过为乳腺癌筛查和乳房疼痛确定适当的影像学检查项目,评估 ChatGPT在放射学临床决策支持方面的能力,结果表明使用 ChatGPT进行影像学决策具有可行性,有可能改善临床工作流程,有助于更准确使用影像学服务。基于诊断结果,ChatGPT可以提供特定治疗药物信息,包括适应症、剂量、不良反应、药物相互作用以及药物数据库和药物指南,帮助医生选择治疗药物[27] 。ChatGPT可以提供常见治疗选项供医生选择[28] ,并解释每种干预措施的作用、机制、安全性和效果。此外还可以提供特定疾病预后的信息和统计数据 (如治愈率、生存率、并发症风险)等信息,帮助医生与患者共同评估治疗方案预期效果。医生可以与 ChatGPT讨论不同治疗方案,包括药物治疗、手术干预[29] 、放疗[30] 、化疗[31]等,ChatGPT提供不同治疗方案的优势、风险和效果评估,帮助医生与患者共同决定最优方案[32] 。
3 3 个性化精准医疗
ChatGPT在临床中的另一个潜在用途是为患者制定个性化治疗方案[33] 。ChatGPT可为患者创建虚拟助手,根据患者病史、当前症状和其他相关因素提供个性化建议。例如,虚拟助手可以为普通感冒或流感患者推荐非处方药或家庭疗法。患者可以通过各种平台访问虚拟助手,如网站、移动应用程序、语音助手等。这对居住在偏远地区或医疗资源不发达地区的患者尤其有帮助,其无须去医院就诊即可获得个性化诊疗建议。通过分析患者相关诊疗数据,基于 ChatGPT的系统可以生成满足患者特定需求和偏好的个性化治疗方案。这对需要特殊护理的复杂或罕见疾病患者尤其有帮助。例如,ChatGPT系统可根据患者病史和其他因素推荐最有可能对其有效的药物或疗法的特定组合。这可以帮助降低不良反应或其他并发症风险,并确保患者得到最适合的护理。
34 医患沟通、患者教育及心理支持
患者可能有关于病情、治疗方法、药物副作用等方面的疑问,ChatGPT可以回答这些问题[32] ,解释对患者来说晦涩难懂的医学术语含义,使其更容易理解医生的诊断和建议[34] 。医生在诊疗过程中可能无法详细解释所有细节,ChatGPT可以提供补充信息,例如疾病常见症状、治疗备选方案等,以帮助患者作出更加知情的决策。ChatGPT还可以向患者提供健康教育[35]和康复指导[29] ,帮助患者更好地管理康复过程,加速康复进程。医患共同决策对患者满意度和治疗结果非常重要,ChatGPT可以提供有关治疗选项、风险和益处的信息,帮助患者更好地参与决策过程[36] 。患者在疾病治疗过程中可能会感到焦虑、恐惧或沮丧[37] ,ChatGPT可以提供情感支持,倾听患者情绪,并提供鼓励和安慰[38] 。提供关于不同类型的心理疾病 (如抑郁症、焦虑症等)的疏导,分享情绪调节和应对策略[39] ,帮助患者和家属应对焦虑、抑郁、情绪波动等困扰。还可以提供关于心理治疗和咨询资源的信息,帮助患者和家属找到适合的支持和治疗。
35 临床研究开展
351 医学文献自动化阅读与知识提取 ChatGPT可以实现医学文献自动化阅读与知识提取[40] ,读取医学文献生成简洁的摘要,概括文献主要内容,帮助研究人员快速了解文献要点,节省阅读时间。ChatGPT可以根据用户提出的问题,从医学文献中提取相关知识,并给出答案[41] ,帮助研究人员和临床医生快速查找和利用医学文献中的知识[42] 。
352 构建知识图谱或网络 ChatGPT可以分析医学文献中的实体及其关系,构建知识图谱或网络[43] 。这种网络分析可以揭示不同实体之间的相互作用和关联,助研究人员发现新的关联和趋势。作为交互式文献检索工具,根据用户提供的查询条件,快速检索并筛选出相关医学文献,帮助研究人员快速找到感兴趣的文献,减少信息过载[44] 。
353 其他辅助应用 ChatGPT可以辅助研究人员制定实验设计和数据分析方法[45] ,提供关于实验设计、样本量计算、统计方法等方面的建议,帮助研究人员制定合理的实验方案和数据分析策略。帮助解释和解读实验结果,讨论数据的可靠性、显著性和实际意义,并提供数据可视化建议[46] 。还可以在科研论文撰写过程中提供多方面辅助[47] ,例如提供思路和灵感、优化结构和逻辑、提供语言和表达建议、辅助文献引用和参考文献、检查和改进论文质量等。
36 医学教育
ChatGPT可以根据医学教育需要生成教学内容,如讲义、教材、案例分析等,根据学生需求和知识水平提供个性化学习资源[48] ,帮助学生更好地理解和掌握医学知识。根据设定的知识点和考试要求自动生成医学考试试题,帮助减轻教师工作负担,并确保试题质量和准确性。此外,还能根据学生答题情况提供实时反馈和评估,帮助学生检测学习进度和薄弱领域。与学生进行交互,根据学生的问题和需求提供个性化教育指导[49-50] ;解答学生的疑问、提供补充解释和实例,帮助学生更深入地理解医学概念和原理。同时还可以根据学生学习情况和偏好推荐相关学习资源,实现个性化学习路径推荐。AI技术能够极大推动医学教育创新[51] ,结合ChatGPT和 元 宇 宙、虚 拟 现 实、增 强 现 实 等 技术[52] ,创造沉浸式医学教育体验。学生可以通过虚拟场景模拟实际医学操作和病例处理,与虚拟患者[53] 进行交互,进行实时医学实践训练和决策演练。ChatGPT在 这 一 过 程 中 作 为 学 生 的 虚 拟 导师[54] ,提供指导、反馈和疑问解答,提升学生的学习效果和实践能力。
37 医院管理与卫生系统管理
371 自动化分析和调配医院资源 ChatGPT通过自动化分析和调配医院资源,实现医疗资源合理配置和优化利用[55] 。帮助医院预测患者流量、诊断和治疗需求以及人员和设备需求。通过预测和优化,提高工作效率、减少等候时间,并优化医疗服务质量和成本效益。
372 传染病监测和预测 通过对大数据自动化分析和处理,ChatGPT可以辅助进行传染病监测和预测[56] ,帮助监测疾病传播趋势、风险区域,并提供科学依据用于传染病防控决策。挖掘数据中的关联性和规律性,辅助制定具有针对性的干预措施,预测发展趋势,并优化资源分配[57] 。
373 跟踪和改善医疗质量 基于医疗质量监测和管理,ChatGPT可以提高医疗服务质量和安全性[32] 。分析医疗数据,识别潜在的质量问题和风险因素,并提供决策支持用于改进医疗流程和标准。通过自动化质量监测和反馈,帮助医院和卫生系统实时跟踪和改善医疗质量,提高患者满意度和疾病预后。
374 监测和管理医保基金使用情况 通过监测和管理医保基金使用情况,为医保政策制定提供科学依据,通过分析医疗数据和费用数据,识别异常和风险,帮助发现医疗资源的浪费和滥用情况[58] 。通过自动化监测和管理,帮助控制医疗费用、优化医疗服务的效益,并支持医保政策制定和执行。
4 LLMs应用于临床医学面临的困境
41 数据可及性差且质量低
AI模型需要大样本训练以提高模型性能[59] ,其取得巨大成就的领域往往是那些拥有大量数据集且可以应用更复杂、更精确算法的领域[60] 。但是临床数据收集过程涉及多个参与方,数据质量可能存在差异[61] 。医生记录方式、术语使用和数据录入的准确性都可能不同,导致数据质量的不一致性。这可能会进一步导致模型在某些数据上表现不佳,或者无法准确预测某些结果。不同医疗机构的数据标准和结构存在差异,临床数据标准化程度较低,导致数据整合复杂,限制 LLMs在不同数据集之间迁移和应用。医疗数据包含大量敏感信息,如患者病史和治疗方案等,一旦泄露会给患者精神和心理等造成极大损害[62] 。患者知情同意同样值得关注,医疗机构有可能在未获得患者知情同意的情况下将患者数据大规模用于 AI模型训练[63] 。因此在医疗机构层面,数据共享受到许多因素限制,其中包括隐私和安全考虑、法律和法规要求以及医疗机构间的竞争和合规性问题,导致跨机构数据共享难以实现[62] 。AI模型更新迭代获得性能提升往往需要获得数据持续使用权限,增加了数据可及性的实现难度。
42 模型外部应用表现差,缺乏可解释性
在临床应用中,LLMs的精度和准确性对医生和患者至关重要。然而,LLMs训练数据可能存在偏见,会在生成结果时产生不准确或有偏倚的信息。这可能源于数据收集过程中的样本偏差、注释错误或模型在训练过程中学到的偏见。在临床医学中,这种偏见可能导致生成的建议或决策具有潜在风险或不准确性。AI模型过拟合[64]同样导致模型在训练时取得优异性能,但在外部应用时的预测结果差强人意。在医疗保健领域,模型解释性非常重要。医生和患者需要理解模型的推理过程和生成结果的依据。LLMs被认为是黑盒模型,难以解释其生成结果的逻辑和依据[65] ,这降低了模型生成结果信任度,并影响其在实际应用中的可靠性和可接受性。
43 与医疗实际需求和应用场景脱节,落地困难
医疗领域具有高度复杂性和专业性,需要深入的医学知识和专业判断。大语言模型可能在通用的语言理解能力方面表现出色,但对医学领域特定知识和专业性的理解仍然有限。这使大语言模型应用于医疗场景中的决策支持和临床指导变得困难。LLMs辅助诊疗目的在于提升医生工作效率和质量,如何将 LLMs整合至医生工作流程中也是一大难点,成功案例较匮乏,更多的 AI模型还处于实验阶段[66] 。在医疗实践中,决策和行动往往需要考虑多个因素,包括患者的个体差异、病情复杂性、实际可行性等,LLMs在评估实际需求和可行性方面可能面临挑战。
44 伦理问题
在临床医学中,公平性是一个重要的伦理原则,需要确保决策不会对某些人群造成不平等对待。因此,需要审查和纠正模型中的偏见,并确保其输出对所有患者都是公平和可信的。临床医学注重个性化治疗和关怀,需要考虑患者的特定情况、价值观和偏好。在使用大语言模型时,应注意避免将模型的推荐视为绝对标准,将其作为辅助工具,结合医生专业判断和患者个体情况进行决策。在医疗领域,错误决策可能导致严重后果,一旦发生必须追责。AI的黑箱问题导致无法找出错误预测或建议来源。LLMs应用带来责任和追溯性问题。当模型产生错误建议或决策时,如何确定责任和进行纠正是尚待解决的问题。医疗机构和开发者应建立机制,监测模型性能和安全性,并及时纠正和更新模型,以减少潜在风险和伦理问题。目前缺乏 AI用于医疗领域所产生伦理问题的行业性指南,缺乏统一标准规范 AI使用。美国食品药品监督管理局已经开始尝试建立评价 AI安全性和有效性的指南[67] ,英国国家医疗服务体系开始建立一系列指南用以评价 AI驱动的技术产品有效性[68] ,这也从侧面印证了 AI应用的伦理困境。
5 展望 LLMs对临床医学发展的影响
51 全方位提高医疗质量及其可及性从长期来看,LLMs将医生和其他医疗从业人员从撰写报告和执行繁琐行政任务中解脱出来,更多地投入到临床工作中。为医学生和医生提供基于语言交互的教育和培训,帮助医学生更好地掌握医学知识和技能。ChatGPT等 LLMs可以协助医生快速和准确地诊断病情、制定治疗方案,从而提供高质量医疗保健,减少患者因为多次就医而产生的费用。LLMs技术可以预测患者可能面临的潜在疾病风险。应用 LLMs技术,通过对大量数据的学习和模式识别,医生和患者及早发现潜在的健康问题。根据患者个性化特征和病情特点,提供具有针对性的治疗方案,同时 AI还可以对患者健康状况进行追踪和预测,从而避免不必要的复诊和住院。LLMs可被用于医疗水平欠发达地区,帮助提高医生及其助手的能力,协助分诊,促进远程诊疗。通过在互联网上提供在线诊疗和远程医疗服务,LLMs可以帮助缩小城乡医疗差距,为更广大人群提供更好的医疗体验。
52 多维度挖掘组学数据为患者提供更多选择LLMs在医学大数据挖掘方面的应用潜能广泛而多样,可以处理临床病理数据,帮助解读组织切片图像和病理报告,辅助病理学家进行疾病分类和预后评估。在基因组学数据方面,LLMs可以辅助分析基因表达和突变数据,帮助发现新疾病相关基因和生物标志物,并揭示基因调控网络。对转录组学数据的辅助分析可以揭示差异表达基因和通路,预测药物效应和治疗反应。在蛋白组学数据方面,LLMs可以帮助识别蛋白标志物和相互作用,揭示疾病机制。此外,LLMs还能帮助处理代谢组学数据和医学影像数据,帮助研究人员从代谢通路和影像特征中有所发现,并提供个性化医疗支持。LLMs技术可以帮助加速医学研究进程,例如在疾病预测、药物开发和治疗方案制定等方面。LLMs可在大规模化合物数据库中进行搜索和筛选,根据已知药物性质和目标疾病信息,提供潜在药物候选物,或者生成新的分子结构,预测其药理学性质,并评估其在特定疾病治疗中的潜在效果。这将有助于更快地发现新的治疗方法,为患者提供更好的治疗选择。
53 新一代 AI模型全面颠覆医疗生态圈以 GPT-4、MidJournal等为代表的新一代 AI模型,未来有望将医学图像分析和医学视频分析推向新高度。这些模型将结合深度学习、计算机视觉和医学知识,实现对超声、核磁共振、计算机断层扫描、病理图像和核医学影像等医学图像的自动解读和分析。进而自动检测异常区域、提取特征,并与大量医学数据库进行比对,提供更准确的疾病诊断和治疗建议。帮助医生更准确地定位病变、评估病情严重程度,并在早期发现疾病迹象,提供更早、更精准的诊断结果。提高疾病的治疗效果和预后,并为患者提供更个性化的医疗服务。同时,结合医学视频分析,新一代 AI模型可以帮助医生解读手术过程、手术视频、诊疗操作视频等,识别关键步骤、评估手术操作的准确性,并提供实时建议和反馈。从而提高手术的安全性、准确性和效果,为医生提供更可靠的诊疗辅助工具,使医疗质量和手术结果得到进一步提升。LLMs等 AI模型具有全面的图像和视频分析能力,其应用将推动临床医学诊疗模式和医疗生态圈产生全面变革。此类模型有潜力加速医学诊断和治疗过程,提高医疗资源利用效率,并促进个性化医疗发展。医生可以更专注于更复杂的病例和治疗策略决策,通过应用 LLMs可提供更准确、个性化的医疗建议,并为患者提供更全面的关怀和治疗方案。
结语
以 ChatGPT为代表的 LLMs在临床诊疗、随访、护理、医学教育、医院管理等诸多健康相关领域具有应用潜能,具有重塑医疗卫生行业服务模式的能力。虽然面临技术、伦理、法律和社会问题等诸多难题,但 ChatGPT的问世已经开启医疗领域重大变革,唯有紧随技术发展趋势,方能乘势而上,有所成就。
参考文献
1 MANNINGCDHumanlanguageunderstanding&reason
ing[J].Daedalus,2022,151(2):127-138.
2 MANNDLArtificialintelligencediscussestheroleofarti
ficialintelligenceintranslationalmedicine:aJACC:basic
totranslationalscienceinterviewwithChatGPT[J].Basic
totranslationalscience,2023,8(2):221-223.
3 ZHOUC,LIQ,LIC,etalAcomprehensivesurveyonpre
trainedfoundationmodels:ahistoryfromberttochatgpt[EB/
OL].[2023-06-11].https://arxivorg/abs/230209419.
4 XIACS,ZHANGLConversationalautomatedprogramre
pair[EB/OL].[2023-06-09].https://arxivorg/abs/
230113246.
5 ZHENGO,ABDEL-ATYM,WANGD,etalChatGPT
isonthehorizon:couldalargelanguagemodelbeallwe
needforintelligenttransportation[EB/OL].[2023-06-
06].https://arxivorg/abs/230305382.
6 OUYANGL,WUJ,JIANGX,etalTraininglanguagemod
elstofollow instructionswithhumanfeedback[EB/OL].
[2023-06-11].https://arxivorg/abs/220302155.
7 YES,HWANGH,YANGS,etalIn-contextinstruction
learning[EB/OL].[2023-06-07].https://arxivorg/
abs/230214691.
8 KUNGTH,CHEATHAMM,MEDENILLAA,etalPer
formanceofChatGPTonUSMLE:potentialforAI-assisted
medicaleducationusinglargelanguagemodels[J].PLOS
digitalhealth,2023,2(2):e198.
9 PubMedQAPubMedQA:adatasetforbiomedicalresearch
questionanswering[EB/OL].[2023-04-01].https://
pubmedqagithubio/.
10 SINGHALK,AZIZIS,TUT,etal.Largelanguagemodels
encodeclinicalknowledge[EB/OL].[2023-07-18].
https://wwwnaturecom/articles/s41586-023-06291
-2#citeas.
11 DELIBERATORO,CELILA,STONEDJClinicalnote
creation,binning,andartificialintelligence[J].JMIR
medicalinformatics,2017,5(3):e7627.
12 JOUKESE,ABU-HANNAA,CORNETR,etalTime
spentondedicatedpatientcareanddocumentationtasksbe
foreandaftertheintroductionofastructuredandstandard
izedelectronichealthrecord[J].Appliedclinicalinformat
ics,2018,9(1):46-53.
13 FRIEDBERGMW,CHENPG,VANBUSUMKR,etal
Factorsaffectingphysicianprofessionalsatisfactionandtheir
implicationsforpatientcare,healthsystems,andhealthpol
icy[J].Randhealthquarterly,2014,3(4):1.
14 WACHTERR,GOLDSMITHJTocombatphysicianburn
outandimprovecare,fixtheelectronichealthrecord[EB/
OL].[2023-06-10].https://hbrorg/2018/03/to-
combat-physician-burnout-and-improve-care-fix-
the-electronic-health-record.
15 CAMPBELLEM,SITTIGDF,ASHJS,etalTypesof
unintendedconsequencesrelatedtocomputerizedprovider
orderentry[J].JournaloftheAmericanmedicalinformat
icsassociation,2006,13(5):547-556.
16 KLANNJG,SZOLOVITSPAnintelligentlisteningframe
workforcapturingencounternotesfromadoctor-patientdi
alog[J].BMCmedicalinformaticsanddecisionmaking,
2009,9(S1):1-10.
17 DIGIORGIOAM,EHRENFELDJMArtificialintelligence
inmedicine& ChatGPT:de-tetherthephysician[J].
Journalofmedicalsystems,2023,47(1):32.
18 EARNSHAW CH,PEDERSENA,EVANSJ,etalImpro
vingthequalityofdischargesummariesthroughadirect
feedbacksystem [J].Futurehealthcarejournal,2020,7
(2):149.
19 PATELSB,LAM KChatGPT:thefutureofdischarge
summaries[J].Thelancetdigitalhealth,2023,5(3):
e107-e108.
20 FATANIBChatGPTforfuturemedicalanddentalresearch
[J].Cureus,2023,15(4):e37285.
21 CADAMUROJ,CABITZAF,DEBELJAKZ,etalPotentials
andpitfallsofChatGPTandnatural-languageartificialintelli
gencemodelsfortheunderstandingoflaboratorymedicinetest
resultsAnassessmentbytheEuropeanfederationofclinical
chemistryandlaboratorymedicine(EFLM)workinggroupon
artificialintelligence(WG-AI)[J].Clinicalchemistryand
laboratorymedicine,2023,61(7):1158-1166.
22 BISWASSSRoleofChatGPTinradiologywithafocuson
23 HUM,PANS,LIY,etalAdvancingmedicalimaging
withlanguagemodels:ajourneyfromn-gramstoChatGPT
[EB/OL].[2023-06-02].https://arxivorg/abs/2304
04920.
24 HARSKAMPRE,DECLERCQLPerformanceofChatGPT
asanAI-assisteddecisionsupporttoolinmedicine:aproof
-of-conceptstudyforinterpretingsymptomsandmanage
mentofcommoncardiacconditions(AMSTELHEART-2)
[EB/OL].[2023-05-18].https://wwwmedrxivorg/
content/101101/2023032523285475v1.
25 AGBAVORF,LIANGHPredictingdementiafromsponta
neousspeechusinglargelanguagemodels[J].PLOSdigital
health,2022,1(12):e168.
26 RAOAS,KIMJ,KAMINENIM,etalEvaluatingChatG
PTasanadjunctforradiologicdecision-making[EB/
OL].[2023-06-10].https://wwwmedrxivorg/con
tent/101101/2023020223285399v1.
27 RAOAS,PANGM,KIMJ,etalAssessingtheutilityofChat
GPTthroughouttheentireclinicalworkflow[EB/OL].[2023-
05-23].https://pubmedncbinlmnihgov/36865204/.
28 LIUS,WRIGHTAP,PATTERSONBL,etalAssessing
thevalueofChatGPTforclinicaldecisionsupportoptimiza
tion[EB/OL].[2023-05-29].https://pubmednc
binlmnihgov/36865144/.
29 CHENGK,SUNZ,HEY,etalThepotentialimpactof
ChatGPT/GPT-4onsurgery:willittoppletheprofessionof
surgeons[J].Internationaljournalofsurgery,2023,109
(5):1545-1547.
30 HUANGY,GOMAA A,WEISSMANN T,etalBench
markingChatGPT-4onACRradiationoncologyin-train
ingexam(TXIT):potentialsandchallengesforAI-assis
tedmedicaleducationanddecisionmakinginradiationon
cology[EB/OL].[2023-06-15].https://arxivorg/
abs/230411957.
31 HOPKINSAM,LOGANJM,KICHENADASSEG,etal
Artificialintelligencechatbotswillrevolutionizehowcancer
patientsaccessinformation:ChatGPTrepresentsaparadigm
-shift[J].JNCIcancerspectrum,2023,7(2):10.
32 JAVAIDM,HALEEMA,SINGHRPChatGPTforhealth
careservices:anemergingstageforaninnovativeperspec
tive[J].BenchCounciltransactionsonbenchmarks,stand
ardsandevaluations,2023,3(1):1-11.
33 SALLAMMTheutilityofChatGPTasanexampleoflargelan
guagemodelsinhealthcareeducation,researchandpractice:
systematicreviewonthefutureperspectivesandpotentiallimi
tations[EB/OL].[2023-06-09].https://wwwmedrxiv
org/content/101101/2023021923286155v1.
34 LYUQ,TANJ,ZAPADKAME,etalTranslatingradiolo
gyreportsintoplainlanguageusingchatgptandgpt-4with
promptlearning:promisingresults,limitations,andpoten
tial[EB/OL].[2023-05-19].https://arxivorg/abs/
230309038.
35 SALLAMM,SALIMN,BARAKATM,etalChatGPTap
plicationsinmedical,dental,pharmacy,andpublichealth
education:adescriptivestudyhighlightingtheadvantages
andlimitations[J].NarraJ,2023,3(1):e103.
36 ZHUL,MOUW,CHENRCantheChatGPTandother
largelanguagemodelswithinternet-connecteddatabase
solvethequestionsandconcernsofpatientwithprostate
cancerandhelpdemocratizemedicalknowledge[J].Jour
naloftranslationalmedicine,2023,21(1):1-4.
37 DEJEAND,GIACOMINIM,VANSTONEM,etalPatient
experiencesofdepressionandanxietywithchronicdisease:
asystematicreviewandqualitativemeta-synthesis[J].
Ontariohealth technology assessmentseries, 2013, 13
(16):1.
38 ESHGHIEM,ESHGHIEMChatGPTasatherapistassis
tant:asuitabilitystudy[EB/OL].[2023-06-01].https:
//arxivorg/abs/230409873.
39 YANGK,JIS,ZHANG T,etalOntheevaluationsof
ChatGPTandemotion-enhancedpromptingformentalhealth
analysis[EB/OL].[2023-05-23].https://arxivorg/
abs/230403347.
40 ARIFTB,MUNAFU,UL-HAQUEIThefutureofmed
icaleducationandresearch:isChatGPTablessingorblight
indisguise[J].Medicaleducationonline,2023,28(1):
2181052.
41 VAISHYAR,MISRAA,VAISHAChatGPT:isthisver
siongoodforhealthcareandresearch[J].Diabetes&meta
bolicsyndrome:clinicalresearch&reviews,2023,17(4):
102744.
42 GAOCA,HOWARDFM,MARKOVNS,etalCompa
ringscientificabstractsgeneratedbyChatGPTtooriginalab
stractsusinganartificialintelligenceoutputdetector,plagia
rism detector,andblindedhumanreviewers[EB/OL].
[2023-06-02].https://wwwbiorxivorg/content/10
1101/20221223521610v1.
43 OMARR,MANGUKIYA O,KALNISP,etalChatGPT
versustraditionalquestionansweringforknowledgegraphs:
currentstatusandfuturedirectionstowardsknowledgegraph
44 WANGS,SCELLSH,KOOPMANB,etalCanChatgPT
writeagoodbooleanqueryforsystematicreviewliterature
search[EB/OL].[2023-05-18].https://arxivorg/
abs/230203495.
45 LUNDBD,WANGTChattingaboutChatGPT:howmay
AIandGPTimpactacademiaandlibraries[J].Libraryhi
technews,2023,40(3):26-29.
46 MACDONALDC,ADELOYED,SHEIKH A,etalCan
ChatGPTdraftaresearcharticle?Anexampleofpopulation
-levelvaccineeffectivenessanalysis[J].Journalofglobal
health,2023,13(2):1003.
47 KUMARAHAnalysisofChatGPTtooltoassessthepoten
tialofitsutilityforacademicwritinginbiomedicaldomain
[J].Biology,engineering,medicineandsciencereports,
2023,9(1):24-30.
48 ZHAIXChatGPTandAI:thegamechangerforeducation
[EB/OL].[2023-05-03].https://papersssrncom/
sol3/paperscfm?abstract_id=4389098.
49 CHANKS,ZARYNApplicationsandchallengesofimple
mentingartificialintelligenceinmedicaleducation:integrative
review[J].JMIRmedicaleducation,2019,5(1):e13930.
50 WHALLEYB,FRANCED,PARKJ,etalTowardsflexi
blepersonalizedlearningandthefutureeducationalsystem
inthefourthindustrialrevolutioninthewakeofCovid-19
[J].Highereducationpedagogies,2021,6(1):79-99.
51 PARANJAPEK,SCHINKELM,PANDAYRN,etalIn
troducingartificialintelligencetraininginmedicaleducation
[J].JMIRmedicaleducation,2019,5(2):e16048.
52 TALANT,KALINKARA YTheroleofartificialintelli
genceinhighereducation:ChatGPTassessmentforanatomy
course[J].Uluslararasynetimbili爧imsistemlerivebilgi
sayarbilimleridergisi,2023,7(1):33-40.
53 SEETHARAMAN R Revolutionizingmedicaleducation:
canChatGPTboostsubjectivelearningandexpression[J].
Journalofmedicalsystems,2023,47(1):1-4.
54 BAIDOO-ANUD,OWUSUANSAHLEducationintheera
ofgenerativeartificialintelligence(AI):understandingthe
potentialbenefitsofChatGPT in promotingteachingand
learning[EB/OL].[2023-06-05].https://papersss
rncom/sol3/paperscfm?abstract_id=4337484.
55 LUY,WUH,QIS,etalArtificialintelligenceininten
sivecaremedicine:towardaChatGPT/GPT-4way[EB/
OL].[2023-03-10].https://pubmedncbinlmnih
gov/37179277/.
56 CURYRC,MEGYERII,LINDSEYT,etalNaturallan
guageprocessingandmachinelearningfordetectionofre
spiratoryillnessbychestctimagingandtrackingofcovid-
19pandemicintheunitedstates[J].Radiology:cardiotho
racicimaging,2021,3(1):e200596.
57 CHENGK,LIZ,HEY,etalPotentialuseofartificialin
telligenceininfectiousdisease:takeChatGPTasanexample
[J].Annalsofbiomedicalengineering,2023,51(6):
1130-1135.
58 BISWASSUsingChatGPTforinsurance:currentandpro
spectiveroles[EB/OL].[2023-05-11].https://pa
persssrncom/sol3/paperscfm?abstract_id=4405394.
59 JOHNSONKW,TORRESSOTOJ,GLICKSBERGBS,etal
Artificialintelligenceincardiology[J].JournaloftheAmeri
cancollegeofcardiology,2018,71(23):2668-2679.
60 LOPEZK,FODEHSJ,ALLAMA,etalReducinganno
tationburdenthroughmultimodallearning[J].Frontiersin
bigdata,2020,3(1):19.
61 DASHS,SHAKYAWARSK,SHARMAM,etalBigdata
inhealthcare:management,analysisandfutureprospects
[J].Journalofbigdata,2019,6(1):1-25.
62 SUNTQ,MEDAGLIARMappingthechallengesofartifi
cialintelligenceinthepublicsector:evidencefrompublic
healthcare[J].Governmentinformationquarterly,2019,
36(2):368-383.
63 KILOVATYIPsychologicaldatabreachharms[J].North
Carolinajournaloflaw&technology,2021,23(1):1-65.
64 WIENSJ,SHENOYESMachinelearningforhealthcare:
onthevergeofamajorshiftinhealthcareepidemiology[J].
Clinicalinfectiousdiseases,2018,66(1):149-153.
65 WANGF,KAUSHALR,KHULLARDShouldhealthcare
demandinterpretableartificialintelligenceoraccept“black
box”medicine[J].Annalsofinternalmedicine,2020,
172(1):59-60.
66 WILSONA,SAEEDH,PRINGLEC,etalArtificialintel
ligenceprojectsinhealthcare:10practicaltipsforsuccess
inaclinicalenvironment[J].BMJhealth&careinformat
ics,2021,28(1):e100323.
67 DAVAHLIM R,KARWOWSKIW,FIOKK,etalCon
trollingsafetyofartificialintelligence-basedsystemsin
healthcare[J].Symmetry,2021,13(1):102.
68 MORRISONKArtificialintelligenceandtheNHS:aquali
tativeexplorationofthefactorsinfluencingadoption[J].
Futurehealthcarejournal,2021,8(3):e648.