上海新华医院孙新:利用大模型等创新科技赋能智慧医院建设

发布时间:2023-06-08
浏览次数:

  在国家政策引领下,近年来各地智慧医院的建设如火如荼,诸如元宇宙、大模型等科技圈“热词”开始频繁出现在医疗领域。但如何让新兴技术真正落地有效服务患者,依旧是摆在许多医院面前的一道考题。

  在2023年中国医院信息网络大会(CHIMA 2023)的领导力论坛上,上海交通大学医学院附属新华医院临床研究与创新中心主任、新华儿童医院副院长孙新,分享了新华医院将人工智能、大模型、元宇宙等新兴技术落地于辅助诊疗、互联网问诊、健康咨询以及随访等医疗场景,提升医院医疗水平、患者服务水平和管理水平的经验,为行业带来诸多启发。

微信图片_20230608092517.jpg

  从诊前到诊后,大模型赋能患者就医体验升级

  ChatGPT的横空出世让大模型迅速晋升为科技圈“顶流”,不少人预见了其在医疗行业的潜力,但由于医疗行业对准确性和一致性有着极高标准,对大模型在医疗场景的落地也提出了较高的要求。而在众多观望者身前,先行者已经迈步涉水。

  在上海市委、市政府的领导下,新华医院已经迈入便捷就医数字化转型的3.0阶段。从1.0阶段的智能预问诊、医院付费“一件事”等7大场景,到2.0阶段新增临床科研相关工作,如今在3.0阶段,新华医院推出了新华服务十二条建设目标,进一步完善患者的便捷就医。基于和人工智能领军企业商汤科技的合作,新华医院已利用人工智能、医疗语言大模型等数字化技术,落地了智能预问诊、智能导诊、AR导航等一系列便捷就医功能,为大模型在医疗场景的应用提供了有价值的参考。

  基于海量医学知识和真实医患互动对话数据打造的超大参数大模型,能够帮助患者在导诊、预问诊等场景下通过交互式对话快速获取全面且准确的信息并提供智能引导,有效解决院前患者自主分诊、院中就医流程指引的困难。未来随着大模型对医疗语言的理解和推理能力不断提升,患者的就医服务体验的更多环节还将进一步得到赋能。

微信图片_20230608092523.jpg

  除了聚焦患者诊前需求,在诊后随访环节,新华医院也创新地将大模型技术融入其中。“很多时候进行慢病的管理和诊后管理,随访是最为缺少的。”据孙新介绍,为了弥补过去随访工作中的不足以及更好地支撑高水平临床科研,新华医院打造了全院级数智化随访中心,融合了关怀性随访、诊疗随访、科研随访三部分,涵盖诊后管理、康复指导、专病随访、医患互动、护理延伸、智能提醒、健康教育、智能预警八个板块的功能。

  在大模型的赋能下,通过交互式多轮语音智能问答,随访系统可自动提问并收集患者信息生成结构化随访报告,不仅优化患者诊后随访服务,也进一步提升医院随访效率,实现大模型对临床科研的赋能。

微信图片_20230608092525.jpg

  当医院遇上元宇宙,候诊大厅秒变“儿童乐园”

  不同于其他大多数医院,新华医院既有综合性的成人医院,也有成体制的综合儿童医院。因此在进行数字化建设的顶层设计时,既要考虑成人的需求,也要顾及儿童的需求。多元、差异化成为了新华医院数字化转型的关键词,在实际探索中,元宇宙的引入巧妙地解决了儿童就医的诸多痛点。

  例如,为了消除孩子们来医院看病时的恐惧心理,新华医院与商汤科技合作探索了元宇宙的场景落地,“我们现在做了海底世界和冰雪世界两个主题,还有其他的游戏,希望能够对孩子们的心灵起到安抚作用。”在海底世界主题中,只需打开手机摄像头,就可以看到形态各异的海洋生物穿梭在医院的候诊大厅,让孩子仿佛置身于海洋世界。场景内嵌的捉鱼小游戏还能进一步强化与场景的互动,让医院短暂地变成“儿童乐园”。

  为了提升孩子们就医过程的趣味性,新华医院还定制化开发了“新华豆”功能,只要按正常预约的时间及时就诊报到,小朋友就能获得“新华豆”的奖励,用于换取小礼品等权益。

微信图片_20230608092527.jpg

  AI技术助力数字外科体系打造

  AI在临床领域的应用也是医院数字化的重要一环,这一点在业内已成为共识。孙新介绍,新华医院目前正着力打造基于数字人体的数字手术和数字外科体系,已针对心、脑、肝、肺等器官的诊疗展开应用。

  例如,新华医院引入了商汤科技的一站式脑卒中解决方案,能够在短时间内快速完成脑出血全自动智能分析、脑缺血ASPECT自动评分、CTP脑灌注全智能量化分析、头颈血管智能提取和重建分析等功能,极大提升了医生的诊疗效率。针对肺部和肝脏的切除手术,新华医院引入了商汤科技的手术规划系统,将原本需要耗时数小时的手术规划环节缩短至3-5分钟,通过精细化的三维重建,基于AI算法智能模拟不同切除术式,并提供可视化、参数化的对照,方便医生直观对比不同方案的切除效果。系统还支持查看剩余组织、切除组织及切除病灶的定量计算结果,辅助医生全面客观评估手术效果。

微信图片_20230608092530.jpg

  “现在追求的不单是降低死亡率,还要同时降低致残率,让更多的患者不仅活着,还要高质量的活着。”孙新表示,这正是医疗人运用AI赋能临床的初心。

  “数字化的医疗科技是人类健康和寿命延长的驱动力。”孙新表示,希望在大模型、元宇宙等技术的赋能下,医院的数字化转型能够持续深入,让智慧化的医疗服务造福公众,助力构建更为完善的未来健康体系。

  本文由商汤科技供稿