当多模态大模型遇见外科手术场景,会碰撞出什么样的火花?六月,香港大学牙医学院口腔颌面外科的专家团队利用uAI MERITS多元手术治疗平台完成了「全球首例」多模态大模型驱动的口腔颌面整复外科手术,联影智能在医疗AI人工智能领域的又一创新应用为虚实结合的手术技术发展开启了一个全新方向。
图1:术中使用uAI MERITS
该医疗AI人工智能技术的创新点在于通过影像大模型分割算法及智能动态跟踪投影技术,解决了在穿支皮瓣制备中,医生靠经验和感觉定位穿支血管的临床痛点,大大提升了手术效率和精准度。
图2:医生根据3D重建的血管投影标记小腿穿支血管
目前,该团队已成功完成三例由uAI MERITS平台赋能的口腔颌面整复外科手术,其中区别于前两例的腓骨肌皮瓣制备手术,第三例手术首次实现了股前外侧穿支皮瓣制备手术。这些里程碑式的成功标志着多模态大模型在口腔颌面外科领域迈出了重要一步,为虚实结合的手术技术发展开启了一个新方向。
本次以多模态大模型为代表的医疗AI人工智能新技术在手术场景中的成功应用,得益于联影智能在医学影像领域的长期深耕与积累。例如在本次手术中发挥关键血管重建作用的CTA下肢血管医疗AI人工智能系统,辅助了医生实现快速、精准的腓骨肌皮瓣移植。
图3:CTA下肢血管医疗AI人工智能系统辅助穿支血管分割重建
该应用是联影智能在「全栈全谱」策略下所推出的其中一款医疗AI人工智能应用。截至目前,联影智能已开发超过100多款医疗AI人工智能应用,其中50多款应用专注于临床工作流程,覆盖神经、心血管、胸部、肿瘤、手术等。
基于既有的医学影像AI产品布局,并深度融合前沿的大模型技术,未来AI在医疗场景中的应用边界将进一步拓宽、拓深。医疗AI人工智能技术不仅能够为临床决策提供强有力的支持,还能在复杂疾病的治疗中发挥关键作用,带动整体医疗行业的智能升级。联影智能相信,人工智能技术终将赋能、引领临床诊疗迈向更加精准、安全和规范的新境界。