美国外科医生用HoloLens 2远程指导巴西医生对婴儿大脑模型进行精细手术
麻省理工学院正与一家AR/VR初创公司合作，共同创建跨大陆的沉浸式医学教学。
（映维网Nweon 2024年03月11日）美国波士顿儿童医院的著名神经外科医生本杰明·沃夫（Benjamin Warf）身在麻省理工学院的MIT.nano Immersion Lab。在3000多英里之外，他的虚拟化身正站在远在巴西的马修斯·瓦斯孔塞洛斯（Matheus Vasconcelos）旁边，并指导这位住院医生对一个娃娃状的婴儿大脑模型进行精细手术。
戴上一副HoloLens 2头显，瓦斯孔塞洛斯就可以查看沃夫的化身演示脑部手术过程，然后自己再尝试复刻并随时向沃夫的数字孪生提问。
沃夫说道：“这几乎是一种灵魂出窍的体验。或许这就是拥有一个同卵双胞胎的感觉吧？”
这正是团队的目标：创建跨大陆的沉浸式医学教学。其中，沃夫的数字孪生体可以跨越地理限制，并在世界各地发挥功效。
巴西圣保罗医学院的神经外科住院医生瓦斯孔塞洛斯说道：“这是我第一次使用模型进行训练，它的表现非常出色。作为一名住院医师，能够获得教授的指导，我现在对在真正病人身上执行手术感到更加自信和舒适。”
沃特的虚拟化身是基于AR/VR初创EDUCSIM的一个新项目。在2023年3月，EDUCSIM的吉赛尔·科埃略（Giselle Coelho）开始与麻省理工学院的技术人员合作，共同创造沃夫的虚拟化身。到了同年11月，这种虚拟化身已经开始训练像瓦斯孔塞洛斯这样的未来外科医生。
吉赛尔说道：“我有了创造沃特医生的化身作为概念验证的想法，我当时在想，‘世界上哪个地方会有人在研究这样的技术？’。然后我找到了MIT.nano。”
作为一名神经外科住院医师，吉赛尔经常因为缺乏复杂手术的实用培训选择而感到非常沮丧，于是她建立了自己的婴儿大脑模型。物理模型包含大脑的所有结构，甚至可以出血，所以从切口到皮肤闭合，它能够“模拟手术的所有步骤”。
吉赛尔很快发现，模拟器和AR/VR演示减少了她的学习曲线，于是她于2017年创办了EDUCSIM，从而为希望学习新技术的住院医生和专家扩大培训的种类和范围。
为了创造虚拟化身，吉赛尔与麻省理工学院的AR/VR/游戏/大数据IT技术专家塔拉斯·里克斯（Talis Reks）合作。
里克斯解释说，最大的挑战之一是帮助开发吉赛尔所说的“全息传输”，亦即通过互联网实时传输沃夫的3D立体视频，这样他的虚拟化身就可以出现在跨洲医疗培训中。
相关解决方案有同步和异步模式。瓦斯孔塞洛斯接受的培训是异步模式，其中你可以观察虚拟化身的演示并向它提问。系统能够通过借鉴了之前的研究和沃夫提供的大量问题和答案的人工智能算法，并以多种语言提供。
至于同步模式，沃夫可以从远处实时操作他的虚拟化身，并实时进行真正的全息通话。
实际上，沃夫在培训世界各地急需的儿科神经外科医生方面有着悠久的历史。他指出，自疫情爆发以来，远程和模拟培训在培训中所占的比例越来越大，所以“如果有一天我们能拥有像吉赛尔这样的虚拟化身，向遥远地方的人们展示如何做事，并为他们回答问题，不需要任何差旅成本，不需要任何时间成本等等，我认为这将是非常强大的解决方案”。
吉赛尔认为，这种项目对于在偏远和服务不足地区服务的外科医生尤其重要，比如巴西的亚马逊地区：“通过这种方式，他们可以获得与其他地方相同的教育水平，并有机会与沃夫医生取得联系。”
例如，最近在亚马逊一家诊所接受脑积水治疗的一名婴儿需要乘船30个小时才能得以接受手术。若是通过虚拟化身训练外科医生，我们“不仅可以改变这个孩子的现实，而且可以改变未来”。
