瑞典一家公司用VR技术做了一个专门用于医生培训的模拟人,第一代模拟人只能做心肺复苏,而如今已经可以预先对模拟病人进行编程、对复杂病情进行模拟,这种新的模拟人可以模拟婴儿、孕妇、脑中风及骨折患者,从而进入实际应用。
法国Paris Descartes University(巴黎第五大学)的Thomas Gregory在手术过程中将Oculus Rift和GoPro结合,为其他实习医生进行手术视频体验教学。在髋关节手术中,医生佩戴了虚拟现实设备,两个互为同步的GoPro摄像头安装在Gregory的前额上,最终可以得到Gregory视角下的三维手术视频。
Barts Health NHS Trust的肿瘤外科医生Shaf?i Ahmed博士(癌症外科医生,Medical Realities的联合创始人之一)与虚拟现实和360°视频制作科技公司Mativision合作在皇家伦敦医院直播了一场在一位结肠癌患者身上进行的手术,使用增强现实和虚拟现实来改变医学院学生的培训方式,整个过程使用两台拥有多镜头的360°摄像机拍摄,然后在OR应用中使用Mativision的360°虚拟现实播放器直播。
随着镜头的切换,画面变成了3D腹腔镜拍摄的场景。手术刀一寸寸地深入患者的脏器,黄色的脂肪、白色的组织、红色的脏腑清晰可见。3D腹腔镜是主刀医生的另一双眼睛,帮助医生辨识每一个组织,进行更精细的手术操作。通过VR眼镜,我们也看到了主刀医生所看到的一切。这对于从未接触过解剖图像的观摩者而言,无疑具有强烈的感官震撼。用户只要使用一个虚拟现实头戴设备,例如Google Cardboard或者其他消费者版本的头戴设备,就能够远程观看手术。
台湾柯惠医疗临床培训中心也在利用计算机和专业软件提供VR医疗培训。该中心不仅为医生提供了更逼真的实验环境,还减少了传统培训对动物的伤害。从2014年10月至2015年上半年,已经有400位急救和麻醉相关的专业医疗人员在这里进行了培训,培训效果比以往更好。
美国加州健康科学西部大学的虚拟现实中心拥有zSpace显示屏、Anatomage虚拟解剖台、Oculus Rift和iPad上的斯坦福大学解剖模型,旨在帮助学生利用VR学习牙科、骨科、兽医、物理治疗和护理等知识。
英国政府已经使用VR技术进行医护人员训练。护士可能会使用VR技术来练习未来会遇到的分娩、创伤、手术或心理健康等不同情况。
中国顶尖眼科专家徐雯在2016年7月5日成为全球首播的VR直播眼科手术的主刀之一。这一天下午1:30,浙医二院眼科中心的手术室内,医生们设计手术切口的位置和大小,切口、撕囊,将浑浊的晶体击碎、吸除,植入人工多焦可调节晶状体。手术室外的教室里,数十位年轻医生紧紧盯着直播画面。与往常不同,他们不是盯着电视显示屏,而是盯着每个人头上戴着的VR眼镜。此刻的他们仿佛正在亲自“操刀”这场手术,不仅身临其境,更能看到以往电视转播时看不到的画面。特殊的图像采集设备将显微镜下的画面传输到VR设备里,三维呈现立体画面,观者看到的画面和从显微镜里看到的一模一样。
眼科手术精细无比,手术操作范围不超过1cm,手术的切口更是只有2~3mm。以往,这么精细的画面,除非你亲自到显微镜下看,否则不足以窥其全貌。而在VR环境下,这不再是问题,手术操作的长度、宽度甚至深度都一览无余,就连眼球表面的血管都一条条清晰可见。
增强现实及虚拟现实公司Next Galaxy一直在做这件事情。它通过与Miami Children’s Hospital(迈阿密儿童医院)合作,共同开发了一款针对医学指导的虚拟现实软件,帮助医疗工作者更好地掌握心肺复苏技术(CPR)、鼻导管插入技术、插管法、伤口处理、海姆立克急救法。利用Leap Motion的力量反馈机制,Next Galaxy可以帮助受训员很快找到自己的错误点。
水立方公司于2016年4月推出了助产培训VR/AR系统。这套助产三维仿真系统通过三维虚拟仿真的操作模式,利用3D动态模拟和交互式控制实现了三维交互式教学,可以从多个视角、剖视、透视、360°地旋转操作部位并对操作部位进行放大或缩小,使学生可以从多个方位观看操作步骤,学习护理和接生的过程及手法。同时,学生还可以佩戴相应的头盔与手套,在系统中对护理、接生过程进行模拟操作练习。
目前此套助产培训VR/AR系统主要分为六大模块,包括影响产妇的四个因素、四步触诊、分娩机制、平产接生、人工流产以及臀位助产模块,基本涵盖了产科教学中的常规内容,未来水立方还将对系统进一步升级,加入对分娩过程中突发情况的处置模块。
国内领先的VR医疗技术公司医微讯开发了医疗教学软件柳叶刀客,由于临床上80%的手术失误是人为因素引起的,所以手术训练极其重要。医学生可在柳叶刀客上360°无死角地观察专家的手术过程,也可重复练习。3D虚拟手术使得手术培训的时间大为缩短,同时减少了对昂贵的实验对象的需求。柳叶刀客后续版本还可为操作者提供一个极具真实感和沉浸感的训练环境,能够制造很好的临场感,所以训练过程与真实情况几乎一致,还能够给出对手术练习的评价。年轻医生在真正动手术之前,通过虚拟现实技术的帮助,能在移动设备上重复地模拟手术,移动人体内的器官,快速掌握手术方案并提高熟练度。
牛津大学精神病学部通过对牛津健康NHS信托基金会的病人进行研究,发现让病人在VR中面对自己害怕的情景可以帮助病人建立自信,发现自己所害怕的东西其实非常安全。
虚拟手术的概念最早于1989年提出,即利用计算机技术来模拟、指导医学手术所涉及的各种过程,在时间段上包括术前、术中、术后,在实现目的上有手术计划制定、手术排练演。
瑞典一家公司用VR技术做了一个专门用于医生培训的模拟人,第一代模拟人只能做心肺复苏,而如今已经可以预先对模拟病人进行编程、对复杂病情进行模拟,这种新的模拟人可以。