日前,武汉协和医院骨科医院成功为一位病人实施了世界上首例混合现实(MR)技术引导下的髋部骨折手术,此次手术前,患者戴上VR眼镜,在医生解说下,360度全方位浏览自己骨折部位的3D数字“复制品”,对自己骨折的具体情况、手术方案进行了解。
随后,主刀医生和助手医生在手术中借助全息影像信息,将患者虚拟的3D数字模型与患者病灶重叠在一起,“医生从此拥有了全新的高维度“透视”手术区域的工具,做手术如看透明人。“
武汉协和医院骨科医院叶哲伟主任医师表示,混合现实技术给外科手术带来了极大的便利,以前医生无法在手术中一边看人体组织的3D显示,一边将3D显示与病人真实的解剖部位进行对应。混合现实技术可以将全息影像模型移到病患体位或者叠加在病患病灶结构上,在外科医生不充分开口的情况下掌握病人的内部信息,并叠加显示在虚拟的物理空间上,实现精准的手术治疗方案制定。
其实,这已经不是AR、MR等技术第一次应用于医疗领域。据了解到,2015年12月,来自明尼苏达州Nicklaus儿童医院的医生们利用谷歌Cardboard进行了一例体外循环心脏手术,挽救了一个四个月大的生命。2016年1月20日,Realmax在上海展示了剖腹产手术和臂骨骨折手术示意案例。2016年12月,广东省第二中医院“互联网+中医临床数据中心”正式启动上线,将AR技术用于膝骨关节辅助医疗。2017年4月14日,广东省第二中医院则尝试将MR用于肿瘤外科手术。随着VR/AR技术的发展,医疗方面的难题正在得到解决。
而在国外,微软发布的MR头显HoloLens不但成为游戏周边,而且成了工作场所的超级助理。许多专业人士已经开始用上这款AR产品,杜克大学的外科医生则在脑部手术中用到了 HoloLens。虽然这些应用还处在起步阶段,但 AR 软件公司 Scopis 却为 HoloLens 搭建了一个“全息导航平台”,它可以在手术过程中通过HoloLens将MR图像覆盖在病人身上(视觉叠加技术)。随后,医师就能找到脊柱上的椎弓根钉。同时,他们还能利用一系列手势来调节虚拟屏幕,让一些重要的信息停留在视野中。
VR、AR能给医疗行业带来什么福音?
首先,VR/AR技术在身体层面减轻患者病痛之外,还可以在心理层面发挥作用。例如戴上VR头盔可以让患者进入游戏中,病人的疼痛级别会减轻,医学手段对他们的疗效也会更好。社会行为医学2011年发布的调查展示了浸入式游戏作为止痛剂的强大作用。并且现在这项技术已经被美国军方使用,帮助受伤的士兵接受治疗。
其次,VR/AR技术还可以用于医疗教学培训。在传统的医学教育中,如人体标本解剖和各种手术实训,受标本、场地等限制,实训费用高昂;同时,医学生不能通过反复在病人身上进行操作来提高临床实践能力、临床实践具有较大风险等。而虚拟现实的直观和体验特性却可以很好地解决以上问题。
据了解,这类技术还可以成为虚拟实验室的技术基础,学生将有充分的实验自主权,能仿真实现各种实际的甚至不可视、不可摸、不可入、危险性高的实验以及想象的实验场景。许多医学教育中的实验和临床相关实验都可以在虚拟实验室中进行。
据 AR in China 最近期的统计,如今国内从事AR应用开发的企业有200多家,其中80%倾向和已开发游戏类应用,剩余的也多偏向影视、购物等生活类应用。而专注在医健领域的应用,根据公开信息推测目前不超过10家。而在海外,据 CBInsights、CrunchBase、AngelList 网站的综合数据查询,目前有30家左右初创公司正专注在AR医疗应用领域。其中9家初创公司获得融资,总融资额达5.52亿美元,获投率达到了30%。