日前,武汉协和医院骨科医院成功为一位病人实施了世界上首例混合现实(MR)技术引导下的髋部骨折手术,实时共享的全息影像让医生做手术如看“透明人”。病人是15岁的少女,因摔伤致左髋部骨折,入院后诊断为左股骨颈骨折。如果处理不当,极易发生骨折不愈合、股骨头缺血性坏死等后遗症。
为此,协和医院骨科医院叶哲伟主任医师、吴星火副教授手术团队,决定采用了最新的混合现实技术——清晰呈现少女股骨颈骨折部位的全息影像。
6月25日,手术前,患者戴上VR眼镜,在医生解说下,360度全方位浏览自己骨折部位的3D数字“复制品”,对自己骨折的具体情况、手术方案有了直观的了解。
26日,主刀医生和助手医生在手术中借助全息影像信息,将患者虚拟的3D数字模型与患者病灶重叠在一起,医生从此拥有了全新的高维度“透视”手术区域的工具,做手术如看透明人。
叶哲伟解释,混合现实技术给外科手术带来了极大的便利,以前医生无法在手术中一边看人体组织的3D显示,一边将3D显示与病人真实的解剖部位进行对应。混合现实技术可以在外科医生不充分开口的情况下掌握病人的内部信息,并叠加显示在虚拟的物理空间上,实现精准的手术治疗方案制定。
更加神奇的是,将全息影像模型移到病患体位或者叠加在病患病灶结构上,虚实融合,保证了创伤最小基础上的病灶结构的最大化暴露,有透明组织器官的效果。手术的精确性和安全性均得以提升,提高了手术效率,有效缩短了手术时间。
吴星火介绍,此次武汉协和医院骨科医院在国内率先将星图全息影像系统用于骨科临床,在世界范围尚属首例。
据了解,目前,一套MR设备价值200多万元。除了骨科手术外,MR技术还在甲乳外科、神经外科、泌尿外科等领域有应用,国内已有数家大型医院开展。目前,哈佛医学院等全球最高端的医学院校也开始引进这套系统用于临床和医学教育。
——延伸阅读:
什么是混合现实技术(MR)?
混合现实(Mix reality,简称MR),既包括增强现实和增强虚拟,指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存,并实时互动。它是虚拟现实技术的进一步发展,该技术通过在虚拟环境中引入现实场景信息,在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路,以增强用户体验的真实感。
MR简介
混合现实技术(MR)是虚拟现实技术的进一步发展,该技术通过在虚拟环境中引入现实场景信息,在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路,以增强用户体验的真实感。
相比VR和AR,混合现实可以说是三者当中最不为人所知的,但有意思的是,它可能是进入主流市场最容易的方式。
混合现实的关键词是灵活性,它试图把VR和AR的优点集于一身。从理论上讲,混合现实可让用户看到看到现实世界(类似AR),但同时又能呈现出可信的虚拟物体(类似VR)。随后,它会把虚拟物体固定在真实空间当中,从而给人以真实感。
比如,玩家在《精灵宝可梦Go》当中看到的角色并没有遵循混合现实的规则。当遭遇小精灵时,它的距离并不会随着玩家的移动而发生改变。更直接地讲,它是在真实世界之上的,而并不会让人觉得它实际存在于现实世界当中。
而在混合现实当中,体验者是可以感受到虚拟物体与现实世界之间的依存关系的。它也完全符合现实世界中的透视法则,走近看会变大,而离远之后会变小。这听上去的确很棒,但有关混合现实方面的应用研究目前还都处于闭门测试状态。就拿获得了谷歌和高通等巨头投资的Magic Leap举例,这家公司至今都没有公开展示过自己的技术,而我们对其相关的硬件产品更是一无所知。
MR特点
混合现实(MR)(既包括增强现实和增强虚拟)指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存,并实时互动。系统通常采用三个主要特点:
1.它结合了虚拟和现实
2.在虚拟的三维(3D注册)
3.实时运行
混合现实(MR)的实现需要在一个能与现实世界各事物相互交互的环境中。如果一切事物都是虚拟的那就是VR的领域了。如果展现出来的虚拟信息只能简单叠加在现实事物上,那就是AR。MR的关键点就是与现实世界进行交互和信息的及时获取。
MR诞生
MR,既是“混合现实”(Mixed Reality),而是由“智能硬件之父”多伦多大学教授Steve Mann提出的介导现实,全称Mediated Reality。
在上世纪七八十年代,为了增强简单自身视觉效果,让眼睛在任何情境下都能够“看到”周围环境,Steve Mann设计出可穿戴智能硬件,这被看作是初步对MR技术的探索。
VR是纯虚拟数字画面,而AR虚拟数字画面加上裸眼现实,MR是数字化现实加上虚拟数字画面。从概念上来说,MR与AR更为接近,都是一半现实一半虚拟影像,但传统AR技术运用棱镜光学原理折射现实影像,视角不如VR视角大,清晰度也会受到影响。
MR技术结合了VR与AR的优势,能够更好地将AR技术体现出来。
根据Steve Mann的理论,智能硬件最后都会从AR技术逐步向MR技术过渡。“MR和AR的区别在于MR通过一个摄像头让你看到裸眼都看不到的现实,AR只管叠加虚拟环境而不管现实本身。”
MR应用
一般来说,虚拟现实的常见载体都是智能眼镜,如今,第一款融合了MR技术的智能眼镜正在开发阶段,离投入商用还需要一定时间。
从概念上来说,MR与AR更为接近,都是一半现实一半虚拟影像,但传统AR技术运用棱镜光学原理折射现实影像,视角不如VR视角大,清晰度也会受到影响。为了解决视角和清晰度问题,新型的MR技术将会投入在更丰富的载体中,除了眼镜、投影仪外,目前研发团队正在考虑用头盔、镜子、透明设备做载体的可能性。
MR前景
有研究机构预估到2020年,全球头戴虚拟现实设备年销量将达4000万台左右,市场规模约400亿元,加上内容服务和企业级应用,市场容量超过千亿元。国内一线科技企业已加入到VR设备及内容的研发中,而在内容创造方面,也已经有了超次元MR这样的作品,这必然推动VR更快向AR、MR技术过渡。
目前全球从事MR领域的企业和团队都比较少,很多都处于研究阶段。
来源:蟠桃会(微信号 iPanTaoHui)
为你推荐
资讯 全球首个专家级通用医疗影像模型,一次识别146种病症
9月18日消息,阿里巴巴达摩院与浙江大学医学院附属第一医院等机构研发出通用医疗影像AI模型DAMO RADAR,并登上国际顶级学术期刊《科学》(Science)。
2026-09-18 17:12
资讯 金斯瑞与礼来TuneLab达成合作,推动AI制药湿实验服务
根据协议,金斯瑞生物将向Lilly TuneLab参与企业提供湿实验服务,助力其快速生成实验数据,将AI预测转化为生物学验证数据,加速候选药物评估。
2026-09-18 15:51
资讯 医药工业发展十五五规划
规模以上医药工业企业营业收入超过3 5万亿元,创新药产业规模增速年均达到20%以上,全球年销售额超10亿美元的品种数量达到5个以上;年营业收入超过100亿元的医药工业企业数量达...
2026-09-18 13:45
资讯 全球首个核药仿制药获完全批准
9月14日,Curium宣布Bexlutry([177lu]氧奥曲肽,研发代号:PNT2003)获得FDA批准上市。该药物是Lutathera的仿制药,也是全球首个获批上市的核药仿制药。
2026-09-18 11:58
资讯 康方生物第4个ADC获批临床,加速布局IO+ADC方向
近日,康方生物(9926 HK)宣布,其自主研发的创新双抗ADC药物AK158D1(EGFR Trop2 双抗ADC),已获得国家药品监督管理局药品审评中心批准,开展用于治疗晚期恶性实体瘤的I期临床研究。
2026-09-18 11:18
资讯 体内CAR-T出海
近日,河北森朗生物科技有限公司(森朗生物)与美国Tempest Therapeutics(Tempest)签署独家选择权协议,授权Tempest可独家引进森朗生物CD7靶向慢病毒载体平台及多款体内CAR-T候选药物。
2026-09-17 17:15
资讯 迈英诺医药完成超 2 亿元 A 轮融资,全球首个局部给药泛 JAK / 泛 Trk 多靶点抑制剂进入中美 II 期临床
本轮融资由阳光融汇资本领投,厦门金圆产业链基金、厦门市心血管产业基金、博行资本、建发新兴投资、沃美达资本、朗煜投资、厦门高新投跟投
2026-09-17 16:23
资讯 华东医药携手美柏生物,ECM胶原蛋白MB007独家战略合作落地
就细胞外基质(Extracellular Matrix,ECM)胶原蛋白MB007产品在中国市场达成独家战略合作
2026-09-17 16:17
资讯 全球范围内,达芬奇SP单孔手术系统首获新适应症
直观医疗近日宣布,达芬奇SP单孔手术系统经阴道妇科手术适应症已获得欧盟CE认证,这是该系统在全球范围内首次获批此适应症。
2026-09-17 16:17
资讯 《医药代表管理办法》备案政策问答(二),非首次备案医药代表因学历、专业不符合《办法》规定可否备案
9月16日,国家医药代表备案平台发布《备案政策问答(二)》。国家药监局收集、整理了部分与备案相关的问题,进行解答。
2026-09-17 11:08
资讯 字节跳动Anew Labs完成2.9亿美元融资
本轮融资由原红杉中国HSG、IDG资本和高瓴投资领投,五源资本担任联合领投方。其他投资者还包括高榕创投、春华创投、博裕资本,以及战略投资者SBP Group和国资背景的上海未来产...
2026-09-17 10:36
资讯 诺华前中国总裁张颖出任传奇生物 CEO
纳斯达克上市细胞治疗企业传奇生物(Legend Biotech,股票代码:LEGN)于 9 月 15 日正式官宣,董事会任命张颖(Ingrid Zhang)担任公司首席执行官(CEO),任命自当日生效。
2026-09-16 19:41
资讯 聚焦罕见病创新与患者可及,2026年“中法医学日”活动在京举行
近日,2026年“中法医学日”活动今日在北京国家会议中心举行,来自中法医疗健康领域的政策研究者、临床专家、患者组织代表及产业界代表等逾百位嘉宾参会,围绕“健康与创新:...
2026-09-16 15:05
资讯 荣昌生物PD-1/VEGF双抗RC148一线治疗鳞状和非鳞状非小细胞肺癌Ib期临床数据
近日,在2026年世界肺癌大会(WCLC 2026)上,荣昌生物公布了其PD-1 VEGF双特异性抗体RC148一线治疗鳞状和非鳞状非小细胞肺癌的Ⅰb期临床数据(RC148-C002研究)。
2026-09-16 14:36
资讯 我国将首次制定全国统一的医保医疗服务项目目录,第一批目录工作方案发布
9月16日,国家医保局正式印发《国家基本医疗保险医疗服务项目目录(第一批)制定工作方案》,我国将首次制定全国统一的医保医疗服务项目目录,进一步规范医保支付范围,提升保障...
2026-09-16 11:45
资讯 2025年航空援助核心洞察报告
近日,国际SOS旗下的航空医疗与安全风险管理服务商MedAire发布《2025年航空援助核心洞察报告》,为航空公司及公务机运营商配置保障资源、管理运营风险提供参考。
2026-09-16 11:22





