世界首例!医生做手术, 患者秒变“透明人”!

日前,武汉协和医院骨科医院成功为一位病人实施了世界上首例混合现实(MR)技术引导下的髋部骨折手术,实时共享的全息影像让医生做手术如看“透明人”。病人是15岁的少女,因摔伤致左髋部骨折,入院后诊断为左股骨颈骨折。如果处理不当,极易发生骨折不愈合、股骨头缺血性坏死等后遗症。

为此,协和医院骨科医院叶哲伟主任医师、吴星火副教授手术团队,决定采用了最新的混合现实技术——清晰呈现少女股骨颈骨折部位的全息影像。

6月25日,手术前,患者戴上VR眼镜,在医生解说下,360度全方位浏览自己骨折部位的3D数字“复制品”,对自己骨折的具体情况、手术方案有了直观的了解。

26日,主刀医生和助手医生在手术中借助全息影像信息,将患者虚拟的3D数字模型与患者病灶重叠在一起,医生从此拥有了全新的高维度“透视”手术区域的工具,做手术如看透明人。

叶哲伟解释,混合现实技术给外科手术带来了极大的便利,以前医生无法在手术中一边看人体组织的3D显示,一边将3D显示与病人真实的解剖部位进行对应。混合现实技术可以在外科医生不充分开口的情况下掌握病人的内部信息,并叠加显示在虚拟的物理空间上,实现精准的手术治疗方案制定。

更加神奇的是,将全息影像模型移到病患体位或者叠加在病患病灶结构上,虚实融合,保证了创伤最小基础上的病灶结构的最大化暴露,有透明组织器官的效果。手术的精确性和安全性均得以提升,提高了手术效率,有效缩短了手术时间。

吴星火介绍,此次武汉协和医院骨科医院在国内率先将星图全息影像系统用于骨科临床,在世界范围尚属首例。

据了解,目前,一套MR设备价值200多万元。除了骨科手术外,MR技术还在甲乳外科、神经外科、泌尿外科等领域有应用,国内已有数家大型医院开展。目前,哈佛医学院等全球最高端的医学院校也开始引进这套系统用于临床和医学教育。

——延伸阅读:

什么是混合现实技术(MR)?

混合现实(Mix reality,简称MR),既包括增强现实和增强虚拟,指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存,并实时互动。它是虚拟现实技术的进一步发展,该技术通过在虚拟环境中引入现实场景信息,在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路,以增强用户体验的真实感。

MR简介

混合现实技术(MR)是虚拟现实技术的进一步发展,该技术通过在虚拟环境中引入现实场景信息,在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路,以增强用户体验的真实感。

相比VR和AR,混合现实可以说是三者当中最不为人所知的,但有意思的是,它可能是进入主流市场最容易的方式。

混合现实的关键词是灵活性,它试图把VR和AR的优点集于一身。从理论上讲,混合现实可让用户看到看到现实世界(类似AR),但同时又能呈现出可信的虚拟物体(类似VR)。随后,它会把虚拟物体固定在真实空间当中,从而给人以真实感。

比如,玩家在《精灵宝可梦Go》当中看到的角色并没有遵循混合现实的规则。当遭遇小精灵时,它的距离并不会随着玩家的移动而发生改变。更直接地讲,它是在真实世界之上的,而并不会让人觉得它实际存在于现实世界当中。

而在混合现实当中,体验者是可以感受到虚拟物体与现实世界之间的依存关系的。它也完全符合现实世界中的透视法则,走近看会变大,而离远之后会变小。这听上去的确很棒,但有关混合现实方面的应用研究目前还都处于闭门测试状态。就拿获得了谷歌和高通等巨头投资的Magic Leap举例,这家公司至今都没有公开展示过自己的技术,而我们对其相关的硬件产品更是一无所知。

MR特点

混合现实(MR)(既包括增强现实和增强虚拟)指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存,并实时互动。系统通常采用三个主要特点:

1.它结合了虚拟和现实

2.在虚拟的三维(3D注册)

3.实时运行

混合现实(MR)的实现需要在一个能与现实世界各事物相互交互的环境中。如果一切事物都是虚拟的那就是VR的领域了。如果展现出来的虚拟信息只能简单叠加在现实事物上,那就是AR。MR的关键点就是与现实世界进行交互和信息的及时获取。

MR诞生

MR,既是“混合现实”(Mixed Reality),而是由“智能硬件之父”多伦多大学教授Steve Mann提出的介导现实,全称Mediated Reality。

在上世纪七八十年代,为了增强简单自身视觉效果,让眼睛在任何情境下都能够“看到”周围环境,Steve Mann设计出可穿戴智能硬件,这被看作是初步对MR技术的探索。

VR是纯虚拟数字画面,而AR虚拟数字画面加上裸眼现实,MR是数字化现实加上虚拟数字画面。从概念上来说,MR与AR更为接近,都是一半现实一半虚拟影像,但传统AR技术运用棱镜光学原理折射现实影像,视角不如VR视角大,清晰度也会受到影响。

MR技术结合了VR与AR的优势,能够更好地将AR技术体现出来。

根据Steve Mann的理论,智能硬件最后都会从AR技术逐步向MR技术过渡。“MR和AR的区别在于MR通过一个摄像头让你看到裸眼都看不到的现实,AR只管叠加虚拟环境而不管现实本身。”

MR应用

一般来说,虚拟现实的常见载体都是智能眼镜,如今,第一款融合了MR技术的智能眼镜正在开发阶段,离投入商用还需要一定时间。

从概念上来说,MR与AR更为接近,都是一半现实一半虚拟影像,但传统AR技术运用棱镜光学原理折射现实影像,视角不如VR视角大,清晰度也会受到影响。为了解决视角和清晰度问题,新型的MR技术将会投入在更丰富的载体中,除了眼镜、投影仪外,目前研发团队正在考虑用头盔、镜子、透明设备做载体的可能性。

MR前景

有研究机构预估到2020年,全球头戴虚拟现实设备年销量将达4000万台左右,市场规模约400亿元,加上内容服务和企业级应用,市场容量超过千亿元。国内一线科技企业已加入到VR设备及内容的研发中,而在内容创造方面,也已经有了超次元MR这样的作品,这必然推动VR更快向AR、MR技术过渡。

目前全球从事MR领域的企业和团队都比较少,很多都处于研究阶段。

来源:蟠桃会(微信号 iPanTaoHui)

为你推荐

迪哲医药舒沃哲单药一线治疗EGFR exon20ins非小细胞肺癌国际多中心III期临床试验获阳性顶线结果资讯

迪哲医药舒沃哲单药一线治疗EGFR exon20ins非小细胞肺癌国际多中心III期临床试验获阳性顶线结果

3月23日,迪哲医药发布公告称,其自主研发的产品舒沃哲(ZEGFROVY,通用名:舒沃替尼片)单药一线治疗表皮生长因子受体(EGFR)20 号外显子插入突变(exon20ins)晚期非小细胞...

2026-03-23 10:45

远葆医疗完成数千万元天使轮融资,布局神经康复与脑机接口领域资讯

远葆医疗完成数千万元天使轮融资,布局神经康复与脑机接口领域

本轮融资由上海科创集团旗下知识产权基金独家战略投资

2026-03-22 19:10

全球首创!蠕形螨睑缘炎创新眼药GPN01768国内正式获批资讯

全球首创!蠕形螨睑缘炎创新眼药GPN01768国内正式获批

GPN01768是美国FDA批准的首款、全球首创、也是目前全球唯一专门用于治疗蠕形螨睑缘炎的药物

2026-03-22 18:58

拓展入境健康消费,探索建设国际医疗旅游集聚区资讯

拓展入境健康消费,探索建设国际医疗旅游集聚区

统筹中国游、中国购、中国学、中国医等多维体验,系统构建“你好!中国”国家旅游形象,打造“中国游”品牌。

2026-03-21 20:47

DRG/DIP 3.0 的最新消息资讯

DRG/DIP 3.0 的最新消息

2026年3月19日上午,国家医保局开展按病种付费分组方案3 0版调整情况介绍活动。

2026-03-20 22:32

创新“无棉”静音技术,可孚医疗发布首款智能呼吸机资讯

创新“无棉”静音技术,可孚医疗发布首款智能呼吸机

3月20日,正值世界睡眠日到来之际,可孚医疗隆重举行呼吸机新品发布会,正式推出行业率先实现的无消音棉超静音AI智能呼吸机——C11。

2026-03-20 19:02

NVIDIA GTC 大会重磅发布:以 AI 与算力赋能药物研发全链路创新资讯

NVIDIA GTC 大会重磅发布:以 AI 与算力赋能药物研发全链路创新

在 GTC 大会上,NVIDIA 集中展示了其在制药与生命科学领域的核心技术成果与深度行业合作

2026-03-20 14:21

深耕肾病与代谢领域,炫景生物完成超2亿元Pre-A轮融资资讯

深耕肾病与代谢领域,炫景生物完成超2亿元Pre-A轮融资

本轮融资由康君资本领投,德联资本、华泰金斯瑞基金、金易赋新、国海创新资本、联想创投等机构联合参投,现有股东元希海河继续跟投

2026-03-20 13:52

先衍生物完成1.5亿元A轮融资,加速小核酸药物核心技术突破与管线推进资讯

先衍生物完成1.5亿元A轮融资,加速小核酸药物核心技术突破与管线推进

本轮融资由道远资本领投,启申创投联合领投,嘉乐资本、成都科创投集团、四川省中试研发有限公司、厦门高新投、增锐铭禾等机构跟投,同时成都先导、银满基金、怀格资本、钧天创...

2026-03-20 13:48

聚焦“三高一疹”共病联防,“乐龄健康第一课”全面升级、在沪开讲资讯

聚焦“三高一疹”共病联防,“乐龄健康第一课”全面升级、在沪开讲

多领域专家齐聚沪上“文化会客厅”,共话“小处方”背后的温情守护

2026-03-20 13:32

华海药业PD-L1/VEGF将正式启动子宫内膜癌的Ⅲ期临床试验资讯

华海药业PD-L1/VEGF将正式启动子宫内膜癌的Ⅲ期临床试验

3月19日,华海药业发布公告称,近日,下属子公司上海华奥泰生物药业股份有限公司就HB0025联合化疗一线治疗晚期 复发子宫内膜癌经过与国家药品监督管理局药品审评中心(CDE)Ⅱ...

2026-03-20 10:40

天宜康医药完成逾亿元种子轮融资,汪文博士领衔攻坚CAR-T行业核心痛点资讯

天宜康医药完成逾亿元种子轮融资,汪文博士领衔攻坚CAR-T行业核心痛点

本轮融资由弘毅投资和幂方健康基金共同领投,苏创投、承树投资、英贤投资及毅达资本跟投

2026-03-19 13:19

爱尔康披露关键数据:全球老视矫正型人工晶体植入量超600万枚,人工晶体植入总量突破1.75亿枚资讯

爱尔康披露关键数据:全球老视矫正型人工晶体植入量超600万枚,人工晶体植入总量突破1.75亿枚

全球人工晶体(IOL)植入技术在临床应用中不断取得新进展,为患者术后视觉质量的提升提供了更多可能性。

2026-03-19 13:08

赛诺菲首个中国创新与运营中心落户成都资讯

赛诺菲首个中国创新与运营中心落户成都

汇聚本土人才,赋能数字生态,共促医药创新转型升级

2026-03-19 13:04

沃森生物明天复牌,实控人变更资讯

沃森生物明天复牌,实控人变更

公司控股股东将变更为腾云新沃,实际控制人变更为黄涛,自此沃森生物结束16年的无实际控制人状态。

2026-03-18 23:09

4款药品再次被上海列为重点监控品种资讯

4款药品再次被上海列为重点监控品种

3月17日,上海市医药集中招标采购事务管理所发布最新重点监控药品名单,共计10款,包括利肺片、注射用二羟丙茶碱、肝素钙注射液等。重点监控品种主要针对采购金额高、价格异常或...

2026-03-18 21:20

直观复星支持开展“儿童公益救助项目”,助力先进医疗技术惠及更多患儿资讯

直观复星支持开展“儿童公益救助项目”,助力先进医疗技术惠及更多患儿

3月18日,手术机器人领军企业直观复星正式向上海市医药卫生发展基金会进行公益捐赠,专项支持“儿童公益救助项目”

2026-03-18 18:03

礼邦医药 AP306 出海 资讯

礼邦医药 AP306 出海

根据协议,礼邦医药已授予 R1 在大中华区以外地区独家开发、生产及商业化 AP306 的权利。协议项下的整体经济条款包括最高总计过亿美元的开发、注册及商业化里程碑付款;同时...

2026-03-18 15:59

百度健康计划近期推出DoctorClaw资讯

百度健康计划近期推出DoctorClaw

据悉这是一款面向医生的OpenClaw,定位是医生AI助理,可以帮医生自动整理研究资料、跟踪论文进度、设置随访提醒、定时追踪最新文献等。

2026-03-18 11:45