日前,武汉协和医院骨科医院成功为一位病人实施了世界上首例混合现实(MR)技术引导下的髋部骨折手术,实时共享的全息影像让医生做手术如看“透明人”。病人是15岁的少女,因摔伤致左髋部骨折,入院后诊断为左股骨颈骨折。如果处理不当,极易发生骨折不愈合、股骨头缺血性坏死等后遗症。
为此,协和医院骨科医院叶哲伟主任医师、吴星火副教授手术团队,决定采用了最新的混合现实技术——清晰呈现少女股骨颈骨折部位的全息影像。
6月25日,手术前,患者戴上VR眼镜,在医生解说下,360度全方位浏览自己骨折部位的3D数字“复制品”,对自己骨折的具体情况、手术方案有了直观的了解。
26日,主刀医生和助手医生在手术中借助全息影像信息,将患者虚拟的3D数字模型与患者病灶重叠在一起,医生从此拥有了全新的高维度“透视”手术区域的工具,做手术如看透明人。
叶哲伟解释,混合现实技术给外科手术带来了极大的便利,以前医生无法在手术中一边看人体组织的3D显示,一边将3D显示与病人真实的解剖部位进行对应。混合现实技术可以在外科医生不充分开口的情况下掌握病人的内部信息,并叠加显示在虚拟的物理空间上,实现精准的手术治疗方案制定。
更加神奇的是,将全息影像模型移到病患体位或者叠加在病患病灶结构上,虚实融合,保证了创伤最小基础上的病灶结构的最大化暴露,有透明组织器官的效果。手术的精确性和安全性均得以提升,提高了手术效率,有效缩短了手术时间。
吴星火介绍,此次武汉协和医院骨科医院在国内率先将星图全息影像系统用于骨科临床,在世界范围尚属首例。
据了解,目前,一套MR设备价值200多万元。除了骨科手术外,MR技术还在甲乳外科、神经外科、泌尿外科等领域有应用,国内已有数家大型医院开展。目前,哈佛医学院等全球最高端的医学院校也开始引进这套系统用于临床和医学教育。
——延伸阅读:
什么是混合现实技术(MR)?
混合现实(Mix reality,简称MR),既包括增强现实和增强虚拟,指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存,并实时互动。它是虚拟现实技术的进一步发展,该技术通过在虚拟环境中引入现实场景信息,在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路,以增强用户体验的真实感。
MR简介
混合现实技术(MR)是虚拟现实技术的进一步发展,该技术通过在虚拟环境中引入现实场景信息,在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路,以增强用户体验的真实感。
相比VR和AR,混合现实可以说是三者当中最不为人所知的,但有意思的是,它可能是进入主流市场最容易的方式。
混合现实的关键词是灵活性,它试图把VR和AR的优点集于一身。从理论上讲,混合现实可让用户看到看到现实世界(类似AR),但同时又能呈现出可信的虚拟物体(类似VR)。随后,它会把虚拟物体固定在真实空间当中,从而给人以真实感。
比如,玩家在《精灵宝可梦Go》当中看到的角色并没有遵循混合现实的规则。当遭遇小精灵时,它的距离并不会随着玩家的移动而发生改变。更直接地讲,它是在真实世界之上的,而并不会让人觉得它实际存在于现实世界当中。
而在混合现实当中,体验者是可以感受到虚拟物体与现实世界之间的依存关系的。它也完全符合现实世界中的透视法则,走近看会变大,而离远之后会变小。这听上去的确很棒,但有关混合现实方面的应用研究目前还都处于闭门测试状态。就拿获得了谷歌和高通等巨头投资的Magic Leap举例,这家公司至今都没有公开展示过自己的技术,而我们对其相关的硬件产品更是一无所知。
MR特点
混合现实(MR)(既包括增强现实和增强虚拟)指的是合并现实和虚拟世界而产生的新的可视化环境。在新的可视化环境里物理和数字对象共存,并实时互动。系统通常采用三个主要特点:
1.它结合了虚拟和现实
2.在虚拟的三维(3D注册)
3.实时运行
混合现实(MR)的实现需要在一个能与现实世界各事物相互交互的环境中。如果一切事物都是虚拟的那就是VR的领域了。如果展现出来的虚拟信息只能简单叠加在现实事物上,那就是AR。MR的关键点就是与现实世界进行交互和信息的及时获取。
MR诞生
MR,既是“混合现实”(Mixed Reality),而是由“智能硬件之父”多伦多大学教授Steve Mann提出的介导现实,全称Mediated Reality。
在上世纪七八十年代,为了增强简单自身视觉效果,让眼睛在任何情境下都能够“看到”周围环境,Steve Mann设计出可穿戴智能硬件,这被看作是初步对MR技术的探索。
VR是纯虚拟数字画面,而AR虚拟数字画面加上裸眼现实,MR是数字化现实加上虚拟数字画面。从概念上来说,MR与AR更为接近,都是一半现实一半虚拟影像,但传统AR技术运用棱镜光学原理折射现实影像,视角不如VR视角大,清晰度也会受到影响。
MR技术结合了VR与AR的优势,能够更好地将AR技术体现出来。
根据Steve Mann的理论,智能硬件最后都会从AR技术逐步向MR技术过渡。“MR和AR的区别在于MR通过一个摄像头让你看到裸眼都看不到的现实,AR只管叠加虚拟环境而不管现实本身。”
MR应用
一般来说,虚拟现实的常见载体都是智能眼镜,如今,第一款融合了MR技术的智能眼镜正在开发阶段,离投入商用还需要一定时间。
从概念上来说,MR与AR更为接近,都是一半现实一半虚拟影像,但传统AR技术运用棱镜光学原理折射现实影像,视角不如VR视角大,清晰度也会受到影响。为了解决视角和清晰度问题,新型的MR技术将会投入在更丰富的载体中,除了眼镜、投影仪外,目前研发团队正在考虑用头盔、镜子、透明设备做载体的可能性。
MR前景
有研究机构预估到2020年,全球头戴虚拟现实设备年销量将达4000万台左右,市场规模约400亿元,加上内容服务和企业级应用,市场容量超过千亿元。国内一线科技企业已加入到VR设备及内容的研发中,而在内容创造方面,也已经有了超次元MR这样的作品,这必然推动VR更快向AR、MR技术过渡。
目前全球从事MR领域的企业和团队都比较少,很多都处于研究阶段。
来源:蟠桃会(微信号 iPanTaoHui)
为你推荐

创新疗法再传积极信号,多奈单抗3年长期研究验证阿尔茨海默病干预“越早越好”
TRAILBLAZER-ALZ 2长期扩展研究结果显示,在大多数研究参与者完成治疗后,记能达依然可以持续发挥减缓疾病进展的作用
2025-08-01 21:51

"HER2阳性肿瘤诊疗能力提升工程启动会"召开,赋能HER2阳性胆道肿瘤精准诊疗
近日,【HER2阳性肿瘤诊疗能力提升工程】(以下简称“工程”)启动会在沪召开。会上,众多嘉宾围绕胆道肿瘤领域的治疗进展及趋势进行分享与探讨,以期推动该疾病领域的精准诊疗...
2025-08-01 15:38

华领医药首次半年扭亏,华堂宁上半年大卖176.4万盒
日前,华领医药发布发布业绩预告称,公司在今年上半年实现利润约11 84亿元,和去年中报的亏损1 4亿元相比,实现了自2018年上市以来的首次扭亏。
2025-08-01 11:16

礼来公布替尔泊肽重磅研究数据,或重塑糖尿病合并心血管病治疗格局
这是首个头对头比较替尔泊肽和度拉糖肽的心血管结局研究,纳入了来自30个国家 地区总计超过13,000名2型糖尿病合并动脉粥样硬化性心血管疾病成人患者, 历时超过4 5年,是迄今...
2025-08-01 08:57

QiviData数据分析系统实现医药数据分析国产化突破,助力CRO破解“卡脖子”难题
在医药研发外包(CRO)领域长期依赖海外数据分析工具的背景下,杭州启维软件有限公司近日宣布,其自主研发的QiviData数据分析系统V2 0已通过国家级技术验证,并与国内头部CRO企...
2025-07-31 17:26

体检争议事件引发公众健康焦虑,用AI解读体检报告量激增40%
近日,一则 "女子十年体检未提示患癌风险,确诊时已是肾癌晚期 "的新闻持续发酵,也引发了公众对健康问题的关注,甚至有网友自嘲 "为体检焦虑到失眠 "。
2025-07-31 16:48

因美纳升级旗舰检测产品,加速全面肿瘤基因组分析可及
因美纳TruSight™ Oncology 500 v2研究型检测产品现已上市,集成内置HRD生物标志物检测,周转时间更短,组织样本需求更低
2025-07-31 15:11

搭建递送技术平台,我国创新药企布局新型体内CAR-T疗法
“目前高端的细胞治疗药物价格仍高达每针数十万甚至上百万元,但通过mRNA和先进的递送技术,把高度个性化的定制疗法转变为通用型药物,将有机会把成本降至大多数患者可负担的范...
2025-07-30 17:25

中眸医疗完成数千万元融资,加速眼科基因治疗全球布局
此次融资资金将主要用于加速核心产品ZM-02的全球多中心临床试验及后续管线开发,进一步巩固公司在眼科基因治疗领域的领先地位。
2025-07-30 17:18

蚂蚁AI健康应用AQ推出多个“院士 AI分身”,日均免费问诊近万人
顶级医学专家上线“数字分身”,正在掀起一场 AI 看病风潮。7月30日,蚂蚁集团AI健康应用AQ数据显示,中国科学院院士王建安“AI分身”上线仅3天咨询量激增280%,AI让顶级大专...
2025-07-30 12:08

刚刚,国家药监局原副局长陈时飞被立案审查
7月30日,中央纪委国家监委网站发布公告:经中共中央批准,中央纪委国家监委对国家药品监督管理局原党组成员、副局长陈时飞严重违纪违法问题进行了立案审查调查。
2025-07-30 09:20

“肝能修复站”公益快闪沪上启动,专家支招科学管理脂肪肝
由中国医药卫生文化协会发起,快速消费品健康公司欧彼乐(Opella)、益丰大药房、意领科技联合支持的全民肝脏健康守护行动——“肝能修复站”公益快闪,于上海徐汇滨江正式启动。
文/张蓉蓉 2025-07-30 09:17

京津冀持续暴雨,蚂蚁集团AQ上线专区提供健康科普及线上义诊服务
近日,华东、华北、东北等地持续强降雨,引发洪涝和地质灾害,社会各界紧急响应。为了方便受强降雨影响的群众获得一站式的信息及服务,7月29日,蚂蚁集团旗下AI健康应用AQ推出“...
2025-07-29 20:25

讯飞医疗亮相WAIC,牵头《医疗健康行业智能体标准体系》10项核心子标准
7月26日,以“智能时代、同球共济”为主题的2025世界人工智能大会暨人工智能全球治理高级别会议(WAIC)在上海开幕。大模型在医疗领域的应用正从概念验证走向产业化落地,如何建...
2025-07-29 17:50