商汤研究成果荣登国际权威期刊Nature子刊,生成式AI为医疗大模型迭代按下加速键

医疗健康 来源:医谷网
2023
09/12
17:03
医谷网 医疗健康

生成式人工智能近年来受到广泛关注,作为人工智能的一个分支,其能够模拟人类思维创造出新的内容,而不仅仅是分析或处理现有数据。近日,商汤科技联合行业合作伙伴,结合生成式人工智能和医疗图像数据的多中心联邦学习发表的最新研究成果《通过分布式合成学习挖掘多中心异构医疗数据》(Mining Multi-Center Heterogeneous Medical Data with Distributed Synthetic Learning),登上国际顶级学术期刊《自然》(Nature)子刊《自然-通讯》(Nature Communications)。《自然-通讯》是一本完全开放获取的综合性期刊,发表自然科学各个领域的高质量研究成果,影响因子为16.6。

论文收录结果公布

论文提出一个基于分布式合成对抗网络的联邦学习框架DSL(Distributed Synthetic Learning),可利用多中心的多样性医疗图像数据来联合学习图像数据的生成。该分布式框架通过学习得到一个图像数据生成器,它可以更灵活地生成数据,这些生成数据可以替代多中心的真实数据,用于下游具体机器学习任务的训练,并具备较强的可扩展性。

伴随大模型的快速发展,Model as a Service(MaaS,模型即服务)概念也日渐兴起。MaaS的大模型需要从海量的、多类型的数据中学习通用特征和规则,从而具备较强的泛化能力。DSL框架能够在保护数据隐私的同时巧妙解决医疗大模型训练中常见的数据量不足的瓶颈,可有效赋能MaaS的大模型训练,为医疗大模型的开发迭代带来重大突破。在这一技术的支撑下,商汤的“医疗大模型工厂”能够帮助医疗机构更高效、高质量地训练针对不同临床问题的医疗大模型,使大模型在医疗领域的应用半径得到进一步延伸。

兼顾隐私保护和数据共享

创新联邦学习模式打造“数据生产工厂”

深度学习模型需要大量且多样性的数据“喂养”,但医疗领域对用户个人隐私保护有着极高的要求,这使得用于模型训练的医疗数据,在多样性和标注质量上都受到限制,也使多中心的医疗数据收集和医疗AI模型的开发迭代面临较大的挑战。

如何调和隐私保护和数据共享协作的矛盾?近几年兴起的“联邦学习”提供了全新的解题思路。联邦学习是一种分布式的机器学习方法,可以在不共享数据的情况下对多中心的数据进行联合建模,在保证数据安全的同时联合学习某一特定应用模型。

与主流的联邦学习模式不同的是,DSL框架的学习目标是数据生成器,而非具体应用的任务模型。该分布式架构由一个位于中央服务器的数据生成器和多个位于不同数据中心的数据鉴别器组成。在学习过程中,中央生成器负责生成“假”的图像数据,并发送给各个数据中心,各个数据中心用本地的真实数据和收到的“假”数据进行对比后将结果回传给中央服务器,并基于反馈结果训练中央生成器生成更仿真的图像数据。分布式的合成学习结束之后,中央生成器可以作为“数据生产工厂”,根据给定的约束条件(标注)生成高质量仿真图像数据,从而得到一个由生成数据组成的数据库。

该数据库可以替代真实数据,用于下游具体任务的学习,使下游模型的更新迭代不再受到真实数据可访问性的制约。同时,该方法通过分布式架构和联邦学习方式保证中央服务器无需接触数据中心的真实数据,也不需要同步各中心的鉴别器模型,有效保障了数据安全和隐私保护。

DSL框架包含一个中央生成器和多个分布式鉴别器,每个鉴别器位于一个医疗实体中

经过训练的生成器可以作为“数据生产工厂”,为下游具体任务的学习构建数据库

赋能MaaS新生态发展

为医疗大模型开发迭代按下加速键

DSL框架已通过多个具体应用的验证,包括大脑多序列MRI图像生成及下游的大脑肿瘤分割任务,心脏CTA图像生成及下游的全心脏结构分割任务,多种器官的病理图像生成及细胞核实例分割任务等。在可扩展性方面,该方法还可支持多模态数据中缺失模态数据的生成、持续学习等不同场景。

在瑞金医院的展区,SenseCare®肝脏手术智能规划系统凭借高效精准的病灶检出、三维重建、手术规划等功能,吸引不少观众驻足。从二维的肝脏CT影像,变为一目了然的三维立体模型,只需短短几分钟。轻轻拖动鼠标,就可在模型上自定义切面、角度、血管离断位置等,帮助医生几分钟内完成精准的肝脏手术规划。

不同应用中生成数据示例:(a)心脏CTA,(b)大脑多模态MRI,(c)病理图像

生成的数据构成大数据库可用于下游具体任务模型的学习,例如:(d)全心分割,(e)脑肿瘤分割,(f)细胞核分割

DSL框架的构建,也有利于推动MaaS服务模式的发展。MaaS的医疗大模型在数据学习过程中,同样会遇到医疗数据隐私安全保护的问题,而基于DSL框架,可以有效地从多中心多样性数据中建立数据集仓库,通过生成数据,在保障数据安全和隐私的同时为大模型的开发迭代提供创新思路。

细化到具体应用场景,DSL框架可助力医疗机构高效开展跨中心、跨地域模型训练工作。不同区域医疗机构在疾病数据多样性方面存在明显的地域性差异,过去受限于数据安全和隐私保护的要求,使用跨中心医疗数据联合训练医疗模型难度较大。而借助DSL框架,有望帮助医疗机构更加高效便捷地开展跨中心医疗模型训练。

在此前的世界人工智能大会(WAIC)上,商汤科技与行业伙伴合作,推出了医疗大语言模型、医疗影像大模型、生信大模型等多种垂类基础模型群,覆盖CT、MRI、超声、内镜、病理、医学文本、生信数据等不同医疗数据模态。并展示了融入医疗大模型的升级版“SenseCare®智慧医院”综合解决方案,以及多个医疗大模型落地案例。借助商汤大装置的超大算力和医疗基础模型群的坚实基础,商汤科技得以化身“医疗大模型工厂”,帮助医疗机构针对不同临床问题高效训练模型,甚至辅助机构实现模型自主训练。

WAIC期间商汤科技展示了大模型在医疗领域的多个落地应用案例

随着DSL框架的推出,医疗大模型的训练将有望突破“数据孤岛”的桎梏,一定程度上降低了医疗大模型的训练门槛,有助于加速模型开发迭代,使医疗大模型的应用范围得以进一步延伸,覆盖更多临床医疗问题。未来,商汤科技将持续聚焦医疗机构的多样化需求,推动医疗大模型在更多医疗场景的落地,更好地助力医院智慧化转型及高质量发展,助力普惠医疗的实现。

来源:医谷网

为你推荐

北虹桥,聚集医疗器械资源要素,助力医疗器械科技创新和商业化发展资讯

北虹桥,聚集医疗器械资源要素,助力医疗器械科技创新和商业化发展

本次论坛由上海市生物医药科技发展中心和嘉定区江桥镇人民政府联合主办,围绕“荟萃资源要素,破局医疗器械产品商业化路径”主题,聚焦医疗器械领域的空间、技术和人才等资源,...

2023-09-28 19:01

罗氏中国加速器大楼在沪落成,助推中国研发世界共享资讯

罗氏中国加速器大楼在沪落成,助推中国研发世界共享

投资近3亿元人民币的罗氏中国加速器是罗氏全球首个自主建立并运营的加速器,初创企业可获得罗氏包括研究、早期开发和商业化的全方位本土资源。全新的加速器大楼将为初创企业提供...

2023-09-28 15:22

瑞顺生物通用型CD19-CAR-DNT细胞疗法IND申请获受理资讯

瑞顺生物通用型CD19-CAR-DNT细胞疗法IND申请获受理

近日,广东瑞顺生物技术有限公司(下称“瑞顺生物”)宣布,其全资子公司——浙江瑞加美生物科技有限公司递交的“RJMty19注射液治疗复发 难

2023-09-28 15:05

北京朝阳医院:用“数字走廊”联通一院多区资讯

北京朝阳医院:用“数字走廊”联通一院多区

过去五年,云计算、人工智能、大数据等数字技术飞速发展,产业“云化”初步完成,并向“智能化”演变。9月26日,腾讯云发布了《2023数字经济高质量发展报告》,梳理前沿数字技术...

2023-09-28 14:51

“中国自主创新药的出海探索”主题论坛顺利召开资讯

“中国自主创新药的出海探索”主题论坛顺利召开

论坛邀请业内知名专家学者共聚一堂,深入探讨中国自主创新药如何出海突围,并以源创新药代表性企业和黄医药20余年来的发展之路和呋喹替尼的出海探索之旅作为案例,与业内共享赶...

2023-09-28 14:47

金洁教授谈急性髓系白血病现状和治疗策略资讯

金洁教授谈急性髓系白血病现状和治疗策略

急性髓系白血病的治疗应该根据患者基因突变的情况来选择治疗的方法,化疗、靶向治疗、免疫治疗是齐头并进的,最重要的是为患者选择最佳的治疗方案。

文/张蓉蓉 2023-09-28 14:43

一款已开发14年的国产药,被终止研发资讯

一款已开发14年的国产药,被终止研发

近日,眼科药物龙头兴齐眼药发布公告,决定终止一款已开发14年、投入近千万元的眼科药物——他克莫司混悬滴眼液的临床试验。已开发14年、投

2023-09-28 13:50

试点医疗机构周边定点1家零售药店供应国谈药品,北京双通道建设新举措资讯

试点医疗机构周边定点1家零售药店供应国谈药品,北京双通道建设新举措

北京试点在参加试点工作的定点医疗机构周边认定1家定点零售药店供应国谈药,三方共同签订国谈药供应协议。

2023-09-28 13:27

国际SOS发布相关健康及安全建议资讯

国际SOS发布相关健康及安全建议

国际 SOS差旅安全风险高级经理张盈妍表示:“假期出行最重要的是平安顺利,即便是微小的疾病和意外,也可能会对出行体验造成影响,因此做好规划和准备尤为重要。

2023-09-27 19:42

卡提医学实体瘤CAR-T药物获批IND资讯

卡提医学实体瘤CAR-T药物获批IND

近日,细胞治疗企业南京卡提医学科技有限公司(以下简称:卡提医学)宣布,其细胞治疗产品KT032细胞注射液的临床试验申请获国家药品监督管

2023-09-27 16:05

又一家药企终止IPO,3年办了超3000场学术推广会资讯

又一家药企终止IPO,3年办了超3000场学术推广会

近日,深交所公布关于终止对江西百神药业股份有限公司(以下简称“百神药业”)首次公开发行股票并在主板上市审核的决定。专注中药领域,去

2023-09-27 15:39

CDE:首家过评后3年后,不再受理同品种一致性评价申请资讯

CDE:首家过评后3年后,不再受理同品种一致性评价申请

9月25日,国家药监局药审中心(CDE)发布关于公开征求《仿制药质量和疗效一致性评价受理审查指南(征求意见稿)》意见的通知。公示期限为文件公示之日起一个月。

2023-09-26 15:43

一年仅需两次,吉利德长效HIV新药在国内申报上市资讯

一年仅需两次,吉利德长效HIV新药在国内申报上市

近日,中国国家药监局药品审评中心(CDE)官网最新公示,吉利德长效HIV新药来那帕韦片(lenacapavir)上市申请获受理。Lenacapavir是一款fi

2023-09-26 10:27

精鼎医药任命Gwyn Bebb博士为肿瘤药物临床开发业务的全球负责人资讯

精鼎医药任命Gwyn Bebb博士为肿瘤药物临床开发业务的全球负责人

医谷最新消息,近日,精鼎医药,一家领先的、致力于为客户提供I至IV期全方位临床开发服务的跨国合同研究组织(CRO)于近日宣布,公司已决定任命Gwyn Bebb博士担任精鼎高级副总...

2023-09-26 09:52

柯林布瑞API共享中台正式发布,探索破解“接口费”难题新路径资讯

柯林布瑞API共享中台正式发布,探索破解“接口费”难题新路径

医谷最新消息,9月22日,由上海柯林布瑞信息技术有限公司(以下简称“柯林布瑞”)主办、HIT专家网协办的“探索破解接口费难题新路径暨柯林布瑞API共享中台产品发布会”成功举办...

2023-09-25 18:39

英百瑞通用现货型NK细胞疗法IND申请获国家药监局受理资讯

英百瑞通用现货型NK细胞疗法IND申请获国家药监局受理

近日,细胞治疗企业英百瑞宣布,其同源异体外周血来源的通用现货型CAR-raNK细胞产品——IBR733细胞注射液临床实验申请获得国家药监局受理(

2023-09-25 17:25

一款国产创新药,遭“退回”资讯

一款国产创新药,遭“退回”

近日,天境生物公布的一份公开文件显示,公司收到艾伯维的通知,终止双方于2020年9月3日签订的关于CD47抗体来佐利单抗(Lemzoparlimab)的许可合作协议,这也意味着艾伯维将全面...

2023-09-25 16:25

金斯瑞助力开发新一代基因编辑工具,实现24倍效率提升资讯

金斯瑞助力开发新一代基因编辑工具,实现24倍效率提升

日前,博德研究所David Liu团队成功开发了体积更小、效率更高的先导编辑器PE6,比当前一代编辑器PEmax小516-810bp,且插入效率可提升24倍。

2023-09-25 12:06

新辅助欧狄沃联合化疗用于非转移性非小细胞肺癌III期研究取得阳性结果资讯

新辅助欧狄沃联合化疗用于非转移性非小细胞肺癌III期研究取得阳性结果

此次阳性结果进一步强化了以欧狄沃为基础的疗法用于早期癌症的证据,目前欧狄沃已在六项 Ⅲ期研究中被证实可以显著改善相应瘤种的治疗效果,涵盖肺癌、膀胱癌、食管 胃食管连...

2023-09-25 11:14

基石药业PD-1抗体nofazinlimab首次人体试验成果在BJC期刊发表 资讯

基石药业PD-1抗体nofazinlimab首次人体试验成果在BJC期刊发表

其国际多中心III期研究预期明年一季度公布治疗HCC主要成果

2023-09-25 09:45