7月5日,在2024世界人工智能大会“可信大模型论坛”上,支付宝公布了其AI技术在医疗领域布局的最新进展:发布多模态医疗大模型,同时,全新推出包括医疗可信一体机、可信云等多款数智化解决方案。现场,支付宝还与人民卫生出版社、北京大学医学部、浙江省卫生健康委等20家机构,联合发起AI医疗共建计划,共同探索AI数智技术底座与创新应用服务。
支付宝多模态医疗大模型亮相
经过半年多测试打磨,支付宝医疗大模型正式亮相,这也是国内首批多模态医疗大模型之一。
蚂蚁集团大模型应用部总经理顾进杰介绍了背后的技术研发。蚂蚁百灵大模型已具备能“看”会“听”、能“说”会“画”的原生多模态能力,可以直接理解并训练音频、视频、图、文等多模态数据。支付宝医疗大模型以此为基座模型,添加了包含报告、影像、药品等百亿级中英文图文、千亿级医疗文本语料及千万级高质量医疗知识图谱,中英文医疗考试、基准测试达到或超过GPT4水准,医疗专业能力在中文医疗LLM评测榜单promptCBLUE中,位列A榜第一,B榜第二。同时,全栈自研医疗多模态结构,使得模型识别报告、药品、毛发等图像准确率达90%以上,相关技术在行业顶尖技术期刊与会议 CVPR、KDD、ECCV等发表了多项成果。
为了让回答对话更加可靠,在研发阶段,支付宝还与数百个专业医学团队、专家进行合作标注数据,保障信息权威可信,同时联合上海仁济医院推出首个中文医疗专科问答推理数据集RJUA-QA。模型测试阶段,用户、患者、医生参与问答反馈,在专业同时,兼顾患者关怀。
去年11月,浙江卫健委应用支付宝开放的“AI就医助理”解决方案,依托大模型、数字人技术,打造了全国首个数字健康人“安诊儿”,给浙江居民提供云陪诊、健康咨询等服务,上线以来,服务了1000多家医疗机构。
在此次发布前一周,6月28日,上海市第一人民医院宣布通过支付宝“AI就医助理”解决方案,以大模型、数字人等技术为基础,为患者提供交互陪伴式就医服务,打造上海市首个基于大模型的语音交互的“AI陪诊师-公济小壹”。
“眼睛干涩挂什么科?” 65岁的李阿姨在上海市一就诊时,打开手机支付宝向“公济小壹”提问后,便会收到了相关就诊建议和挂号服务推送。在完成挂号后,李阿姨继续向“公济小壹”询问当前候诊信息,便会收到语音和文字提示:“当前您需要就诊,前面排队4人,当前叫号66号,地址位于7号楼1楼B区眼科检查一区……”李阿姨在点击“院内导航”的连接后,通过手机摄像头沿着实景AR的导航路线前往诊室。
上海市一医院“AI陪诊师-公济小壹”
市一医院信息处副处长范骏翔表示:“AI 就医助理“公济小壹”采用数字虚拟人作为交互载体,以语音输入输出和识别作为主要的交互方式,并以大语言模型作为其核心智能引擎。旨在为患者提供全天候的陪伴和指导,精准理解和快速响应患者的需求,从而改善他们的就医体验。”患者每完成一个就诊环节,系统会主动提示患者如何完成下一步操作。从诊前预约挂号、在线取号,到诊中院内导航、排队叫号、扫码支付,再到诊后的报告查询、用药注意等线上服务的“一站式”串联,为患者提供“虚拟陪诊、现实感知”的就医体验。
同时,市一医院还利用利用AI大模型能力辅助医生生成电子病历。“机械化的工作耗费了年轻医生大量的时间和精力,有何举措能够将他们从重压之下解脱出来,是需要我们思考的问题。” 上海市一副院长、眼科中心主任孙晓东表示。
为此,市一医院引入蚂蚁百灵大模型能力进行提高病史书写效率的创新应用,通过关键信息的给定、语音输入等多种形式结合自动生成病历,简化入院记录的填写过程,将原本需要5到10分钟的工作缩减到了15至20秒,显著节省了医生 “敲键盘”的时间。以白内障为例,目前医院抽取了1万份历史病历,将其输入到大语言模型中进行微调。在这一过程中,开发部门设计了相应的提示词,训练模型学习如何撰写病史。
顾进杰表示,AI的深度应用,不仅对数据、算法、算力提出了更高要求,也对可靠、安全、隐私提出更多挑战,医疗场景下,保障技术可靠与数据隐私安全,至关重要。为此,支付宝面向行业推出全新的“医疗可信一体机+可信云”的解决方案,通过密态计算与存储,让医疗数据可用不可见,机构保管更安全。
据介绍,百灵医疗可信一体机,核心解决医院面临的算力不足痛点,可实现开箱即用,训推一体,支持国产算力,软硬件协同优化加速。医疗大模型可信云方案,通过公有云与专有云部署密态推理,聚焦解决数据隐私安全和商业机密保护问题。
AI医疗创新应用“联盟”
医疗技术的创新,需要依托平台、产业、学界共同努力。大会现场,支付宝、人民卫生出版社、北京大学医学部、浙江省卫生健康委、厦门市卫生健康委员会、浙江省人民医院、上海交通大学医学院附属仁济医院、北京大学人民医院、复旦大学附属肿瘤医院、上海市第一人民医院、首都医科大学附属医院等20多家机构、企业,联合发起了AI医疗共建计划,共同探索大模型应用及各类专科模型创新研发。
支付宝副总裁、数字医疗健康事业部总经理张俊杰表示:“支付宝希望用最顶尖的技术做最普惠的服务,让AI像‘扫码支付’一样便利每个人的生活。支付宝也会持续开放AI技术与行业解决方案,携手合作伙伴一起,推动智能医疗走向普惠、普及。”
据了解,2014年支付宝支持全国第一笔远程挂号缴费,经过十年发展,平台已服务超6亿看病就医人群,是国内规模最大的医保第三方在线服务平台、一站式的医疗健康服务平台。目前,全国300多个城市、超3600家医院在支付宝上提供一站式数字医疗服务。
来源:医谷网
为你推荐

CDE:已取得药品批准文号的两种或者两种以上具有独立的适应症和用法用量的化学药品,如何申请组合包装?
已取得药品批准文号的两种或者两种以上具有独立的适应症和用法用量的化学药品,如申请组合包装,应通过什么途径提出申请,申报资料有什么要求?
2025-06-12 21:44

赛诺菲加速尼塞韦单抗全球发货,提前数月助力医务工作者应对今年RSV流行季
赛诺菲将于2025年第三季度初启动尼塞韦单抗的全球发货工作,以确保在2025-2026年呼吸道合胞病毒流行季来临前,实现广泛供应。
2025-06-12 17:31

CDE发布《先进治疗药品的范围、归类和释义(征求意见稿)》
本文件所称先进治疗药品,是指符合药品相关管理规定,按照药品的路径进行研制、生产、经营、 使用和监管,且经体外操作生产并在人体内发挥预期功能的细胞治疗药品、基因治疗药...
2025-06-11 22:06

安图生物注销了一控股子公司
近日,安图生物发布公告称,公司控股子公司安图莫比已完成注销手续,该公司是安图生物与Mobidiag Oy(以下简称Mobidiag)在6年前成立的合资企业,伴随着注销,如今正式落幕。
2025-06-11 15:25

因美纳发布2024年度企业社会责任报告,持续释放基因组学的力量
报告重点阐述了因美纳在推动精准医疗更加可及、赋能公众与社群、在业务中践行可持续发展、尽责运营和秉持诚信领导原则等方面的持续努力。
2025-06-11 14:21

破解传统疗法局限,华东医药脂溢性皮炎外用制剂国内III期临床获批
由中美华东申报的一项评价0 3%罗氟司特泡沫(ZORYVE®)在脂溢性皮炎患者中有效性和安全性的多中心、随机、双盲、赋形剂平行对照的III期临床试验申请获得批准。
2025-06-11 09:57

医药领域有哪些新探索,中办 国办关于深入推进深圳综合改革试点深化改革创新扩大开放的意见
深化药品医疗器械审评审批制度改革,提升口岸药品监管和检验检测能力。完善临床急需进口药品、医疗器械使用及监督管理制度,探索将国际新药临床真实世界数据用于进口药品注册上...
2025-06-10 22:13

默克治疗腱鞘巨细胞瘤的药物匹米替尼上市许可申请获受理
基于III期MANEUVER研究的阳性数据,这是Pimicotinib这一潜在“同类最优”TGCT治疗药物的全球首个申报
2025-06-10 14:25

推进优质医疗卫生资源共享,大力发展“一老一小”普惠服务,中办 国办关于进一步保障和改善民生 着力解决群众急难愁盼的意见
推进优质医疗资源扩容下沉和区域均衡布局,优化区域医疗中心建设模式、管理体制和运行机制。实施医疗卫生强基工程,推动城市医疗资源向县级医院和城乡基层下沉,逐步实现紧密型...
2025-06-09 19:15

因爱凝聚 · 共愈新生 2025罕见血栓与止血疾病学术会成功举办
2025年6月8日,由中国红十字基金会与《医药养生保健报》联合主办、武田中国支持的“2025罕见血栓与止血疾病学术会”在沪成功举办。
2025-06-09 13:12

深耕显微外科手术机器人创新,深度医疗获得万孚创谷领投数千万元融资
本轮资金将主要用于加速其自主研发的“显微灵眸”系列手术机器人产品的临床试验、多管线研发及商业化布局,标志着国产高端医疗装备在精准微创领域迈出关键一步。
2025-06-09 11:06

众惠医药完成两轮千万级融资,加速3D打印空心微针与外泌体产业化双突破
本轮融资将主要用于推进中国首个空心微针医疗器械生产基地建设、三类医疗器械认证申报、细胞与外泌体中试车间落地,以及西北首个自动化生物组织样本库的完善,标志着这家创新生...
2025-06-09 10:54

首届重庆市预防医学会公共卫生眼科学年会暨第四届全国甲状腺眼病专家论坛圆满举行
2025年6月6日至7日,由重庆市预防医学会主办、爱尔眼科医院集团及重庆爱尔眼科医院承办,湖南省湘江公益基金会公益支持的“首届重庆市预防医学会公共卫生眼科学年会”“第四届全...
文/李林 叶秀玲 2025-06-08 17:12

CDE发布儿童抗肿瘤药物研发鼓励试点计划(星光计划)
星光计划旨在通过申请人填写提交《儿童抗肿瘤药物研发实施框架》的方式,与药审中心及早进行沟通,获得其抗肿瘤药物在儿童人群研究过程中技术问题(包括但不限于:研发策略、研...
2025-06-07 20:48

CDE:已上市血液制品生产场地变更研究技术指导原则(试行)
本指导原则适用于人血浆来源的血液制品,对于动物血源产品(如马免疫血清制品、猪源纤维蛋白粘合剂等),可参考国内外其他相关指导原则并借鉴本指导原则的基本理念开展相应变更...
2025-06-07 20:38

国家药监局 财政部 市场监管总局联合发布对药品医疗器械质量安全内部举报人举报实施奖励的公告
重大违法行为是指涉嫌犯罪或者依法被处以责令停产停业、责令关闭、吊销(撤销)许可证件、较大数额罚没款等行政处罚的违法行为。
2025-06-06 18:23