瑞金医院携手华为开源RuiPath病理模型
近日,瑞金由上海交通大学医学院附属瑞金医院(以下简称“瑞金医院”)主办、医院华为技术有限公司协办的携手型“瑞金医院RuiPath病理模型开源及成果发布会”在上海举行。瑞金医院联合华为开源RuiPath病理模型,开源助力AI在医疗行业落地。理模
RuiPath病理模型,瑞金是医院由瑞金医院在华为团队支持下研发的临床级多模态病理大模型,涵盖泛癌种视觉特征提取、携手型视觉-语言跨层表征对齐、开源长序列的理模深度思考模型训练机制等能力,用于全流程临床病理辅助诊断,瑞金目前已覆盖中国每年全癌种发病人数90%的医院19个常见癌种,涵盖上百个辅助诊断任务。携手型
此次开源的开源是RuiPath病理模型的核心“视觉基础模型”。该模型依托瑞金医院百万张高质量数字病理切片数据,理模使用华为AI全流程工具链ModelEngine进行标注、训练和模型精调而成,在业界12个主流公开数据集的14个辅助诊断任务测试中,有7个达到业界领先水平(SOTA),并已具备临床验证能力。本次开源配套提供测试数据集,覆盖了肺癌、结直肠癌、甲状腺癌、胃癌、乳腺癌、前列腺癌、胰腺癌等7个常见癌种。华为同步开放了基于以上开源模型的工具及实践指南,对于推动医疗AI普惠具有重大意义:
普惠AI,降低病理AI辅助诊断部署门槛:将瑞金医院多年积累的高质量病理数据进行训练和精调,获得临床级模型和工具,基层医院可节省数据准备、模型训练、应用开发的大量初始工作,促进病理AI辅助诊断广泛应用。
加速AI在医疗行业落地:开放数据标准、工具、评测数据集,解决源头数据处理、模型部署、应用开发、评测上线的一系列实际困难,打通从模型到应用的“最后一公里”,为AI行业化落地提供最佳实践。
提升整体病理诊断水平:将瑞金医院优质数据和经验知识沉淀到RuiPath病理模型并开源,使头部三甲医院病理诊断能力可以快速复制到基层医院,实现各级医院病理诊断领域高水准“齐步走”。
中国工程院院士、瑞金医院院长宁光表示:“病理大模型只有真正临床应用才能产生价值,实现AI普惠。希望此次开源与成果共享,集聚上海力量、中国力量,让更多同道参与到病理辅助诊断模型的研究与应用中,加速RuiPath病理模型临床应用落地,共同提高医疗水平,让AI医疗能力持续惠及全社会。”
华为公司副总裁、数据存储产品线总裁周跃峰表示:“医疗行业长期积累了大量的高质量数据,这是率先实现AI行业化落地的前提。”为加速AI在医疗行业落地,华为基于多年技术积累和实践经验,提出四点倡议:
(1)在数字化基础上,做好医疗数据集的标准化和管理运营。建议医院各科室需要明确数据责任人,对病理切片等数据质量严格把关,推进全院数据标准化、共享化、可视化。
(2)构建多科室、多院区可共享的智能诊疗数据基础设施平台。加强存力、算力和运力建设,打通数据、模型和应用孤岛,让传统单科室诊疗走向多模态全流程诊疗。
(3)促进数据工程、模型工程、评测技术的工具化、标准化,加快开放。医疗多模态数据在标准化工具赋能下,快速适配和智能处理业务与技术需求。
(4)加快构建合理的AI诊疗商业模式并推动落地,形成良性循环。
“三年磨一剑”,坚持长期主义,华为与瑞金医院病理模型的合作共经历了“数字化”和“智慧化”两个阶段。
第一阶段病理数字化,在瑞金医院采用统一数字病理格式(CSP)高效存放数据(空间节省45%),实现病理切片数据的标准化落地。从2023年联合业界发布《数字化智慧病理科建设白皮书》,到2025年共积累了百万规模高质量数字化病理数据,为后续的智慧化打下坚实基础。
第二阶段病理智慧化,华为天才少年团队入驻瑞金医院,进行数据工程、模型工程、应用工程的联合研发。基于高质量数据,通过“医生+AI工程师”进行模型蒸馏、知识蒸馏、模型精调。改变传统单癌种小模型开发模式,实现大模型从泛癌种精准识别、辅助诊断任务到上层应用的端到端落地,使得其贯穿医生诊断全流程。
华为提供并开源ModelEngine,实现数据准备、模型训推、应用编排全流程的工具化、标准化和自动化。医生不再是“标注工”,而是“审核官”,从逐条标注变为批量审核,效率翻数倍,并保证了标注的专业性和准确性。基于ModelEngine应用工程能力,实现应用系统接口的标准化对接和病理报告模板可视化编排,单病种AI诊断应用上线周期从10天到2天。
华为通过一系列黑科技加持,采用算存网协同、模型及算法优化技术,仅用16卡集群完成了RuiPath病理模型开发及部署:
模型蒸馏:通过先进的蒸馏技术,将671B通用模型的能力蒸馏到32B参数规模的专家模型,小而美。结合瑞金医院专业知识和精调,大幅提升训推效率,降低对机房空间的要求。
以查代算(Unified Cache):对模型固化的知识,通过缓存技术用快速查找替代复杂的重复计算,大幅降低推理成本。
资源池化(XPU Pooling):极致利用算力实现“昼推夜训”。白天,算力主要用于支撑医生日常的诊断推理;夜间,空闲算力则自动汇集起来,进行模型的持续训练和迭代。
百年沉淀,共享世人。面向未来,华为将继续与瑞金医院开展联合创新,共建医疗“Data+AI”新生态,携手助力医疗AI普惠。
(责任编辑:百科)
-
新华社北京8月26日电 在国际乒联26日公布的最新一期世界排名中,凭借在世界乒乓球职业大联盟WTT)欧洲大满贯赛瑞典站夺冠收获的2000分,中国队选手孙颖莎的世界排名积分增至12200分,再次刷新由其 ...[详细]
-
Football Italia消息:罗马,那不勒斯以及国际米兰都准备好加入抢购西里古的行列。意大利国家队的门线上站着的,是铁打的布冯,流水的二门,最新一期二门西里古在2011年夏天加盟法甲豪门后,效力 ...[详细]
-
东南网5月10日讯本网记者 林歆刚)根据关于返校复学工作的通知,结合厦门市和学校疫情防控工作实际,集美大学定于5月16日起安排学生含研究生和毕业年级本科生)分期分批错峰有序返校。据悉,集美大学将根据具 ...[详细]
-
副热带高压持续“营业”,热浪滚滚袭来。昨天的泉州,午后热浪侵袭,大部分乡镇在30℃~37℃,个别乡镇突破了39℃,其中以安溪金谷镇39.2℃为最高。德化、安溪、永春、南安、惠安 ...[详细]
-
干粉投加系统操作流程干粉投加机工作原理) 标签: 添加时间:2022-11-14 浏览次数:3406 全国服务热线:【1 ...[详细]
-
Nike Kobe 8 “WHAT THE”与Kobe 9 Elite “WHAT THE”将回归
近日,球鞋界迎来了令人振奋的消息:Nike Kobe 8 “WHAT THE”和Nike Kobe 9 Elite “WHAT THE”两款经典球鞋将于明年相继回归。这一消息对于科比·布莱恩特的球迷以 ...[详细]
-
新华社北京8月16日电记者叶昊鸣)记者16日从交通运输部获悉,为进一步规范农村客货邮运营服务,交通运输部鼓励交通运输主管部门与相关部门沟通协作,支持农村客货邮经营者拓展经营范围。交通运输部日前印发《农 ...[详细]
-
暑期来了,市文旅局携手各县市、区)文化和旅游主管部门,在科学精准做好疫情防控工作前提下,推出各类特色文旅活动、周末“微度假”网红打卡地、主题旅游线路以及文旅惠民措施等,不断提振 ...[详细]
-
“两桶油”与地炼企业之间有关成品油的“价格战”还在继续,而且范围呈扩大趋势,就连北京这个“两桶油”很少实施降价措施的城市,近来也 ...[详细]
-
春临鹭岛,花开满城,眼下正是郊游踏青的好时节。随着国内疫情形势逐渐好转,连休五天的“五一”小长假即将到来,我市实施交通和景区免费政策等一个个好消息传来,吸引越来越多市民游客走出 ...[详细]