智能边缘计算平台可简化放射学深度学习
北美放射学会(Radiological Society of North America,简称RSNA)年度大会上,有超过100家参展商采用了NVIDIA的技术将AI引入放射学。2019年看来将成为AI在医疗健康领域应用的拐点。
尽管AI潜力巨大,但仍存在一项关键性的挑战——即如何在保护患者隐私的同时,获取训练AI模型所需的海量数据。通过与业界合作,NVIDIA创建出了一种解决方案。
在今年的RSNA大会上,NVIDIA推出了NVIDIA Clara联邦学习,它利用分布式协作型学习技术,能够将患者数据保存在医疗服务机构内部。
NVIDIA Clara联邦学习运行于NVIDIA最近发布的NVIDIA EGX智能边缘计算平台上。
Clara联邦学习(Clara Federated Learning),是一款用于分布式协作型AI模型训练的参考应用程序,可保护患者隐私。这些分布式客户端系统运行于由全球系统制造商打造的面向边缘的NVIDIA NGC-Ready服务器上,可在本地执行深度学习训练,并协作训练出更准确的全局模型(global model)。
其工作原理如下:Clara联邦学习应用程序被打包到Helm图表中,以简化在Kubernetes基础架构上的部署。NVIDIA EGX平台将安全地对联邦服务器和协作客户端进行配置,提供启动联邦学习项目所需的一切,包括应用程序容器和初始AI模型。
NVIDIA Clara联邦学习采用分布式训练,跨医院开发AI模型,无需共享个人数据。
参与项目的医院使用NVIDIA Clara AI辅助注释SDK来标记自家患者数据,该SDK集成于3D Slicer、Mitk、Fovia和Philips IntelliSpace Discovery等医学指示仪中。使用预先训练的模型和迁移学习技术,NVIDIA AI能够帮助放射科医生进行标记,将复杂的3D研究时间从几小时减少到几分钟。
对于参与项目的各家医院来说,他们的EGX服务器会基于其本地数据来训练全局模型。本地训练结果通过安全链接共享回联邦学习服务器。这种方法只会共享对模型权重的修正,而不共享病例,从而能够保护隐私,以便通过联合平均来构建新的全局模型。
这一过程将会反复进行,直到AI模型达到其期望的精度。这种分布式方法实现了卓越的深度学习性能,同时能够确保患者数据安全和隐私。
全球领先的医疗健康机构——包括美国放射学院(American College of Radiology,简称ACR)、麻省总医院(Massachusetts General Hospital)和加州大学洛杉矶分校医疗中心(UCLA Medical Center)——都在抢先采用该技术,致力于为自己的医生、患者和医疗设施开发个性化的AI应用,他们的医疗数据、应用程序和设备都在增加,同时患者隐私必须得到保护。
ACR正在其国家医疗成像平台AI-LAB中试用NVIDIA Clara联邦学习。AI-Lab将助力ACR的38000名医疗成像会员安全地构建、共享、调整并验证AI模型。对于希望使用AI-Lab的医疗机构来说,现有多款面向边缘的NVIDIA NGC-Ready 系统可供其选择,包括Dell、HPE、联想和Supermicro。
加州大学洛杉矶分校放射科也在使用NVIDIA Clara联邦学习,将AI的强大功能引入放射科。作为顶级学术医学中心,加州大学洛杉矶分校能够验证Clara联邦学习的有效性,并在未来将其扩展到更广泛的加州大学系统中。
新英格兰的美国联盟医疗体系(Partners HealthCare)也宣布了一项采用NVIDIA Clara联邦学习的新计划。麻省总医院和布莱根妇女医院临床数据科学中心将利用美国联盟医疗体系系统中的数据资产和临床专业知识,率先开展这项工作。
在英国,NVIDIA正与伦敦国王学院(King's College London)和Owkin合作,为英国国家医疗服务体系(National Health Service)搭建联邦学习平台。运行于NVIDIA Clara上的Owkin Connect平台使算法能够从一家医院传输到另一家医院,在医院的本地数据集上进行训练。该平台为每家医院提供一个区块链分布式分类账,用于捕获和跟踪用于模型训练的所有数据。
该项目最初将伦敦的四家一流教学医院相连,为其提供AI服务,以加速癌症、心衰和神经退行性疾病等领域工作的开展,并将于2020年扩展到至少12家英国医院。
随着传感器的迅速普及,像斯坦福医院这样的医疗中心正致力于为每套系统赋予智能。然而要使传感器变得智能,设备需要一台强大且低功耗的AI计算机。
这正是NVIDIA要发布NVIDIA Clara AGX的原因,这是一款嵌入式AI开发工具包,可在高数据速率下进行图像和视频处理,将AI推理和3D可视化技术应用于看护点。
Clara AGX搭载的是与自动驾驶汽车控制处理器相同的NVIDIA Xavier SoC。其功耗仅为10W,适合嵌入于医疗仪器当中或在小型相邻系统中运行。
革命性的HyperFine是Clara AGX的完美应用案例,这是全球首款便携式医疗点MRI系统。HyperFine将于本周RSNA大会上在NVIDIA展位上展出。
HyperFine系统是众多医疗仪器、手术套件、患者监控设备和智能医疗摄像头中首批有望采用Clara AGX的系统之一。NVIDIA正在见证AI医疗物联网的开启。
NVIDIA Clara SDK不久即将通过NVIDIA的早期接入计划推出。它包括两款常见参考应用程序——针对内窥镜视频的AI推理和用于超声的软件波束成形。
RSNA 2019年是AI在放射学领域应用取得突破性进展的一年。NVIDIA很高兴能与众多医疗健康合作伙伴展开合作,推进医学成像的发展,同时利用边缘AI保护患者数据安全。
好文章,需要你的鼓励
腾讯ARC实验室推出AudioStory系统,首次实现AI根据复杂指令创作完整长篇音频故事。该系统结合大语言模型的叙事推理能力与音频生成技术,通过交错式推理生成、解耦桥接机制和渐进式训练,能够将复杂指令分解为连续音频场景并保持整体连贯性。在AudioStory-10K基准测试中表现优异,为AI音频创作开辟新方向。
Coursera在2025年连接大会上宣布多项AI功能更新。10月将推出角色扮演功能,通过AI人物帮助学生练习面试技巧并获得实时反馈。新增AI评分系统可即时批改代码、论文和视频作业。同时引入完整性检查和监考系统,通过锁定浏览器和真实性验证打击作弊行为,据称可减少95%的不当行为。此外,AI课程构建器将扩展至所有合作伙伴,帮助教育者快速设计课程。
Meta与特拉维夫大学联合研发的VideoJAM技术,通过让AI同时学习外观和运动信息,显著解决了当前视频生成模型中动作不连贯、违反物理定律的核心问题。该技术仅需添加两个线性层就能大幅提升运动质量,在多项测试中超越包括Sora在内的商业模型,为AI视频生成的实用化应用奠定了重要基础。