无论是推进癌症筛查、减少假阳性,还是改进肿瘤识别和治疗方案,AI都是医疗健康创新和加速的强大推动力。然而,尽管前景光明,但将AI集成到实际解决方案中却可能会给许多IT组织带来挑战。
为此,NVIDIA提供诸多解决方案帮助医疗健康行业更好地拥抱AI,其中NVIDIA AI Enterprise软件套件和NVIDIA FLARE便是重要落地举措。
加速实现医疗健康研究的突破
NVIDIA AI Enterprise为在虚拟化基础设施上托管各种医疗健康和运营应用程序的组织简化了AI部署体验。
利用NVIDIA AI Enterprise软件套件(可通过NVIDIA LaunchPad获得),可以使用VMware vSphere在主流加速服务器(包括戴尔科技慧与、联想和许多其他公司的系统)上运行高级AI工作负载。
NVIDIA AI Enterprise能够统一医疗健康组织的数据中心,从而推动创建以NVIDIA技术为核心的生态系统。通用的NVIDIA和VMware基础设施让这些解决方案的部署和管理变得更加容易,从而惠及软件供应商和医疗健康组织。
NVIDIA AI Enterprise使IT管理员能够将Vyasa和iCAD等AI应用程序与医院的核心应用程序结合运行,从而在他们熟悉的环境中简化工作流程。
只需单击几下即可调整计算资源,让医院可以转换对患者和医疗健康提供商的护理。
Vyasa是医疗健康和生命科学深度学习分析工具的提供商,使用NVIDIA AI Enterprise构建可以搜索非结构化内容(如患者护理记录)的应用程序。
借助该软件,Vyasa可以加速开发他们的深度学习应用程序,并帮助深入研究非结构化数据和PDF,来评估哪些患者的风险更高。它可以识别出超过一年没有接受检查的患者,并可以根据年龄和种族等其他风险因素进行优化。
由于实现了平台需求的快速调配,无需再手动下载和集成软件包,NVIDIA AI Enterprise将部署时间缩短了一半。
放射科医生使用iCAD的创新ProFound AI软件协助解读乳房X光片。这些AI解决方案可帮助更早地发现癌症、对乳房密度进行分类,并根据每位女性的乳房X光筛查结果,准确评估个人短期内的乳腺癌风险。使用VMware vSphere运行高级工作负载对于iCAD的医疗健康客户至关重要,因为他们可以轻松地将其数据密集型应用程序集成到任何医院的基础设施中。
对于医疗健康IT和软件公司而言,将AI集成到医院环境中是头等大事。许多NVIDIA Inception合作伙伴都将在此类环境中测试在NVIDIA AI Enterprise上部署其产品的难易程度。其中包括Aidence、Arterys、contextflow、ImageBiopsy Lab、InformAI、MD.ai、Medo AI、 methinks.ai、PhenoMx、RADLogics、Sciberia、Subtle Medical和VUNO。
目前,荷兰癌症研究所(NKI)正在使用NVIDIA AI Enterprise软件套件在比目前常用的3D癌症扫描精度更高的3D癌症扫描中测试AI工作负载。
利用FLARE进行联邦学习
联邦学习是一种隐私保护技术,在处理稀疏、保密或缺乏多样性的数据时特别有用。但它对于大型数据集也很有用,因为组织的数据采集方法或者患者或客户统计技术在处理此类数据集时可能会出现偏差。
许多其他软件制造商(如美国放射学会的AI LAB和Rhino Health)开始通过其联合学习平台在NVIDIA AI Enterprise上验证他们的软件,通过集成到通用的医疗健康IT基础设施中来简化部署。
NVIDIA FLARE(全称为Federated Learning Application Runtime Environment,联邦学习应用程序运行时环境)是NVIDIA Clara Train联邦学习软件的底层引擎,该软件已用于医学成像、基因分析、肿瘤学和新冠肺炎(COVID-19)研究中的AI应用程序。利用此SDK,科研人员和数据科学家可以使其现有的机器学习和深度学习工作流程适应分散工作范式。
提供NVIDIA FLARE的源代码可为科研人员和平台开发者带来更多工具来定制其联邦学习解决方案,从而更好地推动在各行各业中应用先进的AI技术。
利用此SDK,科研人员可以选择不同的联邦学习架构,并根据各个领域特有的应用来定制方法。平台开发者可以使用NVIDIA FLARE为客户提供构建多方协作应用程序所需的分布式基础设施。
联邦学习参与者协同训练或评估AI模型,同时无需汇集或交换每个组的专有数据集。为实现这一点,NVIDIA FLARE提供了不同的分布式架构,包括点对点、循环式和服务器-客户端方法等。
通过使用服务器-客户端方法(每个参与者学习的模型参数均发送到公共服务器并聚合为一个全局模型),NVIDIA牵头开展了多个联邦学习项目,以帮助划分胰腺癌种类、对乳房X光检查中的乳房密度进行分类以告知乳腺癌风险,以及预测新冠肺炎患者的氧气需求。
在使用NVIDIA FLARE进行的两个联邦学习协作项目中也使用了服务器/客户端架构:NVIDIA与Roche Digital Pathology的科研人员合作,通过使用全视野数字切片进行分类成功完成内部仿真;以及与荷兰的Erasmus Medical Center合作开发AI应用程序,以识别与精神分裂症病例相关的基因变异。
NVIDIA FLARE可与现有的AI方案(包括适用于医学成像的开源MONAI框架)相集成。
结语
近年来,AI(人工智能)技术与医疗行业深度融合,为人们的健康生活和医疗服务带来更多可能。 不管是NVIDIA AI Enterprise还是NVIDIA FLARE,NVIDIA为医疗健康行业拥抱AI提供了可兹落地的抓手。
好文章,需要你的鼓励
这项研究介绍了VisCoder,一个经过专门微调的大语言模型,用于生成可执行的Python可视化代码。研究团队创建了包含20万样本的VisCode-200K数据集,结合了可执行代码示例和多轮修正对话。在PandasPlotBench基准测试中,VisCoder显著优于同等规模的开源模型,甚至在某些方面超越了GPT-4o-mini。研究还引入了自我调试评估模式,证明了反馈驱动学习对提高代码可执行性和视觉准确性的重要性。
这项研究提出了"适应再连续学习"(ACL)框架,一种创新的方法解决预训练模型在连续学习中的稳定性-可塑性困境。通过在学习新任务前先对模型进行适应性调整,ACL使模型既能更好地学习新知识(提高可塑性),又能保留已有知识(维持稳定性)。实验证明,该框架能显著提升各种连续学习方法的性能,为解决人工智能系统中的"灾难性遗忘"问题提供了有效途径。
这篇研究首次关注了CLIP模型文本编码器的对抗鲁棒性问题,提出了LEAF方法(Levenshtein高效对抗性微调)来增强文本编码器的稳健性。实验表明,LEAF显著提高了模型在面对文本扰动时的性能,在AG-News数据集上将对抗准确率从44.5%提升至63.3%。当集成到Stable Diffusion等文本到图像生成模型中时,LEAF显著提高了对抗噪声下的生成质量;在多模态检索任务中,它平均提高了10个百分点的召回率。此外,LEAF还增强了模型的可解释性,使文本嵌入的反演更加准确。
BenchHub是由韩国KAIST和Yonsei大学研究团队开发的统一评估平台,整合了38个基准中的30万个问题,按技能、学科和目标类型进行精细分类。研究显示现有评估基准存在领域分布偏差,而BenchHub通过自动分类系统和用户友好界面,让用户能根据特定需求筛选评估数据。实验证明模型在不同领域的排名差异巨大,强调了定制化评估的重要性。该平台支持多语言扩展和领域特化,为研究人员和开发者提供了灵活评估大语言模型的强大工具。