“GreatLakes”高性能计算和人工智能超级计算机将助力于大学数千用户的科研和探索
2018年11月19日——Mellanox是面向数据中心服务器和存储系统的高性能、端到端智能互连解决方案的领先供应商,该公司今天宣布其包含基于ConnectX-6的HCA、Quantum交换机、LinkX线缆以及软件的新一代HDR InfiniBand解决方案将用于密歇根大学的新超级计算机。名为“GreatLakes”的新超级计算机将加强大学的研究活动,并为整所大学的数千名用户提供可扩展的高性能计算(HPC)和人工智能(AI)基础架构。
这台新HPC和AI超级计算机由Dell EMC部署,共包括13000个CPU核和一个由25600个GPU核,采用混合拓扑结构,通过Mellanox智能InfiniBand网络互连。两个单元的综合性能超过了千万亿次。
“访问高性能计算资源是密歇根大学丰富的计算生态系统的重要组成部分,”密歇根大学信息技术副校长兼首席信息官Ravi Pendse表示。“机器学习和精准健康等许多新兴领域的研究人员将会通过使用Great Lakes得到计算性能的提升。”
“Dell EMC非常高兴与密歇根大学及我们的技术合作伙伴一起合作,将这一创新的高性能系统带给这样一个强大的研究人员社区,”Dell EMC高性能计算副总裁Thierry Pellegrino表示。“此Grea tLakes集群将极大地提升性能、吞吐量和响应能力,以缩短密歇根大学的研究人员在人工智能、基因组学和生物科学等一系列学科的重大发现中所需的时间。”
“我们为看到世界上第一台基于Mellanox HDR InfiniBand ConnectX-6 HCA和Quantum交换机的超级计算机诞生感到自豪,”Mellanox Technologies市场副总裁Gilad Shainer表示。“InfiniBand支持的智能网络计算加速引擎将为密歇根大学用户的HPC和AI应用提供最高的性能、效率和可扩展性。”
Great Lakes超级计算机计划在2019年上半年满负荷运行,并提供给密歇根大学社区使用。
好文章,需要你的鼓励
微软近年来频繁出现技术故障和服务中断,从Windows更新删除用户文件到Azure云服务因配置错误而崩溃,质量控制问题愈发突出。2014年公司大幅裁减测试团队后,采用敏捷开发模式替代传统测试方法,但结果并不理想。虽然Windows生态系统庞大复杂,某些问题在所难免,但Azure作为微软核心云服务,反复因配置变更导致客户服务中断,已不仅仅是质量控制问题,更是对公司技术能力的质疑。
Meta研究团队发现仅仅改变AI示例间的分隔符号就能导致模型性能产生高达45%的巨大差异,甚至可以操纵AI排行榜排名。这个看似微不足道的格式选择问题普遍存在于所有主流AI模型中,包括最先进的GPT-4o,揭示了当前AI评测体系的根本性缺陷。研究提出通过明确说明分隔符类型等方法可以部分缓解这一问题。
当团队准备部署大语言模型时,面临开源与闭源的选择。专家讨论显示,美国在开源AI领域相对落后,而中国有更多开源模型。开源系统建立在信任基础上,需要开放数据、模型架构和参数。然而,即使是被称为"开源"的DeepSeek也并非完全开源。企业客户往往倾向于闭源系统,但开源权重模型仍能提供基础设施选择自由。AI主权成为国家安全考量,各国希望控制本地化AI发展命运。
香港中文大学研究团队开发出CALM训练框架和STORM模型,通过轻量化干预方式让40亿参数小模型在优化建模任务上达到6710亿参数大模型的性能。该方法保护模型原生推理能力,仅修改2.6%内容就实现显著提升,为AI优化建模应用大幅降低了技术门槛和成本。