本周,新一轮全球超算五百强榜单再度出炉。与上一轮一样,富士通Fugaku超级计算机以415.5千万亿次的高性能Linpack(HPL)基准测试结果高居榜首,击败了去年的冠军IBM Summit超级计算机。曾经的冠军此次下落一名,位列榜眼。虽然富士通、ARM与日本都对这一结果感到欣慰,但结合现实使用场景,五百强榜单到底有什么意义?
实际上,全球各顶级超级计算机的竞争以Linpack基准测试为核心。这套基准只是简单代替系统供应商向系统中添加计算元素,因此衡量的就只有纯粹的原始处理能力,其中不存在任何现实压力与变量。在过去25年以来,超算五百强榜单一直使用Linpack作为基准,相关结果也得到计算领域众多供应商的高度关注。但可以肯定的是,这样的测试基准已然过时。虽然基准测试能够激发各方对工作负载处理能力与蛮力计算水平的优化,但却始终体现不出能够解决现实问题的明智方法。
IBM Summit超级计算机
为了防止各机构及企业作弊,这项基准测试对计算优化方法做出了一系列非常严格的限制,且仅衡量科学计算中使用的双精度浮点(64位)数学运算(大部分计算机只针对32位数学运算进行优化)。实际上,Linpack性能数据只能表现设备实际性能中的一小部分。此外,五百强Linpack测试属于一种“简单粗暴”的峰值性能测量方法,甚至没有考虑到在当前以及未来很长一段时间内,超级计算机需要针对人工智能(AI)类工作负载进行性能优化的现实需求。事实上,就连发布五百强结果的组织自己,都在着手推广融入了AI处理元素的HPCG与HPL-AI等新型基准测试。
为了处理超级计算机生成的庞大数据,并更好地对模拟执行进行优化,机器学习与AI优化将在未来的大型数据集处理领域占据愈发重要的地位。在意识到这些局限性之后,以IBM为代表的不少系统供应商开始将目光投向五百强浮点运算之外,致力于解决现实世界(以及由客户提出)的高性能计算问题。
下一阶段的核心,在于以更具创意的方式优化数据与超算性能。业界应该寻找高效利用现有系统的方法。对高性能计算中心进行硬件升级往往会带来极为高昂的成本,因此提高效率并优化现有数据中心策略才是成本更低、浪费空间更小但收益潜力巨大的正确发展方向。
目前的智能化计算示例之一,正是IBM公布的贝叶斯优化技术。通过将这项优化技术与数据集参数对接起来,IBM方面得以大大缩短各轮模拟运行之间的计算周期,且不会对模型精度造成任何影响。该软件大大减少了计算机工作量,能够以低一个数量级的计算周期水平产生相同的结果。
IBM公司在自家内部Power处理器设计中一直在使用贝叶斯优化技术。例如,对于硅芯片设计流程中的单一环节,IBM发现贝叶斯优化能够将模拟工作量减少达79%(由135步减少至28步),同时提供相同甚至更好的结果。贝叶斯优化技术在药物发现测试中也带来良好表现,能够将候选药物的定位速度较传统搜索技术提升达40倍。另外,这项技术可以针对本地、云端或者混合云系统进行配置,且广泛兼容各类语言与平台。
目前,五百强超算排名也没能充分考虑到分布式潮流与计算能力边缘化的重大历史趋势。边缘计算允许我们立足更接近信息源的位置以数据进行预处理。五百强排名仍专注于利用设备整体解决单一问题,而分布式计算与边缘计算则采取完全不同的问题解决办法,因此必然需要一套完全不同的性能衡量指标。
政府资助的研究机构将继续为全球超算五百强中的排名而努力,但商业客户更需要务实须高效的解决方案。作为一家致力于为客户交付实际成果的厂商,IBM正积极推动高性能计算领域的又一轮创新。
好文章,需要你的鼓励
Lumen Technologies对美国网络的数据中心和云连接进行重大升级,在16个高连接城市的70多个第三方数据中心提供高达400Gbps以太网和IP服务。该光纤网络支持客户按需开通服务,几分钟内完成带宽配置,最高可扩展至400Gbps且按使用量付费。升级后的网络能够轻松连接数据中心和云接入点,扩展企业应用,并应对AI和数据密集型需求波动。
阿里巴巴团队提出FantasyTalking2,通过创新的多专家协作框架TLPO解决音频驱动人像动画中动作自然度、唇同步和视觉质量的优化冲突问题。该方法构建智能评委Talking-Critic和41万样本数据集,训练三个专业模块分别优化不同维度,再通过时间步-层级自适应融合实现协调。实验显示全面超越现有技术,用户评价提升超12%。
RtBrick研究警告,运营商面临AI和流媒体服务带宽需求"压倒性"风险。调查显示87%运营商预期客户将要求更高宽带速度,但81%承认现有架构无法应对下一波AI和流媒体流量。84%反映客户期望已超越网络能力。尽管91%愿意投资分解式网络,95%计划五年内部署,但仅2%正在实施。主要障碍包括领导层缺乏决策支持、运营转型复杂性和专业技能短缺。
UC Berkeley团队提出XQUANT技术,通过存储输入激活X而非传统KV缓存来突破AI推理的内存瓶颈。该方法能将内存使用量减少至1/7.7,升级版XQUANT-CL更可实现12.5倍节省,同时几乎不影响模型性能。研究针对现代AI模型特点进行优化,为在有限硬件资源下运行更强大AI模型提供了新思路。