从云到边缘基础架构,全面提升Ampere Altra系列的AI性能
中国,北京(2021年8月5日)——安晟培半导体科技有限公司(Ampere Computing)日前宣布收购AI技术初创公司OnSpecta,该收购将助力Ampere通过AI推理应用程序进一步增强Ampere Altra的性能。相较于常用的基于CPU的机器学习(ML)框架,OnSpecta深度学习方案(DLS)的AI优化引擎可带来显著的性能提升。目前,两家公司已开展合作,在基于Ampere的实例上运行了流行的AI推理工作负载,并展示了超过四倍的加速。此次收购将包括一个优化的模型集合(model zoo),包含对象检测、视频处理和推荐引擎等功能。
Ampere创始人、董事长兼首席执行官Renee James表示:“很高兴OnSpecta团队加入Ampere。借助他们在深度学习领域的专业积累,Ampere将推出更强大的推理任务处理平台,提供更低的能耗、更强的性能、更高的可预测性。此次收购也凸显了我们致力于为云和边缘部署的客户提供差异化的云原生计算平台的承诺。”
据IDC研究显示,到2024年,AI服务器市场市值预计将超260亿美元,年增长率将达13.7%。在中心和边缘的基础架构中,Ampere的客户正在寻找解决方案,以管理AI推理任务成本和不断增长的需求。DLS为无缝二进制drop-in库,适用于多种AI框架,可大幅提升Ampere Altra上的推理速度。它支持使用Altra-native FP16数据格式,该格式可将FP32格式的性能提高一倍,且不会显著降低精度,也无需重新对模型进行训练。
OnSpecta联合创始人兼首席执行官Indra Mohan表示:“本次收购是我们双方通力合作后水到渠成的结果。加入Ampere后,我们将进一步助力Ampere Altra取得更大的成功,为客户提供关键支持,让Altra产品系列更好地用于各种AI推理用例。”
Oracle云基础设施执行副总裁Clay Magouyrk表示:“在Oracle OCI Ampere A1实例上,Ampere Altra和OnSpecta所展现的强大性能和易用性有目共睹。凭借DLS在所有主要开源AI框架(包括Tensorflow、PyTorch和ONNX)上的兼容性,以及Ampere Altra可预测的性能,OCI Ampere A1将在AI推理工作负载中继续开拓创新。”
依据惯例,此次收购将于8月完成,具体交易条款未披露。
好文章,需要你的鼓励
卢森堡大学研究团队开发的RLDP框架首次将强化学习应用于差分隐私优化,创造性地解决了AI训练中隐私保护与模型效果的矛盾。该方法如同智能教练,能动态调整隐私保护策略,在四种语言模型上实现平均5.6%的性能提升和71%的训练时间缩短,同时增强了抗隐私攻击能力,为敏感数据的AI应用开辟了新路径。
这项由北京大学人工智能研究院完成的研究,首次从数据压缩理论角度揭示了大型语言模型存在"弹性"现象——即使经过精心安全对齐,模型仍倾向于保持预训练时的行为分布。
腾讯混元团队联合北京大学提出MixGRPO技术,通过混合ODE-SDE采样策略和滑动窗口机制,将AI图像生成训练效率提升50%-71%,同时在多项人类偏好评估指标上超越现有方法。该技术采用"从难到易"的渐进优化策略,专注于图像生成早期阶段的重点优化,并引入高阶求解器进一步加速训练过程,为AI图像生成的产业化应用提供了更高效可行的解决方案。