人工智能产业爆发,正推动以GPU服务器为代表的AI服务器高速发展。但怎样的GPU服务器才能支持人工智能产业?对此,宁畅专家表示,具有“灵活拓扑”特征的GPU服务器将成未来主流。
宁畅信息产业(北京)有限公司(简称“宁畅”)是集研发、生产、部署、运维一体的服务器厂商,及IT系统解决方案提供商。宁畅可结合用户需求,提供全方位深入定制化服务。
近日,国际知名数据公司发布《人工智能基础架构市场(2019下半年)跟踪》报告显示,2019年人工智能基础架构市场规模已达20.9亿美元,其中GPU服务器占据96.1%。而伴随“新基建”的发展,该数据公司预测到2024年中国GPU服务器市场规模将达64亿美元。
人工智产品井喷,落地场景多样,这对计算力提出更加强劲需求,对GPU服务器性能与稳定性提出挑战。“更重要的,GPU服务器需具有灵活多变,适应不同AI任务需求的布局能力。”宁畅专家、GPU服务器资深架构师介绍。
在性能与灵活性方面,以宁畅X640系列服务器产品为例,该系列产品完全采用自研设计,设计时考虑了GPU的灵活应用,针对不同需求灵活调整拓扑。在进行模型训练时,根据需要可安装最高8颗全高双宽高速GPU,并支持GPU之间通过P2P模式互联;在用来做推理计算时,同一台机器又可支持到最大16颗低功耗推理GPU,并为每颗GPU均衡配备CPU资源。灵活可变的配置使硬件能够针对客户应用快速切换,针对不同计算模型最大限度的发挥硬件资源。
此外,宁畅的所有GPU服务器均由公司内拥有十几年经验的软件,硬件工程师团队设计拥有IP,这保证了宁畅能够根据客户需求快速定制开发。
而要实现GPU服务器的“灵活拓扑”,则需按照用户需求提供深入定制。
宁畅作为精细定制服务器专家,在CDSPD产品开发模型基础上,可为“尊享定制CLUB”会员等广大客户,提供四维一体客户服务体系,包含专职服务器产品、开发、项目与服务经理团队,以及最新技术开放、联合实验室Pass卡等专属服务资源。这将降低用户GPU服务器的TCO(总体拥有成本)10%以上。
好文章,需要你的鼓励
无人机食品配送服务商Flytrex与全球知名披萨连锁品牌Little Caesars宣布合作,推出全新Sky2无人机,最大载重达4公斤,可一次配送两个大披萨及饮料,满足全家用餐需求。Sky2支持最远6.4公里的配送范围,平均从起飞到送达仅需4.5分钟。首个试点门店已在德克萨斯州怀利市上线,并实现与Little Caesars订单系统的直接集成。
FORTIS是专门测量AI代理"越权行为"的基准测试,研究发现十款顶尖模型普遍选择远超任务需要的高权限技能,端到端成功率最高仅14.3%。
法国社会住房项目ViliaSprint?已正式完工,成为欧洲最大的3D打印多户住宅建筑,共12套公寓,建筑面积800平方米。项目由PERI 3D Construction使用COBOD BOD2打印机完成,整体工期较传统建造缩短3个月,实际打印仅用34天(原计划50天),现场操作人员从6人减至3人,建筑废料率从10%降至5%。建筑采用可打印混凝土,集成光伏板及热泵系统,能源自给率约达60%。
荷兰Nebius团队提出SlimSpec,通过低秩分解压缩草稿模型LM-Head的内部表示而非裁剪词汇,在保留完整词汇表的同时将LM-Head计算时间压缩至原来的五分之一,端到端推理速度超越现有方法最高达9%。