近日,中科曙光面向海量异构数据自研的智能化大数据平台——XData大数据智能引擎V6.0(简称“XData”)突破TPCx-HS基准测试世界记录。
TPCx-HS是事务处理性能委员会TPC针对大数据系统制定的基准测试之一。基于曙光10台高度稳定、极致性能品质硬件搭建的测试环境,XData的1TB和3TB results中HSph@SF值分别达到18.28、16.75。该结果目前已超越TPC官网最新公布的最优结果,测试性能达到顶峰。
TPCx-HS基准通过对Hadoop集群进行压力测试,从性能、性价比、可用性、耗电量等方面对大数据系统的软硬件进行综合考量。TPCx-HS有两个主要指标,一个是集群性能值HSph@SF,另一个是性价比$/HSph@SF(集群总金额/性能值),其中前者为重点考察值。
XData因其具备性能卓越的处理能力,在最新一次TPCx-HS基准测试中,性能突破世界纪录。XData的突破在于其采用了先进的分布式、模块化体系架构,平台包含数据集成、治理、存储计算、高速分析引擎、数据智能、可视化分析、安全管控等功能,覆盖数据处理全生命周期。
针对大数据运算处理的特性,XData结合软硬一体化模式进行了针对性的开发,平台采用“基于专家系统的平台级综合调优、基于智能启发模式的应用级在线调优、基于爬山算法的迭代式微调”——三段式优化方法快速提高大数据平台的计算效率,实现了从底层操作系统级到上层大数据平台服务级且全生命周期的系统性优化提升。此外,XData还为大数据业务运行的深度监测与分析提供了有力支撑。
相较于传统大数据平台,XData聚焦且长于“敏捷、智能、融合、安全”四大核心能力,更因其管理方便、使用便捷、多行业适用等的特点,越来越成为大规模业务处理的标配。
近年来,曙光XData大数据智能引擎不断深耕技术与应用场景,帮助政企用户挖掘数据背后蕴藏的巨大商业价值,助其实现数字化转型升级。
在2020年国家工信部公示的大数据产业发展试点示范项目名单中,中科曙光申报的智慧城市、智慧电力和网格化社会治理三个项目被列入,其中项目均使用了XData大数据智能引擎。
近日,大数据产业生态联盟联合赛迪顾问股份有限公司、工信部赛迪智库、《软件和集成电路》杂志社共同揭晓了“2020中国大数据企业50强”,中科曙光凭借其在大数据产业的卓越表现与创新发展,在近2000家参评企业中脱颖而出,蝉联“中国大数据企业50强”。
未来,曙光大数据还将继续致力于打造数字大航海时代的大数据“智能引擎”,助力客户开辟新航路、平稳快速横穿深水水域,实现价值大发现。
好文章,需要你的鼓励
OpenAI首席执行官Sam Altman表示,鉴于投资者的AI炒作和大量资本支出,我们目前正处于AI泡沫中。他承认投资者对AI过度兴奋,但仍认为AI是长期以来最重要的技术。ChatGPT目前拥有7亿周活跃用户,是全球第五大网站。由于服务器容量不足,OpenAI无法发布已开发的更好模型,计划在不久的将来投资万亿美元建设数据中心。
阿里巴巴团队提出FantasyTalking2,通过创新的多专家协作框架TLPO解决音频驱动人像动画中动作自然度、唇同步和视觉质量的优化冲突问题。该方法构建智能评委Talking-Critic和41万样本数据集,训练三个专业模块分别优化不同维度,再通过时间步-层级自适应融合实现协调。实验显示全面超越现有技术,用户评价提升超12%。
英伟达推出新的小型语言模型Nemotron-Nano-9B-v2,拥有90亿参数,在同类基准测试中表现最佳。该模型采用Mamba-Transformer混合架构,支持多语言处理和代码生成,可在单个A10 GPU上运行。独特的可切换推理功能允许用户通过控制令牌开启或关闭AI推理过程,并可管理推理预算以平衡准确性和延迟。模型基于合成数据集训练,采用企业友好的开源许可协议,支持商业化使用。
UC Berkeley团队提出XQUANT技术,通过存储输入激活X而非传统KV缓存来突破AI推理的内存瓶颈。该方法能将内存使用量减少至1/7.7,升级版XQUANT-CL更可实现12.5倍节省,同时几乎不影响模型性能。研究针对现代AI模型特点进行优化,为在有限硬件资源下运行更强大AI模型提供了新思路。