近日,Gartner公布2022年存储和数据保护技术成熟度曲线(Hype Cycle for Storage and Data Protection Technologies, 2022),软件定义存储基础设施成为本年度唯一的变革性技术,分布式文件系统、对象存储、容器原生存储优先级评级均为“高”。浪潮存储入选分布式存储代表性厂商。
Gartner公布2022存储技术成熟度曲线
对此,浪潮信息分布式存储营销总监李玉珊在DOIT峰会的演讲中表示,得益于业界首个融合块、文件、对象、大数据的“多合一”分布式融合架构,浪潮分布式存储涉猎到Gartner存储技术成熟度曲线里的多种热门技术,不仅具备软件定义存储(SDS)的核心技术,还能够以一套存储架构支持分布式文件存储(Distributed File Systems)、对象存储(Object Storage)等多种存储服务。
2022年存储技术优先级矩阵
鉴往事:十年蝶变 从胚胎到少年
时钟拨回到2013年,软件定义存储首次进入Gartner曲线。当时SDS技术的利益评级(Benefit Rating)为高优先级,市场穿透率不到1%,处于胚胎期。
国内外具有前瞻性的存储厂商不断加大对SDS的投入。大洋彼岸,EMC等厂商在SDS市场推出了相关的产品,比如ViPR、ScaleIO等等,还尝试通过并购来完善SDS领域的产品布局。在中国,浪潮存储早在2009年左右,就研发出了适配高端服务器的海量存储系统,是最早一批进军SDS领域的中国厂商之一。
2015年,SDS到达曲线顶峰,成熟度从胚胎发展到少年。2016年,Gartner把分布式存储拆分为iSDS和mSDS,即基础设施SDS和管理SDS。这一时期,浪潮存储基于软件定义和硬件重构理念,推出业界首个融合块、文件、对象、大数据的“多合一”架构的分布式存储平台,为云计算、电子影像、智慧计算、大数据等场景打造坚实数据基座。
此后四五年,在Gartner技术曲线上,业界对SDS的期望逐步回归理性,SDS也在时间的积淀中逐步走向成熟。在这期间,浪潮存储加大了研发投入与创新。自2019年起,浪潮基于新数据存储前瞻洞察,基于存储平台战略持续推动分布式存储技术创新,累计投入数十亿元,实现了产品竞争力从量变到质变的跨越。
软件定义存储十年演进图:2013-2022
图注:实线代表过去、方框代表现在、虚线代表未来
看今朝:分布式取代纵向NAS 承载关键业务
根据2022Gartner存储技术成熟度曲线,为非结构化文件数据构建可扩展且低成本的分布式存储平台是I&O领导者的当务之急。现有非结构化数据的加速增长和基于文件的工作负载的引入,将分布式横向扩展存储架构带到了IT基础设施规划前沿。浪潮存储成为分布式文件系统领域的代表性厂商(Sample Vendors)。
浪潮存储成为分布式文件系统领域的代表性厂商
Gartner认为,分布式存储有三大机遇。其一,面对非结构化数据指数化增长,I&O领导者越来越多的用分布式横向扩展文件系统产品来取代纵向扩展NAS设备系统,以获得容量和性能线性扩展的益处。其二,企业正在为非结构化数据指数级增长做准备,并寻求更好的数据洞察,以及与云存储集成,以实现长期数据生命周期管理。其三,大数据分析、人工智能(AI)和机器学习(ML)应用成为分布式存储的典型用例。
比如,大型赛事会采用8K超高清进行直播,视频画面每一帧都十分美,围绕着视频的采、编、播和管全流程对存储提出更高的要求。其中非线编过程要求存储提供高吞吐、低时延,保证视频画质质量;视频素材价值高又需要视频处理过程7*24小时稳定运行。
又如,自动驾驶最近几年十分热门,其训练全流程包括数据导入、清洗、预处理、训练和仿真分析,各个环节使用不同协议,数据流转和拷贝会显著降低AI训练效率,同时增大数据存储量;训练过程则需要大的吞吐量和低时延来满足GPU训练的需求。
最后,虚拟化/云化市场这些年增长很快,越来越多的核心关键应用上云,数据访问过程中需要更高的IOPS、更低时延,保证关键业务运行无卡顿;云平台业务增长快,需要系统提供弹性空间,系统扩容更加便捷。
此外,存储设备在数据中心的能耗占比约20%~30%,需要更加绿色节能存储设备。总得来说,面对多样化的智慧应用企业需要协议互通互访,同时提供高IOPS、大带宽、低时延、绿色高效、扩展性强的数据存储设备。浪潮分布式存储基于新数据存储前瞻洞察,精准预判企业需求,打造全球领先的全闪分布式存储,以“一套存储架构、一个数据中心”的存储平台战略高效支撑企业智慧化应用。
据李玉珊介绍,浪潮分布式存储三大法宝:架构融合、盘控协同、场景共创。
浪潮分布式存储拥有业界首个“多合一”分布式融合架构。随着企业的数据类型越来越丰富,浪潮存储能够让企业购买一套存储享有文件、块、对象和大数据四种服务,构建成真正的统一存储资源池,实现用一套存储高效支撑一个数据中心,在满足性能需求的同时帮助企业降低TCO。
为了追求极致性能,浪潮推动分布式存储的全闪化重构,针对IO写入全流程端到端优化,如IO随机转顺序写、IO智能调度、CPU专核专用、RDMA协议加速等,打造业界唯一将分布式存储系统和SSD代码级联调优化的全闪分布式存储产品,在SPC-1国际基准测试中以30节点、630万IOPS夺得分布式存储性能全球第一。同时从生命周期来看,热数据会随着时间推移逐渐降温,对此浪潮提供分级存储解决方案,通过设置高速层和中速层,让数据在不同速度的设备中自由流动,实现分级融合。目前,浪潮很多客户用高速层来承载高性能和AI的计算,用中速层来承载大数据分析平台、以及云平台的数据存储业务。
最后,浪潮提出了场景共同体生态战略。李玉珊介绍,精准医学领域的基因测序、智慧交通领域的自动驾驶、能用领域的三维勘探、媒资领域的4K/8K超高清视频制作等等,这些场景负载类型多样、应用复杂、容量巨量化、实时性要求高,对分布式存储技术带来了极大挑战。浪潮联袂客户、伙伴共建场景共同体,能够为企业提供个性化、定制化方案,助力企业质效提升。目前浪潮分布式存储已连续多次中标运营商分布式文件集采、分布式块集采、分布式块网络云项目,出货量超10000节点,产品成熟度得到充分验证。同时,浪潮存储还为六大行、TOP3保险公司、国家气象、国家工业互联网中心、中石油、清华大学、复旦大学、TOP10医院等行业大客户提供了支撑和保障。
未来可期:中国成为全球最大数据圈,分布式迎利好
数字经济成为社会经济发展的新引擎,其繁荣发展必然带来数据的爆炸性增长。IDC预测,到2025年,中国的数据量将增长到48.6ZB,80%是非结构化数据,将成为全球最大的数据圈,这让擅长存储、处理非结构化数据的分布式存储迎来利好。同时数据要素、东数西算、软件发展规划等一系列政策纷纷出台,各行业都在鼓励分布式相关技术的应用与部署,有望在基础设施层推动分布式存储的普及与应用。
好文章,需要你的鼓励
临近年底,苹果公布了2024年App Store热门应用和游戏榜单,Temu再次成为美国下载量最多的免费应用。
云基础设施市场现在已经非常庞大,很难再有大的变化。但是,因为人们可以轻松地关闭服务器、存储和网络——就像开启它们那样,预测全球云基础设施开支可能非常困难。