在2016浪潮服务器存储全国合作伙伴大会(IPF2016)上,浪潮发布了云海大数据一体机、云海Insight大数据平台以及面向应用创新的云海IOP云支撑平台,此举表明,浪潮提供涵盖云计算硬件基础设施、软件定义环境、大数据以及云应用开发的平台解决方案和产品进一步完善,实现从IaaS到PaaS的业务能力扩展。
浪潮在此次发布的三款大数据产品——云海大数据一体机、云海Insight、云海IOP,进一步明确了浪潮在大数据产业链的业务定位,即在持续深化“计算+”,聚焦关键业务计算、云计算和深度学习计算的战略框架下,重点围绕云计算、大数据平台能力的建设,提供软硬一体化的大数据平台解决方案和云应用支撑平台,推动数据整合和应用创新,构建开放融合的大数据新生态。
存不起、扩不了、算不出,如何应对海量数据爆发增长之痛
据测算,到2020年全世界将保有40个ZB的数据量,相当于全世界的沙粒数量40倍,面对庞大的信息量,用户将面临存储系统成本高,存不起,传统可扩展性差,扩不了,大量的非结构化、半结构化的信息用传统计算方式算不出的问题和挑战。
对此,浪潮同步推出云海Insight大数据处理平台,帮助用户快速构建海量数据的处理能力,应对数据爆发式增长。据介绍,该平台采用分布式架构,包含Insight HD、Insight MPP和Insight MemDB三款产品,可覆盖数据量从GB到PB的大数据处理解决方案。
Insight HD主要用于处理PB以上非结构化数据的采集、存储和计算,适合作为在大数据应用建设中构建基础资源库,可提供4000节点的横向扩展能力;具备100%的社区API兼容性和大于95%的SQL兼容性;在组件的构成上,在分布式文件系统小文件及计算节点与数据节点寻址算法上进行了30多项的优化改良的同时,又保证了对Hadoop 18个关键组件的兼容性。
Insight MPP可进行TB-PB级别结构化数据的统计分析,交互式计算,是分布式数据仓库和数据集市的最优选择,查询性能是传统关系数据库的10-100倍,即使是处理数据频繁清空再重新载入的业务,单节点数据加载速度仍可超过2TB/小时;
内存数据库MemDB通过内存计算引擎实现GB-TP级别数据写入加速、读取加速、同步加速,适用于超高并发访问的联机事务处理和分析处理的加速场景,能够轻松应对构建百万并发规模,延时毫秒以内的高并发访问业务。
云海Insight可提供数据采集预处理、数据缓冲沉淀、分析数据集市、实时数据分析和数据可 视化展现的多种业务处理能力,另外还提供了SQL、API、命令行、可视化界面多种操作方式,可轻松实现多类型访问接口。云海Insight支持标准化的 x86平台,支持融合架构的大数据一体机,也可以以内置服务的形式无缝集成进云海IOP平台。
如何发挥大数据的真正威力,融合架构很重要
在本次IPF2016大会上推出的融合架构大数据一体机,提供多数据类型的统一存储的支持,用户无需再操心架构设计、网络规划、安装部署等繁杂的建设过程,可获得开箱即用的软硬一体化大数据基础设施服务。
浪潮集团副总裁张晖表示:要想发挥大数据的威力,需要拉近数据计算和存储距离,并根据应用的需求定义计算方式,由计算方式定义存储模式,再由存储模式定义硬件架构,只有在数据计算、存储和硬件架构这三个层面充分、高效结合起来,才能真正释放出大数据的威力。
基于上述考虑,云海大数据一体机围绕着数据计算和数据存储进行大量优化,云海大数据一体机采用 融合架构理念,基于业界最先进的软硬件平台,为客户量身打造企业级融合高效架构。以软件定义和硬件重构为核心,对软硬件进行深度解耦拆分,针对不同软件单 元的特性,重组最优的计算单元、网络单元和存储单元,在充分激发软硬件潜能的同时,多层次整合优化保障性能卓越。有效减少了慢任务数量,平均运算速度提升 40%以上。
同时,云海大数据一体机分别从软件架构高可靠,关键硬件N+N冗余,运维、数据、带外管理网络三网分离,三重安全控制机制等多方面对系统可靠性、安全性等进行了针对性提升,保证了企业级数据管理、应用的稳定可靠,可靠性高达99.999%。
另外,云海大数据一体机采用一站式交付模式。整机柜、模块化设计,集中供电,集中散热,集中管理,软硬件一体化“端到端”交付,大数据基础环境整体拥有成本极大降低50%。
云环境下的应用创新,PaaS工具是必选
谈到发展IOP平台的原因,张晖举了个形象的事例:如果要把一个2千万人口的智慧城市建设好, 需要的代码量,可能需要10个微软干10年。同时他还指出,如何通过平台的能力集聚广大的合作伙伴和全球几百万的开发者的力量,帮助他们进行云化应用开 发,降低创新成本,提升创新能力,提高创新速度,已经成为当前制约应用创新的瓶颈。
云海IOP平台,便是为了助力广大开发者和合作伙伴应用创新而打造的一套完整的PaaS平台软件。云海IOP采用开放的架构,提供了数十种可以对外提供的服务,可以快速的接入独立部署数据库、大数据平台等服务,通过构建服务商店进行资源的统一申请和管理。该平台既能支持传统的应用开发模式,也能支持云应用开发模式,通过软件定义和分布式技术,形成了“云基础设施+云中间件+云应用”的云架构,可以运行在多种云基础设施之上。
通过云海IOP平台,构建统一的应用及中间件运维平台,核心的中间件不再单独部署和建设,通过统一的发布、监 控,统一的域名体系,实现行业级的应用商店模式,且应用会随资源需求量自动分配,进一步提升了资源的利用率,开发者能够像流水线装配汽车一样,通过调用平 台的模块与工具,快速的组装应用,简化应用创新的难度,大大缩短业务的上线和更新周期,实现应用的轻量化、模块化组装交付。
强化合作伙伴生态2.0,构建开放融合的大数据新生态
大数据生态链涵盖层面较广,涉及数据的采集、存储,计算、服务以及数据可视化和洞察。浪潮大数 据将坚持“开放API、开放架构、开放生态”的三级开放体系,聚合解决方案合作伙伴,技术产品合作伙伴,行业应用合作伙伴三大类型合作伙伴共同打造开放的 大数据生态;同时,面向合作伙伴提供基于基础环节的实验环境以及产品技术培训认证体系。
张晖表示:“浪潮提供的是云计算大数据平台级产品,需要吸纳更多合作伙伴在上面和我们一起努力开发。未来,浪潮将基于大数据平台和应用开发平台,与上下游产品和解决方案伙伴一起,共同构建更为强健的生态,为客户提供一站式解决、一体化交付的大数据整体解决方案。”
好文章,需要你的鼓励
临近年底,苹果公布了2024年App Store热门应用和游戏榜单,Temu再次成为美国下载量最多的免费应用。
云基础设施市场现在已经非常庞大,很难再有大的变化。但是,因为人们可以轻松地关闭服务器、存储和网络——就像开启它们那样,预测全球云基础设施开支可能非常困难。