2013曙光智慧之城有五项大数据创新应用

ZDNet至顶网服务器频道 12月02日 新闻消息 ：大数据正在成为智慧城市落地的支点，同时其汇聚的各项创新应用已经创造出巨大的商业价值、经济价值和社会价值。作为高性能计算领导者和云计算领先企业，中国行业大数据的先行者和解决方案提供商，2013年的曙光公司，在“平台一体，智汇应用”的行业大数据战略指引下，通过XData大数据一体机、XData-Hadoop 大数据处理软件等自主可控的创新产品，从数据收集、数据存储、数据分析、数据应用等方面构建了完整的大数据生态环境。并且，曙光与政府、金融、电信、军工、教育开拓实践，在大数据“元年”共享硕果。

某公安部门舆情分析系统：海量存储，实现数据分析智能化

图1：曙光XData大数据处理平台

信息社会的不断进步让政府部门越来越依赖数据的分析进行决策，而在大数据“试水”中的国家某安全部门，通过曙光大数据解决方案构建的舆情分析系统，采用社会化行为分析技术实现了大规模群体信息的统计分析、趋势研判。通过XData对海量文本、图片、视音频等数字化内容进行集中存储和智能检索，实现公安业务信息数据的深层次挖掘。另外，利用大数据技术的碰撞比对、频率分析、语义分析、多维融合、深度挖掘等创新特性，改变了传统情报分析中的逻辑推理、综合统计、比较联系、特征解释等相对落后的技术手段，实现了各要素之间的深度关联和智能判断。

某大型信息安全中心监控系统：快速分析，第一时间预警

图2：某大型信息安全监控系统

该中心的信息安全监控系统当前运行规模超过600TB， 每天负责收集分析数十亿条短信息。这在当前人口大流动，跨省市、跨地区之间的流窜犯罪活跃，恐怖组织活动增多的情况下，发挥了大数据数据分析的速度优势，第一时间预警，成为了提升破案效率和维护国家安全稳定的关键支点。

中国某银行大数据平台：实现PB级跨越，历史数据再获新生

图3：某银行的大数据处理平台

之前，该银行运营多年累积下的数据量早已经过PB，但规划的存储量则是500TB，在传统架构下只能直接将数据备份到磁带库，数据的价值无法体现。但若采用传统的数据仓库技术让然无法快速、智能的处理这些数据，并且其投入成本也超出了预算。为此，基于XData-Hadoop构建的大数据处理平台，曙光为该行提供了海量记录快速查询能力，完成了历史数据查询系统的应用落地。在利用XData替代了传统数据仓库架构之后，成功实现了历史数据从TB向PB级的跨越式发展，而其海量数据分析能力更支撑了该银行反洗钱系统的成功应用。

中国银联离线数据分析系统：数据保存时限提升一倍，大数据发挥“毫秒级”查询

图4：基于曙光XData大数据一体机的离线数据分析系统

银联之前的关系型数据库存储能力非常有限，只能保存三个月的数据，造成大量历史数据堆积且管理困难。面对刷卡交易量激增，商户评分，持卡用户兴趣分析等新业务需求，银联构建了50台双路x86服务器规模的XData大数据一体机。利用支持海量数据访问的Hbase和分布式文件系统（HDFS）打造了高并发、高可靠的网络传输和存储层，并将数据保存时限提升了一倍。另外，该系统还支撑了350TB原始刷卡信息存储容量、实现了50万每秒的记录稳定导入速度，以及随机单条记录“毫秒级”返回，万级别查询5秒内返回的惊人速度。