从海康威视构建平安城市看英特尔Hadoop

ZDNet至顶网服务器频道 12月26日 评论分析（文/王涛）：随着城市不断向数字化和智能化方向发展，生活在城市中的我们正无时无刻感受到科技给生活带来的便捷，智慧城市正是城市数字化和智能化发展的方向，它的核心是利用物联网、云计算等新一代信息技术，对海量数据进行收集并分析，从而全面感知城市的运行状态，提高公共服务水平和市民生活质量。

目前很多国家已经开始智慧城市的建设，中国的城市信息化建设正处于转型期，各大城市也也正积极利用物联网、云计算等新型技术来推动智慧城市的建设。

智慧城市的首要要求是安全，平安城市自然成了智慧城市的重要一部分。目前中国社会公共安全保障基础相对薄弱，公共安全形势严峻，平安城市建设通过将物联网、云计算、人工智能等各种先进信息技术手段和公共安全运行管理机制相结合，从而建立一套完善的公共安全管理技术支撑体系，对各种风险隐患进行日常监控和预防，当遭遇突发事故时进行及时灵活的应急管理，守护城市安全的生命线。

智能化大数据分析平台成迫切需求

在平安城市中，几乎各个区域都离不开视频安防监控的使用。海康威视公司是一家安防设备的提供商，一直提供全面的安防设施来进行安防监控，随着视频录像数据日积月累，并已经呈现快速膨胀的趋势，海康威视也在思考如何通过技术手段来挖掘视频数据背后的信息和价值。

在海康威视公司副总裁兼首席技术官蒋海清看来，非结构化的视频数据激增也为安防监控衍生出了视频管理和视频服务的新要求。通常视频的监控都是通过人工来完成，但是人无法一直保持高度的注意力和关注度，往往一段时间之后就会下降，效率自然低下，因此对于在大型视频监控系统中实现更有效的安全防范，蒋海清期待更加智能化的监控技术。

跟以前在事故发生之后采取被动的人工查看不同，所谓智能化的监控技术则是将被动的事后查看转变为主动的事前预警，但要实现这一转变，无疑也是一项巨大挑战。

这其中的挑战来自哪里？首先，与处理传统结构化数据不同，对视频和图像的处理则是从非结构化的数据中提取出有价值的信息，进一步为公安、交通等各行各业提供服务。这其中首先包括一些图象处理和视频分析算法，对视频中的人、车、物活动的轨迹进行识别，以及对视频中的人脸进行识别。此外，基于语义的搜索技术同样重要，这样就可以输入简单特征的识别语来找到需要的信息。

构建平安城市的挑战和技术趋势

除了需要用大数据技术来实现智能的分析方式，蒋海清还透露安防行业的另一个技术趋势就是高清，如今视频监控也从标清发展到了高清的时代，视频的通道非常大，视频处理技术通常不可能是全集中式也不可能全分布式，而是一种结合的计算框架。

在平安城市中，一个显而易见的应用是智能交通，遍布于城市中各个角落的摄像头会把车辆经过的图像记录下来，以备检索。蒋海清举了一个例子，当需要判断一辆车是否是可疑车辆或具有潜在犯罪动机车辆时，可以采用分析技术分析这辆车的行驶轨迹。一般而言犯罪车辆都具有一些可以总结出的规律，包括其出现的时间以及活动轨迹，通过这样的信息分析出这辆车是否有潜在犯罪可能性，同时这些信息还可以传到公安防控系统中，在侦破某些案件的时候，将这些信息关联起来，可以作为办案人员研判的重要情报信息。

但是在一个城市中，年过车信息数据量达到百亿级，市局和区县的数据中心也采用两级架构，分布式存储集中管理，要想从信息中提取出车牌、车身颜色甚至驾驶员的照片，快速进行车牌、号码、轨迹、违章查询以及号牌、关联分析等应用，必须借助一套坚实的大数据处理平台。

选择英特尔Hadoop发行版

虽然之前也曾经想过用原有的关系型数据库来承载相关的数据和应用，但是关系型数据库明显已经无法支持海量的非结构化或半结构的数据。蒋海青表示经过认真的评估与测试，海康威视最终选择了英特尔的大数据平台，而其核心就是具备大数据组织与管理功能的英特尔发行版Hadoop。

对于选择英特尔发行版Hadoop的原因，首先，Hadoop本身就是批处理的运行方式，英特尔Hadoop发行版进行了优化，使它的处理能力达到了接近于实时的要求；其次在管理方面，缺乏管理工具使得开源Hadoop在配置、安装、报表的监控和管理和部署上极为复杂，不适合企业以及具体行业应用，英特尔开发的Intel Hadoop Manager 2.0管理工具可简化Hadoop的部署与管理工作；最后，英特尔发行版Hadoop基于开放的理念，可以为用户提供全面的技术支持与服务，提供易于使用的API，方便企业进行二次开发，在英特尔的开放平台之上，用户和合作伙伴可以更加自如地融入自己的创新。

正因为如此，英特尔发行版Hadoop的灵活性解决了海康威视面临的数据采集点多，视频通道大的问题，其开放特点也为海康威视以后进行语义搜素技术的开发预留了充分的创新空间。而且在Hadoop的应用方面，英特尔也一直与中国的行业用户保持着深入的合作，包括智慧城市、电信、医疗系统等，因此在发行版Hadoop的开发过程中汲取了行业用户的建议，并融入最佳的实践。

海康威视采用英特尔发行版Hadoop构建智能交通应用

基于视频云计算的智能分析技术

也正是在英特尔发行版Hadoop这个成熟开放的平台上，海康威视融合灵活按需调配的IT资源，打造出了视频智能云计算方案。使得海量过车信息处理成为现实，不仅解决了结构化和图片文件的存储问题和分布式数据查询问题，而且将数据处理的时间降低到秒级。

随着大数据的更多价值逐渐被挖掘并为人们使用。蒋海青相信英特尔先进的大数据平台，特别是英特尔发行版Hadoop的应用价值届时也将获得更多、更为全面的验证。

后记：英特尔Hadoop发展两条腿走路

当然，海康威视还只是一个代表，自今年7月发布以来，英特尔Hadoop发行版已获得了包括电信、交通、金融、制造和医疗等行业用户的青睐，并在各自的大数据平台和应用中扮演了重要角色。除了基础设施，英特尔Hadoop发行版同样也是英特尔大数据技术的关键组成部分，也只有在英特尔开放灵活扩展的x86架构上，Hadoop这种分布式运算体系才能释放出最大的威力。

为了支持更多企业基于开放的英特尔架构平台来部署Hadoop，开展大数据应用的探索和尝试，英特尔公司近期发布了英特尔Hadoop发行版的免费版本。与英特尔Hadoop发行版一样，英特尔Hadoop发行版的免费版本针对英特尔架构平台进行了充分优化，并保留了所有主要功能、应用特性和接口，方便用户获取Hadoop来测试、评估或直接部署应用。

随着免费版本的发布，相信Hadoop的接受门槛会进一步降低，并让更多的用户了解部署英特尔大数据方案。一方面英特尔Hadoop发行版已经在很多行业获得了成熟的部署与应用，另一方面免费版本又为更多的企业了解开放架构大数据平台和Hadoop技术扫清了障碍，使英特尔Hadoop发展真正实现两条腿走路。

同时，英特尔还将听取免费版本用户的使用反馈，并针对使用免费版本时遇到的普遍性问题开展培训计划，与更多的开发平台和机构合作，加速大数据技术应用与创新进程，促进开放架构大数据技术和应用生态系统的进一步发展，为企业顺利驾驭大数据保驾护航。