HP PCS 云监控大数据解决方案

——把数据从分散统一集中到数据中心

基于HP分布式并行计算/存储技术构建的云监控系统即是通过“云高清摄像机”及IaaS和PaaS监控系统平台,根据用户所需(SaaS)将多路监控数据流传送给“云端”,除了提供传统的监控服务外,还提供了对PB级大数据的高性能IO并发集中存储、查询和分析等数据应用服务,从而可以实现更高的非结构化数据管理,解决了监控系统中对于大数据安全、分析和备份等问题,用户也可以通过任意方式,任意终端按需实现对视频监控的需要。

数据驱动手段在一定程度上帮助了监管部门提高了工作效率。传统的方法是把图像或视频等数据分散存储在不同的分数据中心,分中心则是通过NVR、SAN和NAS等设备进行本地存储,这样虽然可以满足中小型监控系统存储的需求,但是随着数字监控技术和数据存储的广泛普及,数据开始爆炸式增长,从TB乃至PB级以上的数据量的需求也随之不断增加,使得超过了传统数据平台的处理能力。同时有些监控业务管理设施、装备和应用系统等处于单独、孤立运行状态,作用比较单一,而且跨数据中心使用这些数据也非常不方便。

传统的视频监控架构下面临多种挑战:

1、历史数据显示,在现有数据存储方式下,可保存数据的周期不但会越来越短,同时面临数据可靠性的风险。需要延长视频业务数据的保存周期,以对尽可能长时间的数据进行查询和分析,并为一线用户提供信息支撑服务。

2、除了集中管理数据的需求,还面临着数据存储的挑战。随着监控业务规模不断增大,信息化建设的不断推进及监控密集度要求的不断提高,监控点的建设逐年增加,这些不断增加的监控设备采集到的数据需要及时完成存储,高清视频数据也导致比以往更大。对存储性能提出了更高的要求。

3、监控数据无法被充分利用的难题。传统依靠手工方式实现数据查询和统计分析的效率伴随数据量的增加变的越来越低下。这些数据对综合管理存在潜在的价值,可将视频监控的应用范围从过去的和目前以事后查看为主,转变为事前预警,从监控数据中挖掘出业务风险,为各行各业提供更为有效的业务信息支持。

4、传统业务分析解决方案一般采用数据仓库系统,但这些系统设计用于进行在线交易处理,而不是做分析的工作。它们通常采用数据库、服务器和存储平台构建而成,缺少处理不断增加且瞬息万变的TB级以上数据所需的能力。

在视频数据越来越多的情况下,如何做到投入最少的IT资源、提供更高的用户数据存储和分析能力?惠普云监控解决方案即是通过采集这些非结构化数据源,并将它们汇聚到一起存储到云上,帮助用户思考能用数据做什么?从中获取有价值的数据及知识,并有可能在未来提供现在还无法想象的云服务。
  惠普PCS云监控系统解决方案架构,如下图所示。

HP PCS 云监控大数据解决方案
1

  如上图所示,惠普PCS最新推出的云监控大数据解决方案即是采用目前业界领先的高性能密集并行计算/存储架构,并通过HP云监控分布式并行计算技术和高性能服务器能够有效的解决客户视频监控数据集中式管理和分析等问题,从而把数据从分散统一集中到数据中心。
  惠普云监控系统方案可以依托HP SL4000系列分布式并行计算/存储服务器及云监控平台所提供了强大的数据I/O能力,来实现高吞吐量和高容错性的海量数据存储目标。同时能够实现线性扩展,通过集群中的机器数量增加一倍可以减少约一半的处理时间,或在相同时间内处理两倍的数据量。
  

HP PCS 云监控大数据解决方案
1

  如上图所示,通过采用HP云监控解决方案的NVR设备可以实现一次多达128路视频数据的采集,并可以横向扩展至更多路NVR集群。惠普分布式并行计算存储云平台无缝整合HP ProLiant SL 4500专用大数据服务器的集群,可按需实现分布式并行计算能力的拓展。惠普云计算管理平台应用服务器可以按需配置大数据服务器热数据集群时间段(例如三个月),超过时间段的数据可以“制冷”自动保存在存储冷数据集群中。
  除了以上特点外,惠普PCS云监控大数据解决方案,还具有以下亮点:
  * 海量数据存储能力:基于监控视频数据的特点,在加入异地备份和冗余容错的需求下,能够提供统一集中式数据中心的PB数据级别以上的在线存储能力。
  * 高性能高并发实时数据读写:由于视频数据监控系统每秒钟都由上千路乃至万路以上终端产生海量的数据。如果在性能上不能到达要求,就会产生写不进查不出等问题,造成系统无法使用。通过云监控系统能够在统一的数据中心中实现高性能和高并发的实时数据I/O读写,从而能保障多路视频图像数据同时并发读写等问题。
  * 统一接入存储:系统提供统一接入接口,能将各监控设备上的视频数据通过同一接口写入逻辑上统一的监控数据中心。在查询时,各操作人员使用的信息系统也可以通过统一接入接口对数据进行读取、查询、统计等工作。
  * 不停机动态扩容:数据中心的数据容量需要随着业务的发展动态扩充,而在扩充的同时不能造成数据平台的服务终止。云监控系统具有在数据中心不停机情况下能够继续提供服务的情况下的动态扩充的能力。
  * 工作负载优化及高效性:云监控平台可无缝使用HP ProLiant SL 4500业界首款专为大数据而构建的服务器,能够为云监控系统平台提供平衡的内核/磁盘比率等并行处理应用,配备15块磁盘的三节点配置,从而能够为监控视频大数据工作负载提供有力支持。并提供最高存储240TB数据(单个42U机柜安装9个机箱容量可达2.16PB),通过高密度的高效机箱及HP智能阵列技术可随着数据的增加而轻松扩展。
  * 分布式并行数据统计挖掘:基于数据中心的海量数据做的数据统计和挖掘会需要大量的数据读写,所以,云监控系统数据中心提供了一个分布式的数据统计挖掘框架,使得统计分中心的服务器上自动并行运行,并将结果进行汇总。
  HP PCS云监控大数据解决方案融合了惠普桌面虚拟化、服务器虚拟化、GPU虚拟化技术和分布式并行计算/存储技术,为用户提供了一套完整统一的云监控大数据服务架构及云端综合的大数据分析和管理模式。
  了解惠普PCS解决方案
  惠普PCS解决方案是成熟的惠普解决方案服务,并且已经过精选,可成功解决客户 IT 环境内的各个关键压力点。这些服务由专业的惠普顾问提供,并可以充分利用来自全球的最佳实践资源,通过高度可重复的及互动式的参与来提供价值。
  惠普PCS解决方案旨在帮助您的客户启动关键 IT 项目,提供多种方法来实现短期目标。这样,能够使客户轻松应对关键性挑战、缩短价值实现时间,更加明智地进行基础设施投资。
  了解获取更多HP PCS方案信息,加盟HP PCS 解决方案销售请联系: china_pcs@hp.com

上一篇:java的两种冒泡算法


下一篇:[转]OpenVPN官网的HOWTO