资讯专栏INFORMATION COLUMN

2017安防云计算核心技术探讨

TalkingData / 2731人阅读

摘要:实时检索技术通过引入分布式数据库,列式存储,内存计算,索引引擎等技术,能应对亿级别的结构化数据,在存储容量,可扩展性,检索速度等多个方面都可以得到大幅提升。

云计算技术以大系统、大数据为最显著的特征,而安防行业是一个非常典型的大数据应用场景,安防行业中的卡口监控系统、视频监控系统由大量的设备组成(包括大量的前端采集设备、后端平台和云计算服务器集群等),每天产生呈几何级增长的数据,随着智慧城市大型项目的不断成功落地,整个安防平台呈现出数据量超大、数据类型多样、数据处理逻辑复杂、数据清洗、数据共享、数据挖掘难度高等处理难题,对安防厂商提出了巨大的挑战。

其中主要表现在智能交通行业领域中海量的交通流信息和卡口过车抓拍图片、智慧城市行业领域中的海量视频录像文件等非结构化数据,安防行业的主要用户公安、交警都有着需要对海量图片和视频文件进行安全有效的数据存储、高性能并行计算、智能化的数据分析挖掘后进行实战方面的强烈需求,这些都与云计算特性非常吻合。提供海量存储的同时,如何快速有效的定位多维度数据,挖掘出各类孤岛数据在多维度的潜在关联关系,一直是我们致力于解决的问题。云计算、大数据等技术正在慢慢渗入安防行业,随着这些技术的发展成熟,将对安防行业带来革命性的影响。

大规模混合计算技术

监控系统产生的大量视频图像数据如果只靠人工来进行处理,效率会非常低,借助于视频智能化处理算法,已经可以从视频图像数据中获取一些简单的特征进行比对,或者进行模式匹配产生报警事件,提高了处理的效率。这种方式能够处理的数据量,数据组合的程度,数据的类型等等都还处于较低的水平,无法应对海量数据和日益增长的需求。大规模计算技术的目的就是为了提供一种统一的数据处理平台,上面可以集成各种智能化算法和计算模型,综合处理海量监控数据,以更快的速度得到更有价值的数据。

统一资源管理技术

监控系统产生的主要数据就是视频和图像数据,原始数据经过处理后,会产生更丰富的数据,处理的方式也会有很大不同。比如对于历史视频数据可以在后台处理的视频数据检索,对于卡口的车牌和人脸特征数据需要实时布控,对历史卡口信息需要做到实时检索。这些数据都需要不同的计算框架进行处理,通过引入统一的资源管理平台,可以在同一个资源池里运行不同的计算框架,大幅提高资源的利用率,同时在资源被某种业务独占时,又能最大限度的发挥系统的性能。

实时检索技术

传统的结构化数据都采用关系型数据库进行保存,通过RAC等技术形成数据库集群,通过索引方式进行加速,但是核心还是基于行存储和关系运算,面对海量记录时在各个方面都已经遇到了瓶颈。实时检索技术通过引入分布式数据库,列式存储,内存计算,索引引擎等技术,能应对100亿级别的结构化数据,在存储容量,可扩展性,检索速度等多个方面都可以得到大幅提升。该系统在智能交通、刑事侦查等视频监控领域具备重要的研究价值和广阔的应用前景。

复杂事件处理技术

随着安防行业的发展,业务变的也来越复杂,比如智能交通领域,出现了车辆积分研判、套牌车分析、同行车分析等需求。这些需求存在产生结果所依赖的条件多、处理过程实时性的要求高、需要处理的数据量巨大等特点。传统的方式是采用关系数据库,通过复杂的SQL语句组合,不断查询比对的方式,很难满足实时性的要求。复杂事件处理通过引入流式计算等技术,动态地对输入数据进行实时的分析,处理速度可以大幅提供。不符合条件的数据都被丢弃掉,系统中只存在处理的结果或者可能有用的中间数据,这样对存储的要求也变小了,完全在内存中进行全过程的分析,实时性得到了保证。

人脸检索技术

人脸检索的技术在单台服务器上的应用已经比较成熟,可以应用在身份鉴别、在逃人员抓捕、可疑人员排查、身份证查重等领域。人脸检测过程可以分为以下几个阶段:视频或图像解码、人脸检测、特征提取、特征比对,前三个步骤都是每次请求对应一次计算,计算量相对可控,而最后一个步骤特征比每次请求则需要和达亿级的人脸特征进行比对,是运算量最大的一个阶段。

一些实时应用的请求数每秒钟可达请求数达到数百次,每次人脸比对次数可达百万级别时,则整个系统需要支持每秒亿级的人脸特征比对计算。如此大规模的计算,单机上是无法完成的,必须采用集群完成。特征库本身规模不大,但是比对次数很大,属于典型的计算密集型集群,特征库可以全部倒入到内存,在内存中完成计算。

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/4970.html

相关文章

  • 计算市场为安防行业带来新机遇

    摘要:云计算对安防行业意义重大而对于安防行业来说,随着云计算相关技术的日益成熟,使得其在安防业务的应用规模逐渐扩大。  这是最好的年代,也是最坏的年代。狄更斯在其名着《双城记》中以此名句精炼地概况了风云激荡的法国大革命时期的面貌。实际上,这句话也同样适应目前风起云涌的IT业界。云计算市场机遇涌现 对安防也有重大意义  云计算产业市场涌现  2014年,国务院总理李克强在考察浪潮公司时表示,今后出访...

    leone 评论0 收藏0
  • 人工智能时代需要边存储结合应用

    摘要:大数据时代需要智能云存储随着安防监控的大规模应用以及高清摄像头的大量普及,监控视频的数据量增长迅速,而安全需求又对监控数据的可用性提出更高的要求。随着人工智能大时代的到来,大数据存储受到了企业的高度关注。国内安防监控市场在最近几年开始进入高速增长期,而增长的动力来自于城镇化步伐的加快,无论是智慧城市、智能交通,还是大量的楼宇监控,都是安防监控市场成长的动力。安防监控市场的发展势必带动相关领域...

    Dongjie_Liu 评论0 收藏0
  • CES2017安防新品:Fotric发基于计算的摄像头

    摘要:作为全球首款基于云计算的热像摄像头,首次实现了消防与安防的二位一体。在安防方面,拥有强大的移动侦测算法可以识别移动的物体及人体特征,当有非法入侵发生时第一时间报警,保证生活与工作环境的安全。Fotric团队携两款全新热像仪——Fotric 123和Fotric 111亮相CES 2017大展,其中Fotric 123产品更是集合了当前最新的‘云热像’技术。Fotric 123作为全球首款基于...

    melody_lql 评论0 收藏0
  • AI和计算融合成必然 推进行业智能化改造

    摘要:在年前云计算还是一个新名词,经过年的发展,云计算服务已经发展成几百亿美元规模的产业。和云计算加速融合成必然近两年,随着人工智能技术的不断发展,带动全天候计算数据洪峰处理的应用需求越来越高,同时也对云服务的计算力提出了更高要求。 云计算是一种以数据和处理能力为中心的密集型计算模式,由云平台、云存储、云终端、云安全四个基本部分组成。云平台作为提供云计算服务的基础,管理着数量巨大的CPU、存...

    stormjun 评论0 收藏0
  • AI和计算融合成必然 推进行业智能化改造

    摘要:在年前云计算还是一个新名词,经过年的发展,云计算服务已经发展成几百亿美元规模的产业。和云计算加速融合成必然近两年,随着人工智能技术的不断发展,带动全天候计算数据洪峰处理的应用需求越来越高,同时也对云服务的计算力提出了更高要求。 云计算是一种以数据和处理能力为中心的密集型计算模式,由云平台、云存储、云终端、云安全四个基本部分组成。云平台作为提供云计算服务的基础,管理着数量巨大的CPU、存...

    shuibo 评论0 收藏0

发表评论

0条评论

TalkingData

|高级讲师

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<