应急视频大数据融合平台

技术领域

本发明涉及大数据领域，尤其涉及一种应急视频大数据融合平台。

背景技术

随着社会的不断进步，人们群众的自身财产安全始终是第一位的，例如日常中寻人或寻车，依赖于各种监控探头提供的视频作为依据，但是这些视频仅仅作为一个拍摄主体，对于例如学校、医院和车站等都采用的单独监控，无法实现视频资源的互联互通，在某些特殊的状况下，无法利用现有的视频资源快速寻找到对应的车辆或人员。

发明内容

针对上述技术中存在的不足之处，本发明提供一种应急视频大数据融合平台，集信息采集、救援、指挥、监管、监控于一身的信息化平台，以安全监管信息和应急信息为中心、以通讯系统为保障、计算机网络为依托、应急管理系统为手段、大数据云计算为特色的安全应急视频大数据融合平台。

为实现上述目的，本发明提供一种应急视频大数据融合平台，应急视频大数据融合平台由应急大数据研判中心、视频联网平台、大数据支撑平台、视频共享平台、社会面资源整合平台和应急大数据平台组成，应急大数据支撑平台通过对收集的信息进行处理后，经过社会面资源汇聚平台传输至视频共享平台，视频共享平台将数据传输至视频联网平台和大数据支撑平台，最终传输至应急大数据研判中心进行处理。

作为优选，所述应急大数据平台将相关部门、核心住宅区所记录的视频进行整合，通过单向光闸将视频数据传输至大数据支撑平台。

作为优选，所述大数据支撑平台内设有视图库、融合通信、视频结构化系统和动态人脸分析系统；所述融合通信为公用电话交换网(PSTN)，实现大数据支撑平台与应急大数据研判中心和应急大数据平台之间的数据传输，融合通信通过接入网关实现与各种语音通信系统及设备的互联互通，采用公用电话交换网进行接入工作，包括模拟中继接入、数字中继接入和SIP中继接入，融合通信指挥调度平台通过模拟用户中继网关的模拟外线接口中的0口与PSTN运营商的外线模拟电话线对接，通过数字中继网关的数字中继接口与 PSTN运营商的数字中继对接，通过软交换服务的SIP协议接口与PSTN运输商的IP软交换设备通过协议方式接入。

作为优选，所述视频结构化系统内部设有人车物分离模块和车型二次分析模块，人车物分离模块对视频中的人、车、物进行分离，输出人、车、物特征图片以及对应初步的结构化信息，进行标签化处理，并且传输至车型二次分析模块；车型二次分析模块将人车物分离模块得到的清晰图片与过车数据进行对接，将图片进行分析提取，得到车辆的车牌、车辆品牌、车辆特征信息，并将对应特征提取结果存储在所述视图库内。

作为优选，所述动态人脸分析系统与视频结构化系统进行相连，经过人车物分类模块处理后得到的人脸照片传输至动态人脸分析系统内，对该人脸照片进行人脸特征数据提取，并将提取的相关信息传输至应急大数据研判中心内。

作为优选，应急大数据研判中心包括系统对接网关、人像大数据系统、视频图像信息库和车辆大数据系统，所述系统对接网关实现不同级别指挥平台之间的信息交互，高级别指挥平台向低级别指挥平台发送指挥调度；高级别指挥平台与低级别指挥平台之间进行事件抄送和信息传递。

作为优选，人像大数据系统与动态人脸分析系统相连，当动态人脸分析系统将人脸特征数据传输至人像大数据系统内，对这些人像进行特征识别和比对，从而实现对目标的快速查找。

作为优选，所述视频图像信息库对所获取的视频信息进行存储和分析，对所有下发的指令信息以及上报的信息进行汇集管理，从而在后续可有效进行回溯。

作为优选，所述车辆大数据通过车辆大数据业务处理集群和分布式检索服务集群对车辆进行快速识别检测；车辆大数据业务处理集群-核心业务模块集群，集成车辆图片二次分析&&和数据业务分析功能于一体，包含：车型识别业务集群和数据研判业务集群，车型识别业务集群采用storm流式架构技术实现海量图片的实时二次识别；数据研判业务集群采用storm架构；并可根据系统的规模，进行线性敏捷的业务扩容。

本发明的有益效果是：本申请采用领先的云计算、大数据、物联网等信息化技术，结合已有信息系统，运用现代信息技术，建立统一指挥、结构合理、反应灵敏、运转高效、保障有力的应急平台。

应急视频大数据融合平台以区应急平台为中心，以基层应急平台为端点，上下贯通、左右衔接、互联互通、信息共享、互有侧重、互为支撑、安全畅通的信息化系统，实现监测监控、预测预告、信息报告、综合研判、辅助决策、指挥调度等主要功能，实现处理事件的相互协同、有序应对。

附图说明

图1为本发明的总体框架图；

图2为本发明的网络部署图；

图3为本发明的人脸识别流程图；

图4为本申请的结构化处理流程图；

图5为本申请的通讯系统示意图。

具体实施方式

为了更清楚地表述本发明，下面结合附图对本发明作进一步地描述。

首先，本申请的服务对象大致可分为六类，分别是：

第一、上级负责人，一般需通过电话和网络汇报，紧急情况可通过卫星电话汇报；

第二、本级负责人，一般通过电话汇报，负责人可到指挥中心或现场指挥；

第三、联动部门，其沟通方式很多，如网络、电话、邮件、短信、视频、集群等；

第四、应急中心工作人员，通常用网络沟通，也配备集群手持机：

第五、应急专家，平时通过邮件联系，战时通过电话和现场沟通；

第六、社会公众，既需要传统媒体电视、广播和报纸，又需要短信、网站和大屏等新型媒体，而指挥中心与电视、广播和报纸最好的联系方式是邮件。

因此应急视频大数据融合平台应与有关部门应急平台实现互联互通；可实时接报各类事件信息，对事件预测预报信息、现场图片等多媒体信息能够实时传送到应急视频大数据融合平台，并对事态发展进行持续跟踪，及时传达批示指示，进行督办落实；为了实现该目标，就必须要要借助无线通讯和视频会议的手段，更重要的是要借助于图像接入系统，图像接入系统应基于区外网进行建设，立足于目前交通和相关部门现有和待建视频图像资源进行整合。接入乡镇、交通和相关部门现有的视频监控资源以及移动应急平台在事件现场的视频图像，实现图像资源按级传送和调度，解决事件现场实时图像的获取与传输。获取交通和相关部门、移动应急平台、场所内、卡口等的图像信息，能够采用直接调度和分级调度的方法获取图像资源，并能够具有查询、调阅、存储、实时点播，以及用户权限管理等功能；能够根据需要，上传图像资源至市应急平台，实现图像接入的互联互通。

应急视频大数据融合平台由应急大数据研判中心、视频联网平台、大数据支撑平台、视频共享平台、社会面资源整合平台和应急大数据平台组成，应急大数据支撑平台通过对收集的信息进行处理后，经过社会面资源汇聚平台传输至视频共享平台，视频共享平台将数据传输至视频联网平台和大数据支撑平台，最终传输至应急大数据研判中心进行处理，在本实施例中，应急大数据研判中心实现对结构化处理后的重点信息的存储、大数据分析、上传等辅助功能，包含人像大数据、车辆大数据、云存储等建设内容，提供大数据手段支撑；应急指挥大数据支撑平台实现对接入平台的视频的结构化处理，应急大数据融合平台实现对相关部门、核心住宅区、单兵等外部视频的融合，在网外部建设专有的社会资源融合平台，通过单向光闸等设备实现视频数据向内网的传输。满足区重要视频资源的融合共享需求。

大数据支撑平台内设有视图库、融合通信、视频结构化系统和动态人脸分析系统；所述融合通信为公用电话交换网(PSTN)，实现大数据支撑平台与应急大数据研判中心和应急大数据平台之间的数据传输，融合通信通过接入网关实现与各种语音通信系统及设备的互联互通，采用公用电话交换网进行接入工作，包括模拟中继接入、数字中继接入和SIP中继接入，融合通信指挥调度平台通过模拟用户中继网关的模拟外线接口中的0口与PSTN运营商的外线模拟电话线对接，通过数字中继网关的数字中继接口与PSTN运营商的数字中继对接，通过软交换服务的SIP协议接口与PSTN运输商的IP软交换设备通过协议方式接入。在具体实施例中，通过PSTN，能有效实现音频数据的传输，这样在整个事件发生时，不仅能够通过视频监控子系统获知相应的图像信息，还能获取音频信息，这样在指挥的时候就能充分了解现场的具体情况而作出最正确的判断，多个接入方式能满足不同的使用需求，能最大可能进行全范围的覆盖，而且特别设置有用户接入口，周边的行人可以通过该接口直接反馈相关信息，这样不仅能够及时了解当时的现场信息，也能了解整个事件的缘由，从而指挥者能结合多方面因素作出最重要，也是最正确的措施。

视频结构化系统内部设有人车物分离模块和车型二次分析模块，人车物分离模块对视频中的人、车、物进行分离，输出人、车、物特征图片以及对应初步的结构化信息，进行标签化处理，并且传输至车型二次分析模块；车型二次分析模块将人车物分离模块得到的清晰图片与过车数据进行对接，将图片进行分析提取，得到车辆的车牌、车辆品牌、车辆特征信息，并将对应特征提取结果存储在视图库内。更为具体的是，人车物分离模块对视频中的人、车、物进行分离，输出人、车、物特征图片以及对应初步的结构化信息，进行标签化处理，并且传输至车型二次分析模块；车型二次分析模块将人车物分离模块得到的清晰图片与过车数据进行对接，将图片进行分析提取，得到车辆的车牌、车辆品牌、车辆特征信息，并将对应特征提取结果存储在数据库内；人车物分离模块在对视频进行分析时，将视频中的运动目标进行人、车、物的区分，同时提取目标的基本信息：主体颜色、目标大小、目标速度、运动方向、时间，并在根据这些提取目标信息进行自由组合进行目标搜索，显示结果以视图、列表或者地图形式予以展现，每条基本信息对应原始视频片段；车型二次分析模块基于人车物分离模块得到的初步结构化信息进行特征二次提取和分析，并进行结构化解析和提取，获得车辆特征，包括通用特征和唯一局部特征，提取完毕后对所有信息进行存储，并且传输至预报系统内；通用特征包括车辆品牌、车辆型号和车身颜色，唯一局部特征包括车辆内部的摆件、挂件以及年检标个数；对于视频流信息，利用人车物分离模块进行处理，将整段视频流进行切割，从而得到一系列连续图片，然后在这一系列连续图片中选取带有车辆的最清楚的照片，将该张照片发送至车型二次分析模块内进行处理；在具体应用过程中，可以通过按照在各个治安开口的摄像头或者视频点位通过设备接入模块将其收集的信息进行存储，存储的形式包括视频存储、图片存储和数据库存储等，也可以通过平台协议例如GB28181协议接入第三方平台的视频信息或者第三方卡口平台记录得到的过车记录信息和图片信息，所有的信息经过获取系统汇聚后传输至萃取系统内，视频流信息被人车物分离模块处理得到车辆图片信息；更为具体的是，视频人车物分离针对平台/设备的视频/录像进行结构化处理，将视频中的运动目标进行人(行人、自行车、电瓶车或摩托车、三轮车)、车、物的区分，同时提取目标基本的信息：主体颜色、目标大小、目标速度、运动方向、时间等。，其中主体颜色就包括白、灰、黄、粉、红、紫、绿、蓝、棕、黑至少10种颜色；根据这些提取得目标信息可以自由组合进行目标搜索，显示结果以视图、列表或者地图形式展现，每条记录对应原始视频片段供细节查看。结构化的重要线索及高价值数据可以在分析后入视图库，同时萃取系统也能从视图库中获取其他业务系统分析后的高价值信息进行同一人、车线索的关联，并在地图上进行展现；车型二次分析模块将车辆的图片信息和过车数据进行结合，得到车辆的特征信息，例如有无车牌，对车辆的类型进行识别，包括微型车、两厢轿车、三厢轿车、SUV、MPV、旅行车、跑车、皮卡、微面、货车、客车等至少10种车型的识别；以及车辆的品牌和子品牌识别；还包括车辆的唯一性局部特征，例如年检标志、纸巾盒、遮阳板、摆件、挂件等信息，当所有的信息都汇总后，存储在视图库中进行保存。

动态人脸分析系统与视频结构化系统进行相连，经过人车物分类模块处理后得到的人脸照片传输至动态人脸分析系统内，对该人脸照片进行人脸特征数据提取，并将提取的相关信息传输至应急大数据研判中心内。更为具体的是，采用前段抓拍后端处理的方式进行，这种设计方式可降低服务器编解码性能，在服务器选型和性能利用和综合成本方面，前端抓拍更具性价比，同时2)抓拍算法结合前端摄像机，可联动摄像机快速调整人脸区域曝光、人脸区域图像质量调优，可提供查看优质的人脸图像。

应急大数据研判中心包括系统对接网关、人像大数据系统、视频图像信息库和车辆大数据系统，系统对接网关实现不同级别指挥平台之间的信息交互，高级别指挥平台向低级别指挥平台发送指挥调度；高级别指挥平台与低级别指挥平台之间进行事件抄送和信息传递；人像大数据系统与动态人脸分析系统相连，当动态人脸分析系统将人脸特征数据传输至人像大数据系统内，对这些人像进行特征识别和比对，从而实现对目标的快速查找；视频图像信息库对所获取的视频信息进行存储和分析，对所有下发的指令信息以及上报的信息进行汇集管理，从而在后续可有效进行回溯；车辆大数据通过车辆大数据业务处理集群和分布式检索服务集群对车辆进行快速识别检测；车辆大数据业务处理集群-核心业务模块集群，集成车辆图片二次分析&&和数据业务分析功能于一体，包含：车型识别业务集群和数据研判业务集群，车型识别业务集群采用storm流式架构技术实现海量图片的实时二次识别；数据研判业务集群采用storm架构；并可根据系统的规模，进行线性敏捷的业务扩容。在本实施例中，车辆大数据实现对车辆的快速排查，通过大数据研判模型，将“车辆、车主、车主关系人、车辆行为事件”的特征、行为信息与信息资源库&&车辆库自动比对，对发现的异常行为进行实时预报和布置，更为具体的是，整合道路卡口/图片视频资源、监控、信息库(如人员信息库、车架管库、六合一系统等)、社会资源信息、互联网高价值信息等，以过车数据为主线，实现车辆的行为轨迹与车辆属性信息、人员信息(车主&&关系人)、历史事件信息、物品等数据的关联挖掘，通过对关键信息的自动提取、检索和分析处理，高效实现实时预报和精准分析。依托数据研判，科学部置，及时预防和快速处理情况。

以上公开的仅为本发明的几个具体实施例，但是本发明并非局限于此，任何本领域的技术人员能思之的变化都应落入本发明的保护范围。