掌桥专利:专业的专利平台
掌桥专利
首页

一种基于安防监控图像的行为分析方法及系统

文献发布时间:2024-04-18 19:58:21


一种基于安防监控图像的行为分析方法及系统

技术领域

本发明涉及人工智能技术领域,具体而言,涉及一种基于安防监控图像的行为分析方法及系统。

背景技术

人工智能(Artificial Intelligence,简称AI),是利用数字计算机或者数字计算机控制的计算模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个综合技术,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式做出反应的智能机器。

人工智能也就是研究各种智能机器的设计原理与实现方法,使机器具有感知、推理与决策的功能。人工智能技术是一门综合学科,涉及领域广泛,既有硬件层面的技术也有软件层面的技术。

在安防监控领域中,对采集到的监控图像中的监控用户进行行为分析,如进行行为异常分析,是一种重要的手段。但是,在现有技术中,一般是在前端采集到监控图像之后,后端设备直接对前端的监控图像进行行为分析,如基于人工智能技术进行分析,虽然人工智能技术较为成熟,但是,直接对监控图像进行分析,也会使得行为分析的可靠度不佳。

发明内容

有鉴于此,本发明的目的在于提供一种基于安防监控图像的行为分析方法及系统,以在一定程度上提高行为分析的可靠度。

为实现上述目的,本发明实施例采用如下技术方案:

一种基于安防监控图像的行为分析方法,包括:

在待监控区域进行图像采集,以形成所述待监控区域对应的待处理监控图像集,所述待处理监控图像集包括多帧待处理监控图像;

分别对每一帧所述待处理监控图像进行监控用户识别处理,以在所述多帧待处理监控图像中确定出具有监控用户的每一帧待处理监控图像,以及,对确定出的待处理监控图像进行监控用户截取处理,以形成对应的待分析监控图像,并依据对应的图像采集时间之间的先后关系对所述待分析监控图像进行排序处理,以形成对应的待分析监控图像序列;

对待优化行为分析网络进行网络优化处理,以形成目标行为分析网络;

利用所述目标行为分析网络,对所述待分析监控图像序列进行行为分析,输出所述待监控区域对应的行为分析结果,所述行为分析结果用于反映所述待监控区域是否存在异常用户行为。

在一些优选的实施例中,在上述基于安防监控图像的行为分析方法中,所述对待优化行为分析网络进行网络优化处理,以形成目标行为分析网络的步骤,包括:

提取到初始监控图像数据簇,所述初始监控图像数据簇中的每一个初始监控图像数据不具有行为异常性标识数据,所述行为异常性标识数据用于反映是否存在异常用户行为;

对所述初始监控图像数据簇中的每一个初始监控图像数据中的至少一个初始示例性监控图像进行遮盖处理,以通过预设遮盖信息进行遮盖,形成对应的中间监控图像数据簇,每一个所述初始监控图像数据包括按序排列的多帧初始示例性监控图像;

对所述中间监控图像数据簇中的每一个中间监控图像数据进行加载处理,以加载到搭建的待优化行为分析网络中,还原出对应的还原监控图像数据簇,所述中间监控图像数据包括按序排列的多帧中间示例性监控图像,所述还原监控图像数据簇中的每一个还原监控图像数据包括按序排列的多帧还原示例性监控图像;

依据所述初始监控图像数据簇和所述还原监控图像数据簇,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络。

在一些优选的实施例中,在上述基于安防监控图像的行为分析方法中,所述中间监控图像数据簇包括第一数量个中间监控图像数据;

所述对所述中间监控图像数据簇中的每一个中间监控图像数据进行加载处理,以加载到搭建的待优化行为分析网络中,还原出对应的还原监控图像数据簇的步骤,包括:

对所述中间监控图像数据簇中的每一个中间监控图像数据进行加载处理,以加载到搭建的待优化行为分析网络中;

利用所述待优化行为分析网络还原出第a个中间监控图像数据中的每一个预设遮盖信息对应的还原示例性监控图像;

对所述第a个中间监控图像数据中的预设遮盖信息进行更新,以更新为所述第a个中间监控图像数据中的预设遮盖信息对应的还原示例性监控图像,得到所述还原监控图像数据簇中的第a个还原监控图像数据。

在一些优选的实施例中,在上述基于安防监控图像的行为分析方法中,所述对所述第a个中间监控图像数据中的预设遮盖信息进行更新,以更新为所述第a个中间监控图像数据中的预设遮盖信息对应的还原示例性监控图像,得到所述还原监控图像数据簇中的第a个还原监控图像数据的步骤,包括:

在所述第a个中间监控图像数据中的预设遮盖信息对应的多个还原示例性监控图像中确定出第一还原示例性监控图像;以及,对所述第a个中间监控图像数据中的预设遮盖信息行更新,以更新为所述第一还原示例性监控图像,得到第a个还原监控图像数据;

其中,所述在所述第a个中间监控图像数据中的预设遮盖信息对应的多个还原示例性监控图像中确定出第一还原示例性监控图像的步骤,包括:

查找到所述第a个中间监控图像数据中的预设遮盖信息对应的初始示例性监控图像,以及,在所述第a个中间监控图像数据中的预设遮盖信息对应的多个还原示例性监控图像中,对所述初始示例性监控图像进行筛除处理;以及,确定出所述第a个中间监控图像数据中的预设遮盖信息对应的未被筛除的每一个还原示例性监控图像的可能性评估参数;以及,对具有最大值的可能性评估参数对应的还原示例性监控图像进行标记处理,以标记为对应的第一还原示例性监控图像。

在一些优选的实施例中,在上述基于安防监控图像的行为分析方法中,所述依据所述初始监控图像数据簇和所述还原监控图像数据簇,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络的步骤,包括:

对所述初始监控图像数据簇中的每一个初始监控图像数据、所述还原监控图像数据簇中的每一个还原监控图像数据进行加载处理,以加载到所述待优化行为分析网络中;

利用所述待优化行为分析网络挖掘出每一个所述初始监控图像数据对应的初始用户行为表征向量,以及,挖掘出每一个所述还原监控图像数据对应的还原用户行为表征向量;

依据所述初始用户行为表征向量和所述还原用户行为表征向量,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络。

在一些优选的实施例中,在上述基于安防监控图像的行为分析方法中,所述初始监控图像数据簇包括第一数量个初始监控图像数据,所述还原监控图像数据簇包括第一数量个还原监控图像数据,第b个还原监控图像数据与第b个初始监控图像数据对应;

所述依据所述初始用户行为表征向量和所述还原用户行为表征向量,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络的步骤,包括:

对所述第b个还原监控图像数据进行标记处理,以标记为所述第b个初始监控图像数据对应的相关监控图像数据,并对所述第b个还原监控图像数据以外的其它还原监控图像数据进行标记处理,以标记为所述第b个初始监控图像数据对应的非相关监控图像数据;

依据所述第b个初始监控图像数据对应的初始用户行为表征向量、所述第b个初始监控图像数据对应的相关监控图像数据对应的还原用户行为表征向量、所述第b个初始监控图像数据对应的非相关监控图像数据对应的还原用户行为表征向量,将所述待优化行为分析网络进行网络优化处理,以形成对应的目标行为分析网络。

在一些优选的实施例中,在上述基于安防监控图像的行为分析方法中,所述利用所述目标行为分析网络,对所述待分析监控图像序列进行行为分析,输出所述待监控区域对应的行为分析结果的步骤,包括:

利用所述目标行为分析网络包括的行为特征挖掘子网络,对所述待分析监控图像序列进行行为特征挖掘处理,以输出所述待分析监控图像序列对应的用户行为表征向量,所述用户行为表征向量用于反映所述待分析监控图像序列包括的待分析监控图像在行为维度具有的图像语义;

利用所述目标行为分析网络包括的行为分析输出子网络,对所述用户行为表征向量进行行为分析,输出所述待监控区域对应的行为分析结果。

本发明实施例还提供一种基于安防监控图像的行为分析系统,包括:

监控图像采集模块,用于在待监控区域进行图像采集,以形成所述待监控区域对应的待处理监控图像集,所述待处理监控图像集包括多帧待处理监控图像;

监控图像筛选模块,用于分别对每一帧所述待处理监控图像进行监控用户识别处理,以在所述多帧待处理监控图像中确定出具有监控用户的每一帧待处理监控图像,以及,对确定出的待处理监控图像进行监控用户截取处理,以形成对应的待分析监控图像,并依据对应的图像采集时间之间的先后关系对所述待分析监控图像进行排序处理,以形成对应的待分析监控图像序列;

网络优化处理模块,用于对待优化行为分析网络进行网络优化处理,以形成目标行为分析网络;

行为异常分析模块,用于利用所述目标行为分析网络,对所述待分析监控图像序列进行行为分析,输出所述待监控区域对应的行为分析结果,所述行为分析结果用于反映所述待监控区域是否存在异常用户行为。

在一些优选的实施例中,在上述基于安防监控图像的行为分析系统中,所述网络优化处理模块具体用于:

提取到初始监控图像数据簇,所述初始监控图像数据簇中的每一个初始监控图像数据不具有行为异常性标识数据,所述行为异常性标识数据用于反映是否存在异常用户行为;

对所述初始监控图像数据簇中的每一个初始监控图像数据中的至少一个初始示例性监控图像进行遮盖处理,以通过预设遮盖信息进行遮盖,形成对应的中间监控图像数据簇,每一个所述初始监控图像数据包括按序排列的多帧初始示例性监控图像;

对所述中间监控图像数据簇中的每一个中间监控图像数据进行加载处理,以加载到搭建的待优化行为分析网络中,还原出对应的还原监控图像数据簇,所述中间监控图像数据包括按序排列的多帧中间示例性监控图像,所述还原监控图像数据簇中的每一个还原监控图像数据包括按序排列的多帧还原示例性监控图像;

依据所述初始监控图像数据簇和所述还原监控图像数据簇,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络。

在一些优选的实施例中,在上述基于安防监控图像的行为分析系统中,所述行为异常分析模块具体用于:

利用所述目标行为分析网络包括的行为特征挖掘子网络,对所述待分析监控图像序列进行行为特征挖掘处理,以输出所述待分析监控图像序列对应的用户行为表征向量,所述用户行为表征向量用于反映所述待分析监控图像序列包括的待分析监控图像在行为维度具有的图像语义;

利用所述目标行为分析网络包括的行为分析输出子网络,对所述用户行为表征向量进行行为分析,输出所述待监控区域对应的行为分析结果。

本发明实施例提供的一种基于安防监控图像的行为分析方法及系统,可以先在待监控区域进行图像采集,以形成待处理监控图像集;分别对每一帧待处理监控图像进行监控用户识别处理,以在多帧待处理监控图像中确定出具有监控用户的每一帧待处理监控图像,以及,对确定出的待处理监控图像进行监控用户截取处理,以形成待分析监控图像,并对待分析监控图像进行排序处理,以形成待分析监控图像序列;对待优化行为分析网络进行网络优化处理,以形成目标行为分析网络;利用目标行为分析网络,对待分析监控图像序列进行行为分析,输出行为分析结果。基于上述的内容,由于在进行行为分析之前,会对待处理监控图像进行监控用户识别和图像截取处理,使得形成的待分析监控图像具有较高的精度,即避免看无效信息的对行为分析的干扰,从而可以在一定程度上提高行为分析的可靠度,进而改善现有技术中存在的行为分析的可靠度不佳的问题。

为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。

附图说明

图1为本发明实施例提供的基于安防监控图像的行为分析平台的结构框图。

图2为本发明实施例提供的基于安防监控图像的行为分析方法包括的各步骤的流程示意图。

图3为本发明实施例提供的基于安防监控图像的行为分析系统包括的各模块的示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例只是本发明的一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。

因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

如图1所示,本发明实施例提供了一种基于安防监控图像的行为分析平台。其中,所述基于安防监控图像的行为分析平台可以包括存储器和处理器,还可以包括其它的器件或组件等。

详细地,所述存储器和处理器之间直接或间接地电性连接,以实现数据的传输或交互。例如,相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述存储器中可以存储有至少一个可以以软件或固件(firmware)的形式,存在的软件功能模块(计算机程序)。所述处理器可以用于执行所述存储器中存储的可执行的计算机程序,从而实现本发明实施例提供的基于安防监控图像的行为分析方法。

可以选择的是,在一些实施方式中,所述存储器可以是,但不限于,随机存取存储器(Random Access Memory,RAM),只读存储器(Read Only Memory,ROM),可编程只读存储器(Programmable Read-Only Memory,PROM),可擦除只读存储器(Erasable ProgrammableRead-Only Memory,EPROM),电可擦除只读存储器(Electric Erasable ProgrammableRead-Only Memory,EEPROM)等。

可以选择的是,在一些实施方式中,所述处理器可以是一种通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)、片上系统(System on Chip,SoC)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。

可以选择的是,在一些实施方式中,所述基于安防监控图像的行为分析平台可以是一种具备数据处理能力的服务器。

结合图2,本发明实施例还提供一种基于安防监控图像的行为分析方法,可应用于上述基于安防监控图像的行为分析平台。其中,所述基于安防监控图像的行为分析方法有关的流程所定义的方法步骤,可以由所述基于安防监控图像的行为分析平台实现。

下面将对图2所示的具体流程,进行详细阐述。

步骤S110,在待监控区域进行图像采集,以形成所述待监控区域对应的待处理监控图像集。

在本发明实施例中,所述基于安防监控图像的行为分析平台可以在待监控区域进行图像采集,以形成所述待监控区域对应的待处理监控图像集。所述待处理监控图像集包括多帧待处理监控图像。

步骤S120,分别对每一帧所述待处理监控图像进行监控用户识别处理,以在所述多帧待处理监控图像中确定出具有监控用户的每一帧待处理监控图像,以及,对确定出的待处理监控图像进行监控用户截取处理,以形成对应的待分析监控图像,并依据对应的图像采集时间之间的先后关系对所述待分析监控图像进行排序处理,以形成对应的待分析监控图像序列。

在本发明实施例中,所述基于安防监控图像的行为分析平台可以分别对每一帧所述待处理监控图像进行监控用户识别处理,以在所述多帧待处理监控图像中确定出具有监控用户的每一帧待处理监控图像,以及,对确定出的待处理监控图像进行监控用户截取处理,以形成对应的待分析监控图像(也就是说,可以将不具有监控用户的部分图像筛除,如将背景图像筛除),并依据对应的图像采集时间之间的先后关系对所述待分析监控图像进行排序处理,以形成对应的待分析监控图像序列。

步骤S130,对待优化行为分析网络进行网络优化处理,以形成目标行为分析网络。

在本发明实施例中,所述基于安防监控图像的行为分析平台可以对待优化行为分析网络进行网络优化处理,以形成目标行为分析网络。

步骤S140,利用所述目标行为分析网络,对所述待分析监控图像序列进行行为分析,输出所述待监控区域对应的行为分析结果。

在本发明实施例中,所述基于安防监控图像的行为分析平台可以利用所述目标行为分析网络,对所述待分析监控图像序列进行行为分析,输出所述待监控区域对应的行为分析结果。所述行为分析结果用于反映所述待监控区域是否存在异常用户行为。

基于上述的内容,如步骤S110、步骤S120、步骤S130和步骤S140,由于在进行行为分析之前,会对待处理监控图像进行监控用户识别和图像截取处理,使得形成的待分析监控图像具有较高的精度,即避免看无效信息的对行为分析的干扰,从而可以在一定程度上提高行为分析的可靠度,进而改善现有技术中存在的行为分析的可靠度不佳的问题。

可以选择的是,在一些实施方式中,所述对待优化行为分析网络进行网络优化处理,以形成目标行为分析网络的步骤,可以进一步包括以下的内容:

提取到初始监控图像数据簇,所述初始监控图像数据簇中的每一个初始监控图像数据不具有行为异常性标识数据,所述行为异常性标识数据用于反映是否存在异常用户行为;

对所述初始监控图像数据簇中的每一个初始监控图像数据中的至少一个初始示例性监控图像进行遮盖处理,以通过预设遮盖信息进行遮盖,形成对应的中间监控图像数据簇,每一个所述初始监控图像数据包括按序排列的多帧初始示例性监控图像(所述预设遮盖信息的具体内容不受限制,如可以是一帧空白的图像,或全黑的图像);

对所述中间监控图像数据簇中的每一个中间监控图像数据进行加载处理,以加载到搭建的待优化行为分析网络中,还原出对应的还原监控图像数据簇,所述中间监控图像数据包括按序排列的多帧中间示例性监控图像,所述还原监控图像数据簇中的每一个还原监控图像数据包括按序排列的多帧还原示例性监控图像;

依据所述初始监控图像数据簇和所述还原监控图像数据簇,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络。

可以选择的是,在一些实施方式中,所述中间监控图像数据簇包括第一数量个中间监控图像数据,基于此,所述对所述中间监控图像数据簇中的每一个中间监控图像数据进行加载处理,以加载到搭建的待优化行为分析网络中,还原出对应的还原监控图像数据簇的步骤,可以进一步包括以下的内容:

对所述中间监控图像数据簇中的每一个中间监控图像数据进行加载处理,以加载到搭建的待优化行为分析网络中;

利用所述待优化行为分析网络还原出第a个中间监控图像数据中的每一个预设遮盖信息对应的还原示例性监控图像;

对所述第a个中间监控图像数据中的预设遮盖信息进行更新,以更新为所述第a个中间监控图像数据中的预设遮盖信息对应的还原示例性监控图像,得到所述还原监控图像数据簇中的第a个还原监控图像数据。

可以选择的是,在一些实施方式中,所述对所述第a个中间监控图像数据中的预设遮盖信息进行更新,以更新为所述第a个中间监控图像数据中的预设遮盖信息对应的还原示例性监控图像,得到所述还原监控图像数据簇中的第a个还原监控图像数据的步骤,可以进一步包括以下的内容:

在所述第a个中间监控图像数据中的预设遮盖信息对应的多个还原示例性监控图像中确定出第一还原示例性监控图像;

对所述第a个中间监控图像数据中的预设遮盖信息行更新,以更新为所述第一还原示例性监控图像,得到第a个还原监控图像数据;

可以选择的是,在一些实施方式中,所述在所述第a个中间监控图像数据中的预设遮盖信息对应的多个还原示例性监控图像中确定出第一还原示例性监控图像的步骤,可以进一步包括以下的内容:

查找到所述第a个中间监控图像数据中的预设遮盖信息对应的初始示例性监控图像,以及,在所述第a个中间监控图像数据中的预设遮盖信息对应的多个还原示例性监控图像中,对所述初始示例性监控图像进行筛除处理;以及,确定出所述第a个中间监控图像数据中的预设遮盖信息对应的未被筛除的每一个还原示例性监控图像的可能性评估参数(所述可能性评估参数用于反映还原示例性监控图像的可能性大小,或者,可靠度);

对具有最大值的可能性评估参数对应的还原示例性监控图像进行标记处理,以标记为对应的第一还原示例性监控图像(也就是说,在第a个中间监控图像数据中的预设遮盖信息的多个还原示例性监控图像中筛选出与初始示例性监控图像不一样的第一还原示例性监控图像)。

可以选择的是,在一些实施方式中,所述依据所述初始监控图像数据簇和所述还原监控图像数据簇,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络的步骤,可以进一步包括以下的内容:

对所述初始监控图像数据簇中的每一个初始监控图像数据、所述还原监控图像数据簇中的每一个还原监控图像数据进行加载处理,以加载到所述待优化行为分析网络中;

利用所述待优化行为分析网络挖掘出每一个所述初始监控图像数据对应的初始用户行为表征向量,以及,挖掘出每一个所述还原监控图像数据对应的还原用户行为表征向量;

依据所述初始用户行为表征向量和所述还原用户行为表征向量,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络。

可以选择的是,在一些实施方式中,所述初始监控图像数据簇可以包括第一数量个初始监控图像数据,所述还原监控图像数据簇可以包括第一数量个还原监控图像数据,第b个还原监控图像数据与第b个初始监控图像数据对应(即第b个还原监控图像数据基于对第b个初始监控图像数据对应的中间监控图像数据进行还原处理形成),基于此,所述依据所述初始用户行为表征向量和所述还原用户行为表征向量,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络的步骤,可以进一步包括以下的内容:

对所述第b个还原监控图像数据进行标记处理,以标记为所述第b个初始监控图像数据对应的相关监控图像数据,并对所述第b个还原监控图像数据以外的其它还原监控图像数据进行标记处理,以标记为所述第b个初始监控图像数据对应的非相关监控图像数据;

依据所述第b个初始监控图像数据对应的初始用户行为表征向量、所述第b个初始监控图像数据对应的相关监控图像数据对应的还原用户行为表征向量、所述第b个初始监控图像数据对应的非相关监控图像数据对应的还原用户行为表征向量,将所述待优化行为分析网络进行网络优化处理,以形成对应的目标行为分析网络。

其中,可以选择的是,在一些实施方式中,所述依据所述第b个初始监控图像数据对应的初始用户行为表征向量、所述第b个初始监控图像数据对应的相关监控图像数据对应的还原用户行为表征向量、所述第b个初始监控图像数据对应的非相关监控图像数据对应的还原用户行为表征向量,将所述待优化行为分析网络进行网络优化处理,以形成对应的目标行为分析网络的步骤,可以进一步包括以下的内容:

分析出所述第b个初始监控图像数据对应的初始用户行为表征向量与所述第b个初始监控图像数据对应的相关监控图像数据对应的还原用户行为表征向量之间的相关维度匹配系数(即进行向量相似度的计算);

分析出所述第b个初始监控图像数据对应的初始用户行为表征向量与所述第b个初始监控图像数据对应的非相关监控图像数据对应的还原用户行为表征向量之间的非相关维度匹配系数(即进行向量相似度的计算);

依据所述相关维度匹配系数和所述非相关维度匹配系数,分析出所述待优化行为分析网络对应的网络学习代价值(示例性地,所述相关维度匹配系数与所述网络学习代价值之间可以负相关,所述非相关维度匹配系数与所述网络学习代价值之间可以正相关);

依据所述网络学习代价值,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络(所述网络优化处理的方向可以是,增加所述相关维度匹配系数,以及,减小所述非相关维度匹配系数,基于此,可以实现对所述待优化行为分析网络包括的行为特征挖掘子网络进行网络优化处理,另外,所述目标行为分析网络还可以包括行为分析输出子网络,所述行为分析输出子网络可以包括softmax函数,以用于对用户行为表征向量进行行为分析,所述行为分析输出子网络可以基于具有行为异常性标识数据的示例性监控图像数据优化)。

可以选择的是,在一些实施方式中,所述利用所述目标行为分析网络,对所述待分析监控图像序列进行行为分析,输出所述待监控区域对应的行为分析结果的步骤,可以进一步包括以下的内容:

利用所述目标行为分析网络包括的行为特征挖掘子网络,对所述待分析监控图像序列进行行为特征挖掘处理,以输出所述待分析监控图像序列对应的用户行为表征向量,所述用户行为表征向量用于反映所述待分析监控图像序列包括的待分析监控图像在行为维度具有的图像语义;

利用所述目标行为分析网络包括的行为分析输出子网络,对所述用户行为表征向量进行行为分析,输出所述待监控区域对应的行为分析结果。

结合图3,本发明实施例还提供一种基于安防监控图像的行为分析系统,可应用于上述基于安防监控图像的行为分析平台。其中,所述基于安防监控图像的行为分析系统可以包括以下内容:

监控图像采集模块,用于在待监控区域进行图像采集,以形成所述待监控区域对应的待处理监控图像集,所述待处理监控图像集包括多帧待处理监控图像;

监控图像筛选模块,用于分别对每一帧所述待处理监控图像进行监控用户识别处理,以在所述多帧待处理监控图像中确定出具有监控用户的每一帧待处理监控图像,以及,对确定出的待处理监控图像进行监控用户截取处理,以形成对应的待分析监控图像,并依据对应的图像采集时间之间的先后关系对所述待分析监控图像进行排序处理,以形成对应的待分析监控图像序列;

网络优化处理模块,用于对待优化行为分析网络进行网络优化处理,以形成目标行为分析网络;

行为异常分析模块,用于利用所述目标行为分析网络,对所述待分析监控图像序列进行行为分析,输出所述待监控区域对应的行为分析结果,所述行为分析结果用于反映所述待监控区域是否存在异常用户行为。

可以选择的是,在一些实施方式中,所述网络优化处理模块具体用于:

提取到初始监控图像数据簇,所述初始监控图像数据簇中的每一个初始监控图像数据不具有行为异常性标识数据,所述行为异常性标识数据用于反映是否存在异常用户行为;

对所述初始监控图像数据簇中的每一个初始监控图像数据中的至少一个初始示例性监控图像进行遮盖处理,以通过预设遮盖信息进行遮盖,形成对应的中间监控图像数据簇,每一个所述初始监控图像数据包括按序排列的多帧初始示例性监控图像;

对所述中间监控图像数据簇中的每一个中间监控图像数据进行加载处理,以加载到搭建的待优化行为分析网络中,还原出对应的还原监控图像数据簇,所述中间监控图像数据包括按序排列的多帧中间示例性监控图像,所述还原监控图像数据簇中的每一个还原监控图像数据包括按序排列的多帧还原示例性监控图像;

依据所述初始监控图像数据簇和所述还原监控图像数据簇,将所述待优化行为分析网络进行网络优化处理,以形成所述待优化行为分析网络对应的目标行为分析网络。

可以选择的是,在一些实施方式中,所述行为异常分析模块具体用于:

利用所述目标行为分析网络包括的行为特征挖掘子网络,对所述待分析监控图像序列进行行为特征挖掘处理,以输出所述待分析监控图像序列对应的用户行为表征向量,所述用户行为表征向量用于反映所述待分析监控图像序列包括的待分析监控图像在行为维度具有的图像语义;

利用所述目标行为分析网络包括的行为分析输出子网络,对所述用户行为表征向量进行行为分析,输出所述待监控区域对应的行为分析结果。

综上所述,本发明提供的一种基于安防监控图像的行为分析方法及系统,可以先在待监控区域进行图像采集,以形成待处理监控图像集;分别对每一帧待处理监控图像进行监控用户识别处理,以在多帧待处理监控图像中确定出具有监控用户的每一帧待处理监控图像,以及,对确定出的待处理监控图像进行监控用户截取处理,以形成待分析监控图像,并对待分析监控图像进行排序处理,以形成待分析监控图像序列;对待优化行为分析网络进行网络优化处理,以形成目标行为分析网络;利用目标行为分析网络,对待分析监控图像序列进行行为分析,输出行为分析结果。基于上述的内容,由于在进行行为分析之前,会对待处理监控图像进行监控用户识别和图像截取处理,使得形成的待分析监控图像具有较高的精度,即避免看无效信息的对行为分析的干扰,从而可以在一定程度上提高行为分析的可靠度,进而改善现有技术中存在的行为分析的可靠度不佳的问题。

以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

相关技术
  • 一种安防监控图像处理装置和方法
  • 基于图像识别和行为分析的智能安防系统及方法
  • 基于图像识别和行为分析的智能安防系统及方法
技术分类

06120116480021