一种基于图像处理与射频技术的封样方法及装置

技术领域

本发明涉及封样监控的技术领域，特别涉及一种基于图像处理与射频技术的封样方法及装置。

背景技术

样品在送检之前都需要进行相应的封样处理，而封样处理会涉及不同的操作人员和不同的操作工序，才能够实现对样品的完整保全。在实际操作过程中，样品在封样处理中经过不同人员的接触，这难以保证所有人员在执行相应的封样操作工序时能够按照相应的规定执行，为了保证封样处理执行的正确性，需要对每一个人员执行的每一个封样操作工序进行定点和定时的监控，以此确定封样过程是否存在相应的违规行为。但是，由于封样处理涉及的工序繁多，并且封样处理通常需要保密性，若对封样处理进行人工监控，不仅需要耗费较多的人力物力，并且还不利于对封样进行保密，这都增加了对封样处理进行准确的和全面的监控的难度。可见，现有技术的封样方法和装置并不能有效地提高对封样处理过程中违规动作行为的监控识别有效性和准确性，以及同时提高封样处理过程的信息保密性。

发明内容

针对现有技术存在的缺陷，本发明提供一种基于图像处理与射频技术的封样方法及装置，该基于图像处理与射频技术的封样方法及装置通过在封样形成过程中分别获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据、和关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此形成相应的第一识别信息和第二识别信息，再根据该第一识别信息和第二识别信息构建该封样形成过程中封样相关人员的动作数据集合，最后对该动作数据集合进行预定模式的动作匹配处理，以此确定该封样形成过程中存在的违规动作行为；可见，该基于图像处理与射频技术的封样方法及装置通过图像监控和射频监控相结合的方式对样品的封样形成过程进行实时的和智能化的监控，并从图像监控和射频监控得到的数据信息中识别出封样处理对应的封样动作信息，以及对该封样动作信息进行违规与否的判断处理，从而对封样处理的每一个工序进行细节化和无人化的识别分析处理，从而有效地提高对封样处理过程中违规动作行为的监控识别有效性和准确性，以及同时提高封样处理过程的信息保密性。

本发明提供一种基于图像处理与射频技术的封样方法，其特征在于，所述基于图像处理与射频技术的封样方法包括如下步骤：

步骤S1，在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据，以此确定第一识别信息；

步骤S2，在所述封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此确定第二识别信息；

步骤S3，根据所述第一识别信息和所述第二识别信息，构建所述封样形成过程中封样相关人员的动作数据集合；

步骤S4，对所述动作数据集合进行预定模式的动作匹配处理，以此确定所述封样形成过程中存在的违规动作行为；

进一步，在所述步骤S1中，在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据，以此确定第一识别信息具体包括，

步骤S101，获取所述封样形成过程对应的封样形成环境状态和/或封样相关人员分布状态，以此确定相应的图像数据采集模式；

步骤S102，根据所述图像数据采集模式，对所述封样形成过程执行相应的单目视觉图像采集操作和/或多目视觉图像采集操作，以此采集得到关于封样本身和/或封样相关人员的所述动态图像数据和/或所述静态图像数据；

步骤S103，对所述动态图像数据和/或所述静态图像数据进行图像帧解析处理，以此获得关于封样本身和/或封样相关人员状态变化的所述第一识别信息，其中，获得关于封样本身的第一识别信息具体包括

A、根据所述图像帧解析处理，获得m帧图像信息集合S，S＝{K

B、根据下面公式，计算每一帧图像对应的变化信息量

在上述公式中，Δ(i,i+1)为第i帧图像与第i+1帧图像之间的变化信息量，F

C、根据下面公式计算得到所述第一识别信息

f＝{δ

在上述公式中，f为第一识别信息，δ

在上述公式中，F

进一步，在所述步骤S2中，在所述封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此确定第二识别信息具体包括，

步骤S201，获取封样对应的射频标签的标签布置状态信息和/或射频工作参数信息，并根据所述标签布置状态信息和/或所述射频工作参数信息，确定相应的射频相关数据采集模式；

步骤S202，根据所述射频相关数据采集模式，对所述封样形成过程执行相应的射频标签实体监控操作和/或射频标签信号监控操作，以此采集得到关于射频标签工作的所述射频标签物理状态数据和/或所述射频标签信号状态数据；

步骤S203，对所述射频标签物理状态数据和所述射频标签信号状态数据分别进行标签物理属性解析处理和射频信号解析处理，以此获得关于所述射频标签状态变化的第二识别信息；

进一步，在所述步骤S3中，根据所述第一识别信息和所述第二识别信息，构建所述封样形成过程中封样相关人员的动作数据集合具体包括，

步骤S301，从所述第一识别信息和所述第二识别信息中，分别提取关于所述封样形成过程的封样自身定标特征、相关人员定标特征和射频标签定标特征；

步骤S302，根据所述封样自身定标特征、所述相关人员定标特征和射频标签定标特征，确定所述封样形成过程对应的封样变化评判模型；

步骤S303，根据所述封样变化评判模型，对所述封样形成过程中相对应的封样形成图像集合进行摘选处理和图像内容处理，以此构建所述封样相关人员的动作数据集合；

进一步，在所述步骤S4中，对所述动作数据集合进行预定模式的动作匹配处理，以此确定所述封样形成过程中存在的违规动作行为具体包括，

步骤S401，对所述动作数据集合进行关于六自由度的动作姿态提取处理，以此获得所述封样形成过程对应的动作细节识别数据；

步骤S402，对所述动作细节识别数据与预设动作合规/违规判断模型进行所述动作匹配处理，以确定所述动作细节识别数据中的封样合规动作存在状态和封样违规动作存在状态；

步骤S403，根据所述封样合规动作存在状态和所述封样违规动作存在状态，对所述封样形成过程中的封样行为安全性进行预警处理。

本发明还提供一种基于图像处理与射频技术的封样装置，其特征在于：

所述基于图像处理与射频技术的封样装置包括封样图像数据获取模块、第一识别信息确定模块、射频标签相关数据获取模块、第二识别信息确定模块、动作数据集合构建模块和违规动作行为确定模块；其中，

所述封样图像数据获取模块用于在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据；

所述第一识别信息确定模块用于根据所述动态图像数据和/或所述静态图像数据，确定第一识别信息；

所述射频标签相关数据获取模块用于在所述封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据；

所述第二识别信息确定模块用于根据所述射频标签物理状态数据和/或所述射频标签信号状态数据，确定第二识别信息；

所述动作数据集合构建模块用于根据所述第一识别信息和所述第二识别信息，构建所述封样形成过程中封样相关人员的动作数据集合；

所述违规动作行为确定模块用于对所述动作数据集合进行预定模式的动作匹配处理，以此确定所述封样形成过程中存在的违规动作行为；

进一步，所述封样图像数据获取模块包括图像数据采集模式确定子模块和图像数据采集子模块；其中，

所述图像数据采集模式确定子模块用于根据所述封样形成过程对应的封样形成环境状态和/或封样相关人员分布状态，确定相应的图像数据采集模式；

所述图像数据采集子模块用于根据所述图像数据采集模式，对所述封样形成过程执行相应的单目视觉图像采集操作和/或多目视觉图像采集操作，以此采集得到关于封样本身和/或封样相关人员的所述动态图像数据和/或所述静态图像数据；

所述第一识别信息确定模块用于对所述动态图像数据和/或所述静态图像数据进行图像帧解析处理，以此获得关于封样本身和/或封样相关人员状态变化的所述第一识别信息；

进一步，所述射频标签相关数据获取模块包括射频相关数据采集模式确定子模块和射频相关数据采集子模块；其中

所述射频相关数据采集模式确定子模块用于根据封样对应的射频标签的标签布置状态信息和/或射频工作参数信息，并根据所述标签布置状态信息和/或所述射频工作参数信息，确定相应的射频相关数据采集模式；

所述射频相关数据采集子模块用于根据所述射频相关数据采集模式，对所述封样形成过程执行相应的射频标签实体监控操作和/或射频标签信号监控操作，以此采集得到关于射频标签工作的所述射频标签物理状态数据和/或所述射频标签信号状态数据；

所述第二识别信息确定模块用于对所述射频标签物理状态数据和所述射频标签信号状态数据分别进行标签物理属性解析处理和射频信号解析处理，以此获得关于所述射频标签状态变化的第二识别信息；

进一步，所述动作数据集合构建模块包括封样定标提取子模块、封样变化评判模型确定子模块和动作数据集合生成子模块；其中，

所述封样定标提取子模块用于从所述第一识别信息和所述第二识别信息中，分别提取关于所述封样形成过程的封样自身定标特征、相关人员定标特征和射频标签定标特征；

所述封样变化评判模型确定子模块用于根据所述封样自身定标特征、所述相关人员定标特征和射频标签定标特征，确定所述封样形成过程对应的封样变化评判模型；

所述动作数据集合生成子模块用于根据所述封样变化评判模型，对所述封样形成过程中相对应的封样形成图像集合进行摘选处理和图像内容处理，以此生成所述封样相关人员的动作数据集合；

进一步，所述违规动作行为确定模块包括动作细节识别数据确定子模块、动作匹配处理子模块和预警子模块；其中，

所述动作细节识别数据确定子模块用于对所述动作数据集合进行关于六自由度的动作姿态提取处理，以此获得所述封样形成过程对应的动作细节识别数据；

所述动作匹配处理子模块用于对所述动作细节识别数据与预设动作合规/违规判断模型进行所述动作匹配处理，以确定所述动作细节识别数据中的封样合规动作存在状态和封样违规动作存在状态；

所述预警子模块用于根据所述封样合规动作存在状态和所述封样违规动作存在状态，对所述封样形成过程中的封样行为安全性进行预警处理。

相比于现有技术，该基于图像处理与射频技术的封样方法及装置通过在封样形成过程中分别获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据、和关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此形成相应的第一识别信息和第二识别信息，再根据该第一识别信息和第二识别信息构建该封样形成过程中封样相关人员的动作数据集合，最后对该动作数据集合进行预定模式的动作匹配处理，以此确定该封样形成过程中存在的违规动作行为；可见，该基于图像处理与射频技术的封样方法及装置通过图像监控和射频监控相结合的方式对样品的封样形成过程进行实时的和智能化的监控，并从图像监控和射频监控得到的数据信息中识别出封样处理对应的封样动作信息，以及对该封样动作信息进行违规与否的判断处理，从而对封样处理的每一个工序进行细节化和无人化的识别分析处理，从而有效地提高对封样处理过程中违规动作行为的监控识别有效性和准确性，以及同时提高封样处理过程的信息保密性。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

附图说明

图1为本发明提供的一种基于图像处理与射频技术的封样方法的流程示意图。

图2为本发明提供的一种基于图像处理与射频技术的封样装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

参阅图1，为本发明实施例提供的一种基于图像处理与射频技术的封样方法的流程示意图。该基于图像处理与射频技术的封样方法包括如下步骤：

步骤S1，在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据，以此确定第一识别信息；

步骤S2，在该封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此确定第二识别信息；

步骤S3，根据该第一识别信息和该第二识别信息，构建该封样形成过程中封样相关人员的动作数据集合；

步骤S4，对该动作数据集合进行预定模式的动作匹配处理，以此确定该封样形成过程中存在的违规动作行为。

优选地，在该步骤S1中，在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据，以此确定第一识别信息具体包括，

步骤S101，获取该封样形成过程对应的封样形成环境状态和/或封样相关人员分布状态，以此确定相应的图像数据采集模式；

步骤S102，根据该图像数据采集模式，对该封样形成过程执行相应的单目视觉图像采集操作和/或多目视觉图像采集操作，以此采集得到关于封样本身和/或封样相关人员的该动态图像数据和/或该静态图像数据；

步骤S103，对该动态图像数据和/或该静态图像数据进行图像帧解析处理，以此获得关于封样本身和/或封样相关人员状态变化的该第一识别信息，其中，获得关于封样本身的第一识别信息具体包括

A、根据该图像帧解析处理，获得m帧图像信息集合S，S＝{K

B、根据下面公式，计算每一帧图像对应的变化信息量

在上述公式中，Δ(i,i+1)为第i帧图像与第i+1帧图像之间的变化信息量，F

C、根据下面公式计算得到该第一识别信息

f＝{δ

在上述公式中，f为第一识别信息，δ

在上述公式中，F

通过上述获取第一识别信息的过程，不仅可以确定状态变化信息，而且可以定位到哪一帧到哪一帧之间发生了变化，同时计算变化量的计算公式只要相邻帧的特征向量发生了变化就会被计算出来，进而被所述第一识别信息记录下来。

优选地，在该步骤S2中，在该封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据，以此确定第二识别信息具体包括，

步骤S201，获取封样对应的射频标签的标签布置状态信息和/或射频工作参数信息，并根据该标签布置状态信息和/或该射频工作参数信息，确定相应的射频相关数据采集模式；

步骤S202，根据该射频相关数据采集模式，对该封样形成过程执行相应的射频标签实体监控操作和/或射频标签信号监控操作，以此采集得到关于射频标签工作的该射频标签物理状态数据和/或该射频标签信号状态数据；

步骤S203，对该射频标签物理状态数据和该射频标签信号状态数据分别进行标签物理属性解析处理和射频信号解析处理，以此获得关于该射频标签状态变化的第二识别信息。

优选地，在该步骤S3中，根据该第一识别信息和该第二识别信息，构建该封样形成过程中封样相关人员的动作数据集合具体包括，

步骤S301，从该第一识别信息和该第二识别信息中，分别提取关于该封样形成过程的封样自身定标特征、相关人员定标特征和射频标签定标特征；

步骤S302，根据该封样自身定标特征、该相关人员定标特征和射频标签定标特征，确定该封样形成过程对应的封样变化评判模型；

步骤S303，根据该封样变化评判模型，对该封样形成过程中相对应的封样形成图像集合进行摘选处理和图像内容处理，以此构建该封样相关人员的动作数据集合。

优选地，在该步骤S4中，对该动作数据集合进行预定模式的动作匹配处理，以此确定该封样形成过程中存在的违规动作行为具体包括，

步骤S401，对该动作数据集合进行关于六自由度的动作姿态提取处理，以此获得该封样形成过程对应的动作细节识别数据；

步骤S402，对该动作细节识别数据与预设动作合规/违规判断模型进行该动作匹配处理，以确定该动作细节识别数据中的封样合规动作存在状态和封样违规动作存在状态；

步骤S403，根据该封样合规动作存在状态和该封样违规动作存在状态，对该封样形成过程中的封样行为安全性进行预警处理。

参阅图2，为本发明实施例提供的一种基于图像处理与射频技术的封样装置的结构示意图。该基于图像处理与射频技术的封样装置包括封样图像数据获取模块、第一识别信息确定模块、射频标签相关数据获取模块、第二识别信息确定模块、动作数据集合构建模块和违规动作行为确定模块；其中，

该封样图像数据获取模块用于在封样形成过程中，获取关于封样本身和/或封样相关人员的动态图像数据和/或静态图像数据；

该第一识别信息确定模块用于根据该动态图像数据和/或该静态图像数据，确定第一识别信息；

该射频标签相关数据获取模块用于在该封样形成过程中，获取关于封样的射频标签物理状态数据和/或射频标签信号状态数据；

该第二识别信息确定模块用于根据该射频标签物理状态数据和/或该射频标签信号状态数据，确定第二识别信息；

该动作数据集合构建模块用于根据该第一识别信息和该第二识别信息，构建该封样形成过程中封样相关人员的动作数据集合；

该违规动作行为确定模块用于对该动作数据集合进行预定模式的动作匹配处理，以此确定该封样形成过程中存在的违规动作行为。

优选地，该封样图像数据获取模块包括图像数据采集模式确定子模块和图像数据采集子模块；其中，

该图像数据采集模式确定子模块用于根据该封样形成过程对应的封样形成环境状态和/或封样相关人员分布状态，确定相应的图像数据采集模式；

该图像数据采集子模块用于根据该图像数据采集模式，对该封样形成过程执行相应的单目视觉图像采集操作和/或多目视觉图像采集操作，以此采集得到关于封样本身和/或封样相关人员的该动态图像数据和/或该静态图像数据；

该第一识别信息确定模块用于对该动态图像数据和/或该静态图像数据进行图像帧解析处理，以此获得关于封样本身和/或封样相关人员状态变化的该第一识别信息。

优选地，该射频标签相关数据获取模块包括射频相关数据采集模式确定子模块和射频相关数据采集子模块；其中

该射频相关数据采集模式确定子模块用于根据封样对应的射频标签的标签布置状态信息和/或射频工作参数信息，并根据该标签布置状态信息和/或该射频工作参数信息，确定相应的射频相关数据采集模式；

该射频相关数据采集子模块用于根据该射频相关数据采集模式，对该封样形成过程执行相应的射频标签实体监控操作和/或射频标签信号监控操作，以此采集得到关于射频标签工作的该射频标签物理状态数据和/或该射频标签信号状态数据；

该第二识别信息确定模块用于对该射频标签物理状态数据和该射频标签信号状态数据分别进行标签物理属性解析处理和射频信号解析处理，以此获得关于该射频标签状态变化的第二识别信息。

优选地，该动作数据集合构建模块包括封样定标提取子模块、封样变化评判模型确定子模块和动作数据集合生成子模块；其中，

该封样定标提取子模块用于从该第一识别信息和该第二识别信息中，分别提取关于该封样形成过程的封样自身定标特征、相关人员定标特征和射频标签定标特征；

该封样变化评判模型确定子模块用于根据该封样自身定标特征、该相关人员定标特征和射频标签定标特征，确定该封样形成过程对应的封样变化评判模型；

该动作数据集合生成子模块用于根据该封样变化评判模型，对该封样形成过程中相对应的封样形成图像集合进行摘选处理和图像内容处理，以此生成该封样相关人员的动作数据集合。

优选地，该违规动作行为确定模块包括动作细节识别数据确定子模块、动作匹配处理子模块和预警子模块；其中，

该动作细节识别数据确定子模块用于对该动作数据集合进行关于六自由度的动作姿态提取处理，以此获得该封样形成过程对应的动作细节识别数据；

该动作匹配处理子模块用于对该动作细节识别数据与预设动作合规/违规判断模型进行该动作匹配处理，以确定该动作细节识别数据中的封样合规动作存在状态和封样违规动作存在状态；

该预警子模块用于根据该封样合规动作存在状态和该封样违规动作存在状态，对该封样形成过程中的封样行为安全性进行预警处理。

从上述实施例的内容可知，该基于图像处理与射频技术的封样方法及装置通过图像监控和射频监控相结合的方式对样品的封样形成过程进行实时的和智能化的监控，并从图像监控和射频监控得到的数据信息中识别出封样处理对应的封样动作信息，以及对该封样动作信息进行违规与否的判断处理，从而对封样处理的每一个工序进行细节化和无人化的识别分析处理，从而有效地提高对封样处理过程中违规动作行为的监控识别有效性和准确性，以及同时提高封样处理过程的信息保密性。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。