一种异常件视频追踪方法以及系统

技术领域

本发明涉及快递技术领域，尤其涉及一种异常件视频追踪方法以及系统。

背景技术

随着网购、代运等逐渐普及到社会各个方面，随之带动了快递行业快速发展。随着快递数量逐渐增多，快递在运输过程中各种异常情况也频繁的发生，例如超快递送达时效、快递丢失以及快递破损等异常情况，若不能及时找出异常原因，会出现客户投诉快递公司的情况，从而降低快递公司口碑，甚至出现大量客户流失的情况。快递公司在追查快递出现异常情况时，通常采用查看快递在分拣过程中的监控视频的方式进行追查。

目前，基于现有技术的限制，快递公司工作人员在追查异常件时，通过肉眼查看大量的视频监控，从中追查异常原因。然而这种传统的追查方式不仅需要花费大量的时间，还因为人工查看图片或视频时容易产生疲劳，导致查询精度和时效都较差。并且当追查异常件数目较多时，快递公司还需要投入大量的人力。

发明内容

(一)要解决的技术问题

鉴于现有技术的上述缺点、不足，本发明提供一种异常件视频追踪方法以及系统，其解决如何从众多监控视频中筛选出异常件出现时的监控片段并对异常件进行自动追踪的技术问题。

(二)技术方案

为了达到上述目的，本发明采用的主要技术方案包括：

第一方面，本发明实施例提供一种异常件视频追踪方法，其包括：

获取异常件在快递分拣区域的扫描信息；

根据所述扫描信息，向预先设置的数据库调取异常件出现时的图像和监控视频片段；

根据从所述异常件图像中提取到的异常件的特征值，对所述监控视频片段中的异常件进行追踪，得到异常件的追踪视频片段；

将多个追踪视频片段按照异常件出现的时间先后顺序进行拼接和在每两个追踪视频片段之间插入提醒片段，并将得到异常件追踪视频与异常信息一起发送到用户端；

异常件为具有包含丢失信息、破损信息以及超时信息中的一种或多种异常信息的快递件。

可选地，获取异常件在快递分拣区域的扫描信息之前，还包括：

通过设置在快递分拣区域各个位置上的扫码设备扫描快递二维码和中转包二维码，并将获取的扫描信息储存在数据库中；

通过设置在快递分拣区域各个位置上的摄像设备采集快递和中转包在各个位置上的图像和监控视频，并将采集到图像和监控视频储存在数据库中；

其中，所述扫描信息包括：位置信息和时间信息。

可选地，获取异常件在快递分拣区域的扫描信息包括：

获取异常件的快递单号；

根据所述快递单号，确定异常件的快递二维码和中转包二维码；

判断数据库是否有异常件的中转包二维码的扫描信息；

如果数据库没有异常件的中转包二维码的扫描信息时，则将异常件未进入快递分拣区域的信息发送到用户端；

如果数据库有异常件的中转包二维码的扫描信息时，则将所有异常件的快递二维码和中转包二维码的扫描信息从数据库调取取出。

可选地，根据所述扫描信息，向预先设置的数据库调取异常件出现时的图像和监控视频片段包括：

从所述扫描信息中，获取异常件在每一位置出现的时间点和时间段；

根据所述时间点，向数据库调取该时间点异常件在对应位置的快递图像或中转包图像；

根据所述时间段，向数据库调取该时间段异常件在对应位置的监控视频片段。

可选地，根据从所述异常件图像中提取到的异常件的特征值，对所述监控视频片段中的异常件进行追踪，得到异常件的追踪视频片段包括：

获取异常件出现在快递分拣区域每一位置上的异常件图像和与之对应的监控视频片段；

从每一所述异常件图像中提取异常件的特征值；

根据所述特征值，对所述监控视频片段的每一帧监控图像中的所有快递进行识别，将识别到的异常件进行标注；

每一帧监控图像中的异常件在完成标注之后，在每一监控视频片段的一侧插入与之对应的异常件的图像，得到异常件的追踪视频片段；

其中，特征值包括：颜色和形状。

可选地，将多个追踪视频片段按照异常件出现的时间先后顺序进行拼接和在每两个追踪视频片段之间插入提醒片段，并将得到异常件追踪视频与异常信息一起发送到用户端之前，还包括：

判断每一异常件图像中异常件的特征值与对应监控视频片段的每一帧监控图像中异常件的特征值之差是否小于预设的阈值；

如果小于预设阈值，则判定异常件在该帧监控图像下未发生异常行为；

如果大于预设阈值，则判定异常件在该帧监控图像下发生了异常行为。

可选地，将多个追踪视频片段按照异常件出现的时间先后顺序进行拼接和在每两个追踪视频片段之间插入提醒片段，并将得到异常件追踪视频与异常信息一起发送到用户端包括：

获取多个追踪视频片段的时间信息；

依据所述时间信息，确定多个追踪视频片段的时间先后顺序；

依据所述时间先后顺序，将多个追踪视频进行拼接，得到拼接视频；

在所述拼接视频中每两个追踪视频片段之间插入提醒片段，将得到异常件追踪视频与异常信息一起发送到用户端；

其中，提醒片段为包括纯底色和/或文字提醒视频切换的视频片段。

第二方面，本发明实施例提供一种异常件视频追踪系统，其包括：

扫码设备，设置在快递分拣区域各个位置上，用于扫描流转于各个位置上的快递二维码和中转包二维码；

摄像设备，设置在快递分拣区域各个位置上，用于采集快递和中转包在各个位置上的图像和监控视频；

应用数据库，与扫码设备连接，用于存储扫码设备在扫描快递二维码和中转包二维码时获取的扫描信息；

图像数据库，与摄像设备连接，用于储存摄像设备采集的快递图像和中转包图像；

视频数据库，与摄像头连接，用于存储摄像设备采集监控视频；

服务器，分别与应用数据库、视频数据库以及图像数据库连接，用于执行以上所述的异常件视频追踪方法。

可选地，所述服务器包括：

异常件查询模块，用于在接收到异常件查询信息时，从应用数据库中调取待查询异常件的扫描信息；

图像调取模块，用于在所述扫描信息中获取到的待查询异常件出现的时间点，从图像数据库中调取待查询异常件的快递图像和/或中转包图像；

视频调取模块，用于在所述扫描信息中获取到的待查询异常件出现的时间段，从视频数据库中调取待查询异常件的监控视频片段；

异常件追踪模块，根据从待查询异常件图像中提取到的异常件的特征值，对所述监控视频片段中对异常件进行追踪，得到异常件的追踪视频片段；

异常信息获取模块，用于对每一异常件图像中异常件的特征值与对应监控视频片段的每一帧监控图像中异常件的特征值之差与预设的阈值做对比，获取异常件的异常信息；

视频拼接模块，用于将多个异常件追踪视频片段按照异常件出现的时间先后顺序进行拼接，并在每两个追踪视频片段之间插入视频切换的提醒片段后得到异常件追踪视频；

无线通信模块，用于将唯一的追踪视频片段或者异常件追踪视频与异常信息一起发送到用户端。

可选地，所述异常件查询模块包括：

快递单号获取模块，用于获取待查询异常件的快递单号；

异常件二维码确定子模块，用于根据待查询异常件的快递单号，确定待查询异常件的快递二维码和中转包二维码；

基于扫描信息的判断子模块，用于判断应用数据库是否有待查询异常件的中转包二维码的扫描信息；

基于扫描信息的第一判定子模块，如果数据库没有待查询异常件的中转包二维码的扫描信息时，则将待查询异常件未进入快递分拣区域的信息通过无线通信模块发送到用户端；

基于扫描信息的第二判定子模块，用于如果数据库有待查询异常件的中转包二维码的扫描信息时，则将所有待查询异常件的快递二维码和中转包二维码的扫描信息从数据库调取取出；

所述异常件追踪模块包括：

特征提取子模块，用于提取每一异常件图像中异常件的特征值和提取监控视频片段的每一帧监控图像中异常件的特征值；

异常件追踪子模块，用于根据每一异常件图像中异常件的特征值，对监控视频片段的每一帧监控图像中的所有快递进行识别，将识别到的异常件进行标注；

图像插入子模块，用于每一帧监控图像中的异常件在完成标注之后，在每一异常件追踪视频片段的一侧插入与之对应的异常件的图像，得到异常件的追踪视频片段。

(三)有益效果

本发明的有益效果是：本发明对快递在分拣过程中出现异常情况时，快递公司需要花费大量时间和人力从现场监控视频中查询到出现异常情况的监控片段这一情况进行着重分析，本发明采用一种异常件视频追踪方法，具体包括：首先，根据异常件扫描信息，向数据库调取异常件出现时的异常件图像和监控视频片段；然后，根据从异常件图像中提取的特征值，在监控视频片段中异常件进行追踪，得到异常件的追踪视频片段；最后，将追踪视频片段或多个追踪视频片段按照异常件出现的时间先后顺序进行拼接后与异常信息一起发送给用户。

由此，本发明能大幅度降低快递公司在异常件追查时对人力成本和时间成本的投入。同时，本发明还大大提高了异常件查询精度和查询时效，从而能够及时反馈给用户查看，提升快递口碑。

附图说明

图1为本发明实施例提出的一种异常件视频追踪方法的流程示意图；

图2为本发明实施例提出的一种异常件视频追踪系统的结构示意图。

具体实施方式

为了更好地解释本发明，以便于理解，下面结合附图，通过具体实施方式，对本发明作详细描述。

如图1所示，本发明实施例提出的一种异常件视频追踪方法，包括：首先，获取异常件在快递分拣区域的扫描信息；其次，根据所述扫描信息，向预先设置的数据库调取异常件出现时的图像和监控视频片段；然后，根据从所述异常件图像中提取到的异常件的特征值，对所述监控视频片段中的异常件进行追踪，得到异常件的追踪视频片段；最后，将多个追踪视频片段按照异常件出现的时间先后顺序进行拼接和在每两个追踪视频片段之间插入提醒片段，并将得到异常件追踪视频与异常信息一起发送到用户端；其中，异常件为具有包含丢失信息、破损信息以及超时信息中的一种或多种异常信息的快递件。

本发明对快递在分拣过程中出现异常情况时，快递公司需要花费大量时间和人力从现场监控视频中查询到出现异常情况的监控片段这一情况进行着重分析，本发明采用一种异常件视频追踪方法，具体包括：首先，根据异常件扫描信息，向数据库调取异常件出现时的异常件图像和监控视频片段；然后，根据从异常件图像中提取的特征值，在监控视频片段中异常件进行追踪，得到异常件的追踪视频片段；最后，将追踪视频片段或多个追踪视频片段按照异常件出现的时间先后顺序进行拼接后与异常信息一起发送给用户。

由此，本发明能大幅度降低快递公司在异常件追查时对人力成本和时间成本的投入。同时，本发明还大大提高了异常件查询精度和查询时效，从而能够及时反馈给用户查看，提升快递口碑。

为了更好地理解上述技术方案，下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更清楚、透彻地理解本发明，并且能够将本发明的范围完整的传达给本领域的技术人员。

具体地，本发明提供一种异常件视频追踪方法，其包括：

S1、获取异常件在快递分拣区域的扫描信息。

进一步地，在步骤S1之前还包括：

F11、通过设置在快递分拣区域各个位置上的扫码设备扫描快递二维码和中转包二维码，并将获取的扫描信息储存在数据库中。

F12、通过设置在快递分拣区域各个位置上的摄像设备采集快递和中转包在各个位置上的图像和监控视频，并将采集到图像和监控视频储存在数据库中。

其中，步骤F11中所述的扫描信息包括：位置信息和时间信息。

进一步地，步骤S1包括：

S11、获取异常件的快递单号。

S12、根据快递单号，确定异常件的快递二维码和中转包二维码。

S13、判断数据库是否有异常件的中转包二维码的扫描信息。

S14a、如果数据库没有异常件的中转包二维码的扫描信息时，则将异常件未进入快递分拣区域的信息发送到用户端。

S13b、如果数据库有异常件的中转包二维码的扫描信息时，则将所有异常件的快递二维码和中转包二维码的扫描信息从数据库调取取出。

S2、根据所述扫描信息，向预先设置的数据库调取异常件出现时的图像和监控视频片段。

进一步地，步骤S2包括：

S21、从异常件的扫描信息中，获取异常件在每一位置出现的时间点和时间段。

S22、根据异常件在每一位置出现的时间点，向数据库调取该时间点异常件在对应位置的快递图像或中转包图像。

S23、根据异常件在每一位置出现的时间段，向数据库调取该时间段异常件在对应位置的监控视频片段。

S3、根据从所述异常件图像中提取到的异常件的特征值，对所述监控视频片段中的异常件进行追踪，得到异常件的追踪视频片段。

进一步地，步骤S3包括：

S31、获取异常件出现在快递分拣区域每一位置上的异常件图像和与之对应的监控视频片段。

S32、从每一异常件图像中提取异常件的特征值。

S33、根据所述特征值，对所述监控视频片段的每一帧监控图像中的所有快递进行识别，将识别到的异常件进行标注。

S34、每一帧监控图像中的异常件在完成标注之后，在每一监控视频片段的一侧插入与之对应的异常件的图像，得到异常件的追踪视频片段。

其中，步骤S32和步骤S33中提到的异常件的特征值包括：颜色和形状。

S4、将多个追踪视频片段按照异常件出现的时间先后顺序进行拼接和在每两个追踪视频片段之间插入提醒片段，并将得到异常件追踪视频与异常信息一起发送到用户端。

其中，用户端包括用户的移动端、电子邮箱、网络聊天应用中的一种或多种。

进一步地，在步骤S4之前，还包括：

F41、判断每一异常件图像中异常件的特征值与对应监控视频片段的每一帧监控图像中异常件的特征值之差是否小于预设的阈值。

F42a、如果小于预设阈值，则判定异常件在该帧监控图像下未发生异常行为。

F42b、如果大于预设阈值，则判定异常件在该帧监控图像下发生了异常行为。

进一步地，步骤S4包括：

S41、获取多个追踪视频片段的时间信息。

S42、依据所述时间信息，确定多个追踪视频片段的时间先后顺序。

S43、依据所述时间先后顺序，将多个追踪视频进行拼接，得到拼接视频。

S44、在所述拼接视频中每两个追踪视频片段之间插入提醒片段，将得到异常件追踪视频与异常信息一起发送到用户端。

其中，提醒片段为包括纯底色和/或文字提醒视频切换的视频片段。提醒片段的底色可选择为黑色、白色、灰色等颜色中的一种。

在具体实施例中，第一步，查询异常件所属的第一中转包二维码的扫描信息，若没有查询到，则向查询人员发送待查询异常件未进入快递分拣区域的信息；若有查询到，则将异常件在第一中转包时的监控视频片段发送给查询人员，该视频监控片段的起点为第一中转包处的扫码设备扫描第一中转包二维码的时间点，持续到所有快递从第一中转包取出为止。

第二步，查询异常件在分拣机上的扫描信息，若没有查询到，则向查询人员发送异常件在第一中转包时的监控视频片段和“待查询异常件进入快递分拣区域的时间点，与待查询异常件未上机分拣”的信息；若有查询到，则向查询人员发送第一拼接视频(第一段视频片段：起点为第一中转包处的扫码设备扫描第一中转包二维码的时间点，至异常件进入上包台时扫描异常件二维码的时间点；第二段频片段：异常件在进入上包台时前30秒监控视频片段，加上异常件进入上包台后的20秒监控视频片段；第三段频片段：起点为异常件在进入快递分拣小车时扫描的时间点，至异常在分拣环线上全程视频监控片段)，在第一拼接视频中的第一段视频片段与第二段频片段之间，插入包含异常件进入上包台时间信息的黑底色的提醒片段，在第二段视频片段与第三段频片段之间，插入包含异常件进入分拣小车时间信息的黑底色的提醒片段。

第三步，查询异常件在分拣格口的扫描信息，若没有查询到，则向查询人员发送第一拼接视频和“待查询异常件未进入分拣格口”的信息；若有查询到，则将异常件在分拣格口的监控视频片段拼接到第一拼接时候之后，将得到第二拼接视频发送给查询人员。其中，异常件在分拣格口的监控视频片段的起点为分拣格口的扫码设备扫描异常件二维码的时间点，持续到异常件完全进入分拣格口下面的第二中转包为止，且在异常件在分拣格口的监控视频片段与第一拼接视频之间，插入包含异常件进入分拣格口时间信息的黑底色的提醒片段。

第四步，查询异常件所属的第二中转包二维码在代运区域的扫描信息，若没有查询到，则向查询人员发送第二拼接视频和“第二中转包未进入代运区域”的信息；若有查询到，则将第二中转包在代运区域的监控视频片段拼接到第二拼接视频之后，将得到第三拼接视频发送给查询人员。其中，第二中转包在代运区域的监控视频片段的起点为代运区域的扫码设备扫描第二中转包二维码的时间点，持续至第二中转包进入快递运输车为止，且在第二中转包在代运区域的监控视频片段与第二拼接视频之间，插入包含第二中转包进入代运区域时间点信息的黑底色的提醒片段。

第五步，查询异常件所属的第二中转包二维码在快递运输车的扫描信息，若没有查询到，则向查询人员发送第三拼接视频和“第二中转包未进入快递运输车”的信息；若有查询到，则将第二中转包装车时的监控视频片段拼接到第三拼接视频之后，将得到第四拼接视频和“待查询异常件装车转运的时间点”的信息发送给查询人员。其中第二中转包装车时的监控视频片段的起点为快递运输车上扫码设备扫描第二中转包二维码的时间，持续快递运输车装车完成为止，且在第二中转包装车时的监控视频片段与第三拼接视频之间，插入包含第二中转包装车时间信息的黑底色的提醒片段

另一方面，如图2所示，本发明还提供一种异常件视频追踪系统，包括：

扫码设备，设置在快递分拣区域各个位置上，用于扫描流转于各个位置上的快递二维码和中转包二维码；

摄像设备，设置在快递分拣区域各个位置上，用于采集快递和中转包在各个位置上的图像和监控视频；

应用数据库，与扫码设备连接，用于存储扫码设备在扫描快递二维码和中转包二维码时获取的扫描信息；

图像数据库，与摄像设备连接，用于储存摄像设备采集的快递图像和中转包图像；

视频数据库，与摄像头连接，用于存储摄像设备采集监控视频；

服务器，分别与应用数据库、视频数据库以及图像数据库连接，用于以上所述的异常件视频追踪方法。

进一步地，服务器包括：

异常件查询模块，用于在接收到异常件查询信息时，从应用数据库中调取待查询异常件的扫描信息；

图像调取模块，用于在所述扫描信息中获取到的待查询异常件出现的时间点，从图像数据库中调取待查询异常件的快递图像和/或中转包图像；

视频调取模块，用于在所述扫描信息中获取到的待查询异常件出现的时间段，从视频数据库中调取待查询异常件的监控视频片段；

异常件追踪模块，根据从待查询异常件图像中提取到的异常件的特征值，对所述监控视频片段中对异常件进行追踪，得到异常件的追踪视频片段；

异常信息获取模块，用于对每一异常件图像中异常件的特征值与对应监控视频片段的每一帧监控图像中异常件的特征值之差与预设的阈值做对比，获取异常件的异常信息；

视频拼接模块，用于将多个异常件追踪视频片段按照异常件出现的时间先后顺序进行拼接，并在每两个追踪视频片段之间插入视频切换的提醒片段后得到异常件追踪视频；

无线通信模块，用于将唯一的追踪视频片段或者异常件追踪视频与异常信息一起发送到用户端。

进一步地，所述异常件查询模块包括：

快递单号获取模块，用于获取待查询异常件的快递单号；

异常件二维码确定子模块，用于根据待查询异常件的快递单号，确定待查询异常件的快递二维码和中转包二维码；

基于扫描信息的判断子模块，用于判断应用数据库是否有待查询异常件的中转包二维码的扫描信息；

基于扫描信息的第一判定子模块，如果数据库没有待查询异常件的中转包二维码的扫描信息时，则将待查询异常件未进入快递分拣区域的信息通过无线通信模块发送到用户端；

基于扫描信息的第二判定子模块，用于如果数据库有待查询异常件的中转包二维码的扫描信息时，则将所有待查询异常件的快递二维码和中转包二维码的扫描信息从数据库调取取出；

所述异常件追踪模块包括：

特征提取子模块，用于提取每一异常件图像中异常件的特征值和提取监控视频片段的每一帧监控图像中异常件的特征值；

异常件追踪子模块，用于根据每一异常件图像中异常件的特征值，对监控视频片段的每一帧监控图像中的所有快递进行识别，将识别到的异常件进行标注；

图像插入子模块，用于每一帧监控图像中的异常件在完成标注之后，在每一异常件追踪视频片段的一侧插入与之对应的异常件的图像，得到异常件的追踪视频片段。

由此，基于上述描述的技术方案，本发明提供的一种异常件视频追踪方法以及系统，其能在快递在运输过程中出现异常情况时，在不需要大量人员投入的情况下，从众多现场监控视频中截取具有异常件的监控视频片段，并依据从异常件图像中提取的特征值在监控视频片段中对异常件进行追踪，并将追踪视频与异常信息一起发送给用户。其大幅度降低快递公司在异常件追查时对人力成本和时间成本的投入；同时，还大大提高了异常件查询精度和查询时效，从而能够及时反馈给用户查看，提升快递口碑

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例，或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。

应当注意的是，在权利要求中，不应将位于括号之间的任何附图标记理解成对权利要求的限制。词语“包含”不排除存在未列在权利要求中的部件或步骤。位于部件之前的词语“一”或“一个”不排除存在多个这样的部件。本发明可以借助于包括有若干不同部件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的权利要求中，这些装置中的若干个可以是通过同一个硬件来具体体现。词语第一、第二、第三等的使用，仅是为了表述方便，而不表示任何顺序。可将这些词语理解为部件名称的一部分。

此外，需要说明的是，在本说明书的描述中，术语“一个实施例”、“一些实施例”、“实施例”、“示例”、“具体示例”或“一些示例”等的描述，是指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

尽管已描述了本发明的优选实施例，但本领域的技术人员在得知了基本创造性概念后，则可对这些实施例作出另外的变更和修改。所以，权利要求应该解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种修改和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也应该包含这些修改和变型在内。