置物检测方法、装置以及智能柜

技术领域

本申请涉及智能柜技术领域，具体而言，本申请涉及一种置物检测方法和装置，智能柜，计算机设备以及计算机可读存储介质。

背景技术

随着电商行业发展，智能化技术应用也越来越广，智能柜得到广泛应用，智能柜是一种智能化的置物柜，其通过相应的检测技术和智能处理技术结合到置物柜中，以实现通过平台远程对置物柜上的进出物品进行管理。

例如在外卖领域中，以智能取餐柜等设备为例，智能柜一般是部署在相对狭小空间内，基于智能柜相关使用规范约束，为了识别智能取餐柜的柜格是否置物时，一般是在每一个柜格的格口安装一个传感器，传感器通过检查柜格的实时数据，传输给后台系统进行处理，从而实现智能识别目的，然而随着柜格格口的增加，传感器的使用也相应增加，而大量增加的传感器成本也增加了智能柜的设备成本，影响了智能柜的推广使用。

发明内容

为了解决上述技术缺陷之一，本申请提供了一种置物检测方法和装置，智能柜，计算机设备以及计算机可读存储介质。

该技术方案如下所示：

第一方面：

一种置物检测方法，包括如下步骤：

获取智能柜的置物架的实时图像；

确定所述实时图像中置物架上放置物品的物品图像；

根据所述物品图像在所述实时图像中的相对位置计算所述物品图像对应在置物架平面上的位置参数；

根据所述位置参数确定所述放置的物品在置物架中的柜格位置。

在一个实施例中，所述确定所述实时图像中置物架上放置物品的物品图像，包括：

计算所述置物架的预存图像与所述实时图像的差值图像，根据所述差值图像确定所述实时图像中置物架上放置物品的物品图像；其中，所述预存图像为置物架在空置状态下获取的图像。

在一个实施例中，所述确定所述实时图像中置物架上放置物品的物品图像，包括：

根据预存的特征图像对所述实时图像进行图像识别，将包含所述特征图像的图像区域确定为物品图像。

在一个实施例中，根据所述位置参数确定所述放置的物品在置物架中的柜格位置，包括：

根据所述位置参数在预设的查询表查找与该位置参数相对应的柜格位置，得到所述放置物品在置物架中的柜格位置；其中，所述预设的查询表记录各个柜格位置及其对应的位置参数。

在一个实施例中，所述获取智能柜的置物架的实时图像，包括：

分别读取设于所述置物架两侧的摄像头拍摄置物架的第一实时图像和第二实时图像；

所述确定所述实时图像中置物架上放置物品的物品图像，包括：

分别确定所述第一实时图像和第二实时图像中置物架上放置物品的物品图像；

所述根据所述物品图像在所述实时图像中的相对位置计算所述物品图像对应在置物架平面上的位置参数，包括：

分别确定所述物品图像在所述第一实时图像中的第一位置以及在所述第二实时图像中的第二位置；

根据所述第一位置与第一顶角之间连线确定所述物品图像对应在置物架平面上相对于顶边的第一角度，根据所述第二位置与第二顶角之间连线确定所述物品图像对应在置物架平面上相对于顶边的第二角度。

所述根据所述位置参数确定所述放置的物品在置物架中的柜格位置，包括：

根据所述第一顶角坐标和第一角度以及第二顶角坐标和第二角度计算所述物品图像对应在置物架平面上的位置坐标；并根据所述位置坐标确定柜格位置。

在一个实施例中，根据所述第一顶角坐标和第一角度，以及第二顶角坐标和第二角度计算所述物品图像对应在置物架平面上的位置坐标，包括：

其中：

式中，(x1，y1)为第一顶角坐标，(x2，y2)为第二顶角坐标；第一角度为∠a，第二角度为∠b，所述物品图像对应在置物架平面上的位置坐标为(x3，y3)。

在一个实施例中，所述查询表分别记录各个柜格位置及其对应的第一角度为∠a和第二角度为∠b的角度范围。

在一个实施例中，所述的方法还包括：

接收平台转发的订单数据；

根据所述订单数据从所述置物架中选择目标柜格位置，将所述目标柜格位置发送反馈至所述平台；其中，所述平台将所述目标柜格位置发送至放餐员客户端；

对所述实时图像中所述目标柜格位置进行检测，当所述目标柜格位置放置物品时，向所述平台反馈通知消息；其中，所述平台将所述通知消息发送至取餐员客户端。

在一个实施例中，所述根据所述订单数据从所述置物架中选择目标柜格位置，包括：

获取一时段内各个柜格位置的平均使用率；

根据所述平均使用率对各个规格位置进行使用率排序；

依据所述使用率排序选择目标规格位置。

第二方面：

一种置物检测装置，包括：

实时图像获取模块，用于获取智能柜的置物架的实时图像；

物品图像确定模块，用于确定所述实时图像中置物架上放置物品的物品图像；

位置参数计算模块，用于根据所述物品图像在所述实时图像中的相对位置计算所述物品图像对应在置物架平面上的位置参数；

柜格位置确定模块，用于根据所述位置参数确定所述放置的物品在置物架中的柜格位置。

第三方面：

一种智能柜，包括：用于放置物品的置物架，分别安装在所述置物架设定位置处的至少两个摄像头，以及后台系统；所述后台系统连接平台；

所述摄像头用于拍摄置物架的实时图像；

所述后台系统用于与所述平台进行信息交互，并执行上述的置物检测方法。

第四方面：

一种计算机设备，其包括：

一个或多个处理器；

存储器；

一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于：执行上述的方法。

第五方面：

一种计算机可读存储介质，所述存储介质存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如上述的方法。

本申请提供的技术方案带来的有益效果是：

首先获取智能柜的置物架的实时图像，以确定实时图像中置物架上放置物品的物品图像；然后根据物品图像在实时图像中的位置计算物品图像对应在置物架平面上的相对位置参数，最后根据相对位置参数确定放置的物品在置物架中的柜格位置。该技术方案，通过置物架的实时图像来识别出放置物品的物品图像，然后再计算出物品图像在置物架平面上的相对位置参数，从而依据该参数来确定柜格位置，可以识别出物品在置物柜上进出状态，从而降低了智能柜的设备成本，促进了智能柜的推广使用。

进一步的，利用预设的查询表记录各个柜格位置及其对应的位置参数，在后续检测中，可以根据确定的位置参数直接在查询表中查找出对应的柜格位置；通过查表方式得到柜格位置，从而减少了计算量，提升置物检测速度。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍。

图1是一个实施例的置物检测方法的流程图；

图2是另一个实施例的置物检测方法的流程图；

图3是摄像头安装示意图；

图4是置物架平面示意图；

图5是一个实施例的柜格位置定位应用示例图；

图6是一个实施例的置物检测装置结构示意图；

图7是智能柜结构示意图；

图8是一个实施例的计算机设备结构示意图。

具体实施方式

下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本申请的限制。

本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。

为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。

本申请所指的智能柜，可以包括带门的智能货柜、不带门的智能货架或者其他各种衍生柜/架等；置物检测主要是指检测是否有放置物体，本申请可以采用摄像头方式来获取实时图像，结合置物检测方法来检测置物，在使用了该置物检测方法后，可以降低智能柜随着柜格数新增而需要增加传感器的成本。

参考图1，图1是一个实施例的置物检测方法的流程图，该方案可以应用于智能柜的后台系统上，包括如下步骤：

S110，获取智能柜的置物架的实时图像。

此步骤中，在使用过程中，获取智能柜的置物架的实时图像，对于获取实时图像的方案，可以由智能柜的后台系统控制摄像头拍摄智能柜的置物架的实时图像。

对于拍摄角度可以根据实际需求设置，由于需要通过摄像头来拍摄实时图像，基于智能柜的部署场景限制，一般可以利用在智能柜侧边的摄像头来进行拍摄，摄像头与置物架平面会有一个夹角，即摄像头的视觉角度。

S120，确定所述实时图像中置物架上放置物品的物品图像。

此步骤中，在置物架上放置物品时，通过对实时图像进行图像分析，确定实时图像中该物品对应的物品图像，对于图像分析方法，对于识别物品图像的方法，下面提供两个实施例：

方法一：计算置物架的预存图像与实时图像的差值图像，根据差值图像确定实时图像中置物架上放置物品的物品图像，预存图像为置物架在空置状态下获取的图像。

本实施例中，利用差值法，通过状态变化前后的图像部分来确定物品图像，具体的，在置物架空置状态下拍摄参考图像，然后在使用过程中，通过实时拍摄实时图像，将实时图像与参考图像进行作差得到差值图像，通过差值图像可以确定相对于参考图像，变换的区域为放置了物品图像，结合物品的外部轮廓形状可以判定出物品图像。

方法二：根据预存的特征图像对实时图像进行图像识别，将包含特征图像的图像区域确定为物品图像。

本实施例中，利用图像特征识别，直接识别某些固有特征的物品图像，从而确定物品图像，具体的，针对于一些物品具有统一的外包装情况下，通过对实时图像的图像特征进行识别，当识别到某些预定图像特征时，即可确定为物品图像，例如，在放置外卖餐品都使用统一外包装时，通过对图像中包含外包装特征部分图像进行识别，从而可以确定到实时图像中包含的物品图像。

S130，根据所述物品图像在所述实时图像中的相对位置计算所述物品图像对应在置物架平面上的位置参数。

此步骤中，通过确定物品图像后，利用物品图像在实时图像中的相对位置，计算出实际物品图像对应在置物架平面上的相对位置参数。

由于摄像头拍摄的实时图像具有一定的拍摄角度，当需要确定物品图像在置物架平面上的位置参数时，需要对图像进行角度转换为置物架平面坐标系上的坐标参数；比如，要将实时图像上的物品图像的坐标转换到置物架平面坐标系上的坐标，根据拍摄角度可以得到一个矢量参数，利用该矢量参数处理实时图像，得到置物架平面坐标系上的坐标。

S140，根据所述位置参数确定所述放置的物品在置物架中的柜格位置。

此步骤中，根据实际图像中确定下来的物品图像在置物架平面坐标系上的坐标参数，从而可以映射为实际的放置的物品在置物架中的柜格位置，实现了置物位置检测。

本实施例的技术方案，通过置物架的实时图像来识别出放置物品的物品图像，然后再计算出物品图像在置物架平面上的相对位置参数，从而依据该参数来确定柜格位置，可以识别出物品在置物柜上进出状态，从而降低了智能柜的设备成本，促进了智能柜的推广使用。

在一个实施例中，在智能柜设置好相应的柜格位置后，柜格位置对应的位置参数是不变的，为了降低数据计算量，提高置物检测速度，可以先利用预设的查询表来记录各个柜格位置及其对应的位置参数，可以先通过计算各个柜格位置所对应的位置参数，然后记录到表格中，在后续使用时，可以根据确定的位置参数，直接查表得到的柜格位置；据此，在根据位置参数确定放置的物品在置物架中的柜格位置时，根据位置参数在查询表中查找与该位置参数对应的柜格位置，即可得到放置物品在置物架中的柜格位置，上述技术方案，通过查表方式即可得到柜格位置，实现过程简单快捷。

为了更加清晰本申请的技术方案，下面阐述置物检测方法另一个实施例。参考图2，图2是另一个实施例的置物检测方法的流程图；该实施例中，是在置物架两侧安装的摄像头来实现，需要说明的是，实际应用中，可以设置更多数量摄像头来实现，本实施例是以两个摄像头为例进行阐述，该方案主要包括如下：

S210，分别读取设于所述置物架两侧的摄像头拍摄置物架的第一实时图像和第二实时图像。

本实施例中，对应于上述步骤S110的获取智能柜的置物架的实时图像过程，在置物架两侧安装摄像头来拍摄实时图像，对于摄像头位置，参考图3所示，图3是摄像头安装示意图；图中是从置物柜正面视觉的示意图，虚线框内为柜格位置编号1-32，结合了目前智能柜一般是部署在相对狭小空间内，而且智能柜需要符合消防、安全等相关使用规范约束，摄像头可以设于置物柜两侧顶角位置；为了减少遮挡等影响，优选的，还可以在置物柜底部或者顶部增加摄像头，从而避免两侧摄像头被遮挡情况。

S220，分别确定所述第一实时图像和第二实时图像中置物架上放置物品的物品图像。

本实施例中，对应于上述步骤S120的确定物品图像的过程，分别确定各个实时图像中的物品图像。

S230，分别确定所述物品图像在所述第一实时图像中的第一位置以及在所述第二实时图像中的第二位置。

此步骤中，通过对实时图像中的物品图像进行识别后，可以确定各个放置物品的物品图像在实时图像中的位置，分别确定其在实时图像中的位置坐标。

S240，根据所述第一位置与第一顶角之间连线确定所述物品图像对应在置物架平面上相对于顶边的第一角度，根据所述第二位置与第二顶角之间连线确定所述物品图像对应在置物架平面上相对于顶边的第二角度。

此步骤中，对于任意一个放置物品的物品图像，由于摄像头拍摄角度是固定的，而且相对于置物柜平面而言是具有一定拍摄角度，因此，根据摄像头安装时的拍摄角度可以转换成置物架平面上的角度，在各个实时图像当中确定任意一个物品图像相对于顶边的角度。

参考图4，图4是置物架平面示意图；图中第一摄像头和第二摄像头分别在置物柜两侧，图中假设柜格位置12和19是放入了物品的柜格位置，根据识别出来左右两侧的摄像头拍摄实时图像中的物品图像，连线可以得到第一角度为∠a和第二角度为∠b。

S250，根据所述第一顶角坐标和第一角度以及第二顶角坐标和第二角度计算所述物品图像对应在置物架平面上的位置坐标；并根据所述位置坐标确定柜格位置。

此步骤中，由于两个摄像头拍摄的实时图像的角度不同，在物品图像在实时图像中的产生了变形，而角度是基本不变的，因此通过利用拍摄到置物架上物品图像第一角度∠a和第二角度∠b，在置物架平面上通过两个实时图像中不同的角度即可确定交点的位置坐标，利用这个交点的位置坐标可以而求得物品在置物架上具体柜格位置。

本实施例中，对于柜格位置的计算方案，可以采用如下公式：

其中：

式中，(x1，y1)为第一顶角坐标，(x2，y2)为第二顶角坐标；第一角度为∠a，第二角度为∠b，所述物品图像对应在置物架平面上的位置坐标为(x3，y3)；如上通过计算得到位置坐标(x3，y3)即为放置物品在置物架平面上的位置。

在一个实施例中，如上所述，如果采用查表方法来确定柜格位置时，具体可以如下，参考下表，查询表为二维表格，其中，查询表的行列记录第一角度为∠a和第二角度为∠b，表格中记录∠a和∠b对应的柜格位置；如表格所示：

如上表所示，a1-a32，b1-b32是指角度范围值，分别与柜格位置编号对应，例如，如图3中，32号柜格位置对应的角度范围a32可以为[37°,42°]，b32可以为[80°,87°]，当确定角度落入∠a和∠b的角度范围时，通过查表即可得到是32号柜格位置；其他柜格位置对应的∠a和∠b的角度范围，可以根据实际计算得到，在此不再一一举例。

基于本申请提供的置物检测方法，其可以为智能柜对放置物品的柜格位置检测提供了成本更低的技术方案，采用该技术方案能够明显减少了智能柜的设备成本，同时，对于智能柜而言，即使其柜格数量增加也无需对设备进行改造。

在一个实施例中，采用本申请提供的置物检测方法，可以在外卖场景中使用的智能柜上实现智能定位效果；下面将阐述一个相关实施例，参考图5所示，图5是一个实施例的柜格位置定位应用示例图，具体包括如下：

A.智能柜的后台系统接收平台转发的订单数据。

具体的，当用户下单后，平台将订单数据转发到智能柜，智能柜的后台系统会对订单数据进行分析处理。

B.智能柜的后台系统根据订单数据从置物架中选择目标柜格位置，将目标柜格位置发送反馈至所述平台，平台将目标柜格位置发送至放餐员客户端。

对于选择目标柜格位置的方案，可以获取一时段内各个柜格位置的平均使用率，根据所述平均使用率对各个规格位置进行使用率排序，然后依据使用率排序选择目标规格位置；通过使用率统计，可以充分利用置物柜的柜格位置来放置物品，提高应用效果。

具体的，选择目标柜格位置后，放餐员根据客户端上的位置检测信息可以将外卖放置到指定的柜格位置，同样取餐员可以根据客户端上的位置检测信息到对应的柜格位置取餐。

C.智能柜的后台系统对实时图像中所述目标柜格位置进行检测，当目标柜格位置放置物品时，向平台反馈通知消息，平台将通知消息发送至取餐员客户端。

具体的，当指定柜格位置放置了外卖物品时，智能柜能够及时检测出并与对应订单数据结合，将消息反馈至取餐员的客户端，取餐员可以快速地到指定柜格位置取餐，通过这种方式可以便于取餐员快速地找到对应订单数据的外卖物品，无需在智能柜上寻找所配送订单的外卖物品，提升了配送效率

下面阐述本申请一种置物检测装置的实施例。

本申请提供的置物检测装置，参考图6所示，图6是一个实施例的置物检测装置结构示意图，包括：

实时图像获取模块110，用于获取智能柜的置物架的实时图像；

物品图像确定模块120，用于确定所述实时图像中置物架上放置物品的物品图像；

位置参数计算模块130，用于根据所述物品图像在所述实时图像中的相对位置计算所述物品图像对应在置物架平面上的位置参数；

柜格位置确定模块140，用于根据所述位置参数确定所述放置的物品在置物架中的柜格位置。

本实施例的置物检测装置，通过置物架的实时图像来识别出放置物品的物品图像，然后再计算出物品图像在置物架平面上的相对位置参数，从而依据该参数来确定柜格位置，可以识别出物品在置物柜上进出状态，从而降低了智能柜的设备成本，促进了智能柜的推广使用。

本申请的置物检测装置与置物检测方法一一对应，在上述置物检测方法实施例中的技术特征及其技术效果均适应于置物检测装置实施例中，特此声明。

下面阐述智能柜的实施例。

本申请提供的智能柜，参考图7所示，图7是智能柜结构示意图，包括：用于放置物品的置物架，分别安装在置物架设定位置处的至少两个摄像头，以及后台系统，后台系统连接平台，如外卖平台等电商平台；摄像头用于拍摄置物架的实时图像；后台系统用于与平台进行信息交互，并执行上述任意实施例的置物检测方法。

本申请的智能柜，通过置物架的实时图像来识别出放置物品的物品图像，然后再计算出物品图像在置物架平面上的相对位置参数，从而依据该参数来确定柜格位置，可以识别出物品在置物柜上进出状态，从而降低了智能柜的设备成本，适宜推广使用。

下面阐述本申请的计算机设备及计算机设备存储介质的实施例。

本申请的实施例中提供的计算机设备，该计算机设备可以包括但不限于：处理器和存储器；其中，存储器，用于存储计算机操作指令；处理器，用于通过调用计算机操作指令执行实施例中应用于设备上的置物检测、认证及数据传输方法。

与现有技术相比，本申请中的计算机设备，通过置物架的实时图像来识别出放置物品的物品图像，然后再计算出物品图像在置物架平面上的相对位置参数，从而依据该参数来确定柜格位置，可以识别出物品在置物柜上进出状态，从而降低了智能柜的设备成本，适宜推广使用。

如图8所示，图8是一个实施例的计算机设备结构示意图，该计算机设备包括：处理器801和存储器803。其中，处理器801和存储器803相连，如通过总线802相连。可选地，计算机设备800还可以包括收发器804。

需要说明的是，实际应用中收发器804不限于一个，该计算机设备800的结构并不构成对本申请实施例的限定。

处理器801可以是CPU(Central Processing Unit，中央处理器)，通用处理器，DSP(Digital Signal Processor，数据信号处理器)，ASIC(Application SpecificIntegrated Circuit，专用集成电路)，FPGA(Field Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器801也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。

总线802可包括一通路，在上述组件之间传送信息。总线802可以是PCI(Peripheral Component Interconnect，外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture，扩展工业标准结构)总线等。总线802可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

存储器803可以是ROM(Read Only Memory，只读存储器)或可存储静态信息和指令的其他类型的静态存储设备，RAM(Random Access Memory，随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM(Electrically ErasableProgrammable Read Only Memory，电可擦可编程只读存储器)、CD-ROM(Compact DiscRead Only Memory，只读光盘)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。

存储器803用于存储执行本申请方案的应用程序代码，并由处理器801来控制执行。处理器801用于执行存储器803中存储的应用程序代码，以实现前述方法实施例所示的内容。

其中，计算机设备包括但不限于：移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图8示出的计算机设备仅仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。

下面阐述本申请的计算机可读存储介质的实施例。

本申请提供的计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，当其在计算机上运行时，使得计算机可以执行前述方法实施例中相应内容。

应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

需要说明的是，本申请上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。

上述计算机可读介质可以是上述计算机设备中所包含的；也可以是单独存在，而未装配入该计算机设备中。

上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该计算机设备执行时，使得该计算机设备执行上述实施例所示的方法。

可以以一种或多种程序设计语言或其组合来编写用于执行本申请的操作的计算机程序代码，上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

附图中的流程图和框图，图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本申请实施例中所涉及到的模块可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，模块的名称在某种情况下并不构成对该模块本身的限定。

以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本申请中所涉及的公开范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述公开构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。