一种图像前景提取方法及系统

技术领域

本申请涉及图像处理技术领域，具体而言，涉及一种图像前景提取方法及系统。

背景技术

图像处理过程中，常常需要基于图像的前景及背景进行分析及处理，图像前景提取即是对给定的一幅图像，快速、准确的提取感兴趣的目标，以便于更换背景或者做其他的操作，其中，该感兴趣的目标即为图像的前景，它是数字图像处理中的重要操作，也是模式识别和计算机视觉的研究热点。

在图像前景提取过程的实现中，一般采用邻域对比的方式进行处理，即获取同一张图像中不同位置处的灰度值，由于同一张图像中前景与背景之间的灰度差异较大，因此可通过比较一张图像中不同位置处的灰度值的差值，并将灰度值差值进行归属的方式来识别并提取前景，在预设区间内的灰度值差值对应的区域即为前景区域。

然而，通过上述方式提取前景时，当原图像中不同背景区域图像的灰度差异较大时，同一图像中不同位置处的灰度值差值的变化范围较大，进而不利于通过对灰度值差值进行归属的方式来准确提取前景。

发明内容

为了解决前景提取准确性差的问题，本申请提供了一种图像前景提取方法及系统。

本申请的实施例是这样实现的：

本申请实施例的第一方面提供一种像前景提取方法，包括：

将第一图像向第一方向平移第一距离，获得第二图像；

将所述第一图像向与所述第一方向相反的方向平移第二距离，获得第三图像；

对所述第一图像及所述第二图像进行阈值处理，获取第一前景区域图像；对所述第一图像及所述第三图像进行阈值处理，获取第二前景区域图像；

基于所述第一前景区域图像和所述第二前景区域图像，获取所述第一图像的真实前景区域图像。

在一些实施例中，所述第一距离和所述第二距离均根据所述第一图像中待提取的前景区域尺寸决定，且所述第一距离及所述第二距离均大于所述第一图像中待提取的前景区域。

在一些实施例中，所述第一距离及所述第二距离相同。

在一些实施例中，在基于所述第一前景区域图像和所述第二前景区域图像，获取所述第一图像的真实前景区域图像步骤中，进一步包括：

获取所述第一前景区域图像和所述第二前景区域图像的交集区域图像，所述交集区域图像为所述第一图像的真实前景区域图像。

在一些实施例中，在基于所述第一前景区域图像和所述第二前景区域图像，获取所述第一图像的真实前景区域图像步骤中，进一步包括：

获取所述第一前景区域图像和所述第二前景区域图像的交集区域图像；

获取所述第一图像向所述第一方向平移时，所述第一图像第一方向上的边界线外围的第一保留区域图像，和所述第一图像向所述第二方向平移时，所述第一图像第二方向上的边界线外围的第二保留区域图像；

获取所述第一保留区域图像与所述第一前景区域图像的交集，所述第一保留区域图像与所述第一前景区域图像的交集为第一补偿区域图像；获取所述第二保留区域图像与所述第二前景区域图像的交集，所述第二保留区域图像与所述第二前景区域图像的交集为第二补偿区域图像；

获取所述交集区域图像、所述第一补偿区域图像和所述第二补偿区域图像的并集，所述并集为所述第一图像的真实前景区域图像。

在一些实施例中，若所述第一图像为矩形，第一方向为向左或向右水平平移，则所述第一保留区域图像及所述第二保留区域图像的宽度均为第一距离，高度与所述第一图像的高度相同。

在一些实施例中，在对所述第一图像及所述第二图像进行阈值处理步骤中，进一步包括：

差分所述第一图像及所述第二图像，获取第一差分图像；

阈值分割所述第一差分图像后，获得所述第一前景区域图像。

本申请实施例的第二方面提供一种图像前景提取系统，包括：

第一平移模块，用于将第一图像向第一方向平移第一距离，获得第二图像；

第二平移模块，用于将所述第一图像向与所述第一方向相反的方向平移第二距离，获得第三图像；

前景区域获取模块，用于对所述第一图像及所述第二图像进行阈值处理，获取第一前景区域图像；对所述第一图像及所述第三图像进行阈值处理，获取第二前景区域图像；

真实前景区域获取模块，用于基于所述第一前景区域图像和所述第二前景区域图像，获取所述第一图像的真实前景区域图像。

在一些实施例中，在基于所述第一前景区域图像和所述第二前景区域图像，获取第一图像的真实前景区域图像步骤中，所述真实前景区域获取模块还用于：

获取所述第一前景区域图像和所述第二前景区域图像的交集区域图像，所述交集区域图像为所述第一图像的真实前景区域图像。

在一些实施例中，还包括区域图像补偿模块，在基于所述第一前景区域图像和所述第二前景区域图像，获取所述第一图像的真实前景区域图像步骤中，所述区域图像补偿模块用于：

获取所述第一图像向所述第一方向平移时，所述第一图像第一方向上的边界线外围的第一保留区域图像，和所述第一图像向所述第二方向平移时，所述第一图像第二方向上的边界线外围的第二保留区域图像；

还用于获取所述第一保留区域图像与所述第一前景区域图像的交集，所述第一保留区域图像与所述第一前景区域图像的交集为第一补偿区域图像；获取所述第二保留区域图像与所述第二前景区域图像的交集，所述第二保留区域图像与所述第二前景区域图像的交集为第二补偿区域图像；

此时，所述真实前景区域获取模块还用于：

获取所述第一前景区域图像和所述第二前景区域图像的交集，获得交集区域图像；

获取所述交集区域图像、所述第一补偿区域图像和所述第二补偿区域图像的并集，所述并集为所述第一图像的真实前景区域图像。

本申请的有益效果：通过将图像在第一方向平移第一距离及在与第一方向相反的方向平移第二距离后，将分别得到的第二图像及第三图像均与第一图像进行阈值处理，并基于第一前景区域图像和第二前景区域图像，获取第一图像的真实前景区域图像，在此过程中，可将第一图像进行阈值处理的区域范围扩大，有助于精确确定图像前景，进而有效提高了图像中前景提取的准确性。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为根据本申请一些实施例的图像前景提取方法的流程图；

图2为根据本申请一些实施例的图像前景提取方法的工作流程图；

图3为根据本申请一些实施例中通过图像前景提取方法获得的第一前景区域图像示意图；

图4为根据本申请一些实施例中通过图像前景提取方法获得的第二前景区域图像示意图；

图5为根据本申请一些实施例中通过图像前景提取方法获得的交集区域图像示意图；

图6为根据本申请另一些实施例中通过图像前景提取方法获得的第一前景区域图像示意图；

图7为根据本申请另一些实施例中通过图像前景提取方法获得的第二前景区域图像示意图；

图8为根据本申请另一些实施例中通过图像前景提取方法获得的交集区域图像示意图；

图9为根据本申请另一些实施例的图像前景提取方法的流程图；

图10为根据本申请另一些实施例的图像前景提取方法的工作流程图；

图11为根据本申请另一些实施例中通过图像前景提取方法获得的第一图像的真实前景区域图像的示意图；

图12为根据本申请一些实施例中的图像前景提取系统的结构示意图；

图13为根据本申请另一些实施例中的图像前景提取系统的结构示意图；

图14为根据本申请一个或多个实施例的图像前景提取装置的结构示意图。

具体实施方式

为使本申请的目的、实施方式和优点更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，所描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。

需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。

本申请中说明书和权利要求书及上述附图中的术语″第一″、″第二″、″第三″等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。

术语″包括″和″具有″以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

图1为图像前景提取方法的流程图。如图1所示，第一方面，本申请提供一种图像前景提取方法，具体包括以下步骤：

在步骤100中，将第一图像向第一方向平移第一距离，获得第二图像。

在本申请中，第一图像为需要提取前景的图像。在一些实施例中，接收第一图像后，可对二值化后的第一图像进行中值滤波处理，让与周围像素灰度值的绝对差较大的像素改为与周围像素灰度值接近的灰度值，去除那些相对于其邻域像素更亮或更暗的灰度，然后再将处理后的第一图像向第一方向平移第一距离，从而有助于使后续提取前景区域图像的过程更加精准。

其中，第一方向既可以为倾斜方向，也可以为竖直向上、竖直向下、水平向左或者水平向右，当第一图像进行水平移动或者竖直移动时，移动方式简单，且有助于准确移动。第一图像水平移动还是竖直移动，取决于第一图像中前景区域所在的大体位置，以第一图像为矩形为例，当前景区域所在的大体位置所在的区域在第一图像中靠近底边或者顶边处时，则第一方向为向左或者向右；当前景区域所在的大体位置在第一图像中靠近两侧边时，则第一方向为向上或者向下。

在一些实施例中，在确定前景区域所在的大体位置时，可对第一图像在垂直方向进行投影，获取第一图像的投影曲线，并用高斯滤波器对投影曲线进行平滑，定位平滑后投影曲线中的所有波谷点，然后在相应的二值化图中，查找所有波谷点之间最高的连通区域，即可得到第一图像中的前景区域所在的大体位置。然后，即可根据该前景区域所在的大体位置确定第一方向。

需要说明的是，第一距离根据第一图像中待提取的前景区域尺寸决定，当第一图像的尺寸较大时，则第一距离的数值也较大；当第一图像的尺寸相对较小时，则第一距离的数值也较小，且第一距离大于第一图像中待提取的前景区域。

在步骤200中，将第一图像向与第一方向相反的方向平移第二距离，获得第三图像。

其中，第二距离也根据第一图像中待提取的前景区域尺寸决定，且第二距离均大于第一图像中待提取的前景区域。

在一些实施例中，第一距离及第二距离相同，此时可在充分囊括前景区域的基础上减小整个处理量，有助于提高第一图像的移动效率。

在步骤300中，对第一图像及第二图像进行阈值处理，获取第一前景区域图像；对第一图像及第三图像进行阈值处理，获取第二前景区域图像。

需要说明的是，在对第一图像及第二图像进行阈值处理时的具体步骤如下：差分第一图像及第二图像，获取第一差分图像；阈值分割第一差分图像后，获得第一前景区域图像。

在对第一图像及第二图像进行阈值处理时，可在获取第一图像和第二图像后，先按照从左到右，从下到上的顺序，依次将第一图像中的每个像素的颜色值与第二图像中对应坐标的像素的颜色值进行比较，并记录所有颜色值不同的像素的坐标。从这些坐标中取出最下方像素A的坐标(X

之后，计算第一差分图像中全部像素的灰度均值μ及灰度阈值T，并设置初始化状态：令灰度值的步长step＝1，左灰度值边界I＝0，右灰度值边界r＝T；第一次执行初始化步骤，灰度分割值thre＝l，获取第一差分图像中，灰度值为灰度分割值thre的区域面积P(thre)和灰度值为灰度阈值T的区域面积P(T)；如果P(thre)/P(T)≥β，则当前thre值为最终阈值，计算结束，β为经验参数，一般取值为0.9；否则，更新thre，更新后的thre＝更新前的thre+step，持续计算P(thre)和P(T)，直至满足判定条件，确定满足条件时的thre值为最终阈值，此时灰度值处于(-255，-thre)及(thre，255)的区域对应的图像为第一前景区域图像。

对第一图像及第三图像进行阈值处理时的步骤同上：先差分第一图像及第三图像，获取第二差分图像；阈值分割第二差分图像后，获得第二前景区域图像，具体过程不再赘述。

在步骤400中，基于第一前景区域图像和第二前景区域图像，获取第一图像的真实前景区域图像。

其中，在一些实施例中，获取第一前景区域图像和第二前景区域图像的交集，获得交集区域图像，交集区域图像为第一图像的真实前景区域图像。即如图2所示，第一图像向左平移第一距离即L1个像素后得到第二图像，第二图像与第一图像做差得到第一差分图像Sublmage1，对Sublmage1进行阈值分割，得到第一前景区域图像Region1。第一图像向右平移第二距离后得到第三图像，第三图像与第一图像做差得到第二差分图像Sublmage2，对Sublmage2进行阈值分割，得到第二前景区域图像Region2。再对Region1和Region2求交集得第一图像的真实前景区域图像Regionlntersection，即为第一图像的真实前景区域图像。

图3为第一图像向水平向左平移50个像素后，经阈值处理后得到的第一前景区域图像Region1，图4为第一图像向水平向右平移50个像素后，经阈值处理后得到的第二前景区域图像Region2，第一前景区域图像Region1与第二前景区域图像Region2的交集形成的交集区域图像Regionlntersection，即前景提取结果如图5所示的真实前景区域图像。由图3-5可知，对于图中所示的黑色目标而言，将第一图像沿水平方向上平移50个像素后提取的前景区域图像的结果较为清晰准确。

应该理解的是，虽然图1的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图1中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。

由于当第一图像较大时，则第一距离及第二距离较大，此时，如图6所示，为第一图像向水平向左平移100个像素后，经阈值分割后得到的第一前景区域图像Region1，图7为第一图像向水平向右平移100个像素后，经阈值分割后得到的第二前景区域图像Region2，第一前景区域图像Region1与第二前景区域图像Region2的交集形成的交集区域图像Regionlntersection为空，其前景提取结果如图8所示，并不能有效提取出前景。由于上述第一图像在平移的过程中，第一图像的边界区域会被平移到第一图像之外，此时，差分后获得的第一差分区域图像或者第二差分区域图向会超出第一图像的范围，导致第一前景区域图像和第二前景区域图像的交集为空，因此不能准确获取第一图像的真实前景区域图像，鉴于此，在一些实施例中，结合图9-10所示，步骤400包括：

步骤410，获取第一前景区域图像和第二前景区域图像的交集区域图像。

其中，参照步骤100-300获取第一前景区域图像Region1和第二前景区域图像Region2，之后通过求交集获取交集区域图像Regionlntersection。

步骤420，获取第一图像向第一方向平移时，第一图像第一方向上的边界线外围的第一保留区域图像，和第一图像向第二方向平移时，第一图像第二方向上的边界线外围的第二保留区域图像。

其中，第一保留区域图像为将第一图像沿第一方向上平移第一距离后，位于第一图像第一方向上的边界线外围的图像，第二保留区域图像为将第一图像沿第二方向上平移第一距离后，位于第一图像第二方向上的边界线外围的图像。第一图像可为矩形，圆形或其他形状，第一保留区域图像及第二保留区域图像也可为任意能够包括第一图像与第二图像或者第三图像之间区域的形状。

在一些实施例中，若第一图像为矩形，且第一保留区域图像及第二保留区域图像均为矩形，第一方向为向左或向右水平平移，则第一保留区域图像及第二保留区域图像的宽度均为第一距离，高度与第一图像的高度相同，即第一保留区域图像及第二保留区域图像相当于是在第一图像水平方向方向上的两侧边界生成宽度为第一距离L1，高度与第一图像的高度相同的矩形图像。

步骤430，获取第一保留区域图像与第一前景区域图像的交集，第一保留区域图像与第一前景区域图像的交集为第一补偿区域图像；获取第二保留区域图像与第二前景区域图像的交集，二保留区域图像与第二前景区域图像的交集为第二补偿区域图像。

其中，将第一保留区域图像与第一前景区域图像Region1做交集处理，将第二保留区域图像与第二前景区域图像Region2做交集处理，分别得到补偿部分，即第一补偿区域图像Regionlntersection1及第二补偿区域图像Regionlntersection2。

步骤440，获取交集区域图像、第一补偿区域图像和第二补偿区域图像的并集，所述并集为第一图像的真实前景区域图像。

可以理解的是，第一补偿区域图像Regionlntersection1及第二补偿区域图像Regionlntersection2最终再与交集区域图像Regionlntersection做并集处理，得到第一图像的真实前景区域图像RegionUnion，其处理结果如图11所示。此时，由于避免了交集为空的情况，因此有助于准确获取第一图像的前景区域。需要说明的是，上述过程中求取并集及交集的过程均可通过halcon程序进行。

另外，还需说明的是，图像上下平移过程同上述过程相同，此处不再赘述。

在一些实施例中，也可将第一图像既进行竖直移动又进行水平移动，平移后产生第二图像、第三图像、第四图像及第五图像，第四图像与第五图像的后续处理过程与上述过程相同。

上述图像前景提取方法中，通过获取第一补偿区域图像及第二补偿区域图像，对图像边界进行补偿，可有效降低由于第一图像平移时超出边界而导致无法准确提取前景区域图像的可能性。

在一些实施例中，第二方面，如图12所示，提供一种图像前景提取系统，具体包括：

第一平移模块，用于将第一图像向第一方向平移第一距离，获得第二图像；

第二平移模块，用于将第一图像向与第一方向相反的方向平移第二距离，获得第三图像；

前景区域获取模块，用于对第一图像及第二图像进行阈值处理，获取第一前景区域图像；对第一图像及第三图像进行阈值处理，获取第二前景区域图像；

真实前景区域获取模块，用于基于第一前景区域图像和第二前景区域图像，获取第一图像的真实前景区域图像。

在一些实施例中，第一距离和第二距离均根据第一图像中待提取的前景区域尺寸决定，且第一距离及第二距离均大于第一图像中待提取的前景区域。

在一些实施例中，第一距离及第二距离相同。

在一些实施例中，第一方向为竖直向上、竖直向下、水平向左或者水平向右。

在一些实施例中，真实前景区域获取模块用于获取第一前景区域图像和第二前景区域图像的交集区域图像，交集区域图像为第一图像的真实前景区域图像。

在一些实施例中，如图13所示，图像前景提取系统还包括区域图像补偿模块，基于第一前景区域图像和第二前景区域图像，获取第一图像的真实前景区域图像步骤中，区域图像补偿模块用于获取第一图像向第一方向平移时，第一图像第一方向上的边界线外围的第一保留区域图像，和第一图像向第二方向平移时，第一图像第二方向上的边界线外围的第二保留区域图像；

还用于获取第一保留区域图像与第一前景区域图像的交集，第一保留区域图像与第一前景区域图像的交集为第一补偿区域图像；获取第二保留区域图像与第二前景区域图像的交集，第二保留区域图像与第二前景区域图像的交集为第二补偿区域图像；

此时，真实前景区域获取模块用于获取第一前景区域图像和第二前景区域图像的交集区域图像；还用于获取交集区域图像、第一补偿区域图像和第二补偿区域图像的并集，所述并集为第一图像的真实前景区域图像。

在一些实施例中，若第一图像为矩形，第一方向为向左或向右水平平移，则第一保留区域图像及第二保留区域图像的宽度均为第一距离，高度与第一图像的高度相同。

在一些实施例中，在对第一图像及第二图像进行阈值处理步骤中，前景区域获取模块用于：

差分第一图像及第二图像，获取第一差分图像；

阈值分割第一差分图像后，获得第一前景区域图像。

关于图像前景提取系统的具体限定可以参见上文中对于图像前景提取方法的限定，在此不再赘述。上述图像前景提取系统中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

在一些实施例中，第三方面，提供了一种图像前景提取装置，该图像前景提取装置可以是服务器，也可是终端，其内部结构图可以如图14所示，具体包括处理器、存储器、通信接口和通信总线，处理器、存储器和通信接口通过通信总线完成相互间的通信。存储器用于存放至少一可执行指令，可执行指令使处理器执行上述第一方面中的图像前景提取方法的操作。

本领域技术人员可以理解，图14中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的图像前景提取装置的限定，具体的图像前景提取装置可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

本申请实施例的第四方面提供一种计算机可读存储介质，存储介质中存储有至少一可执行指令，可执行指令在图像前景提取装置上运行时，使得图像前景提取装置执行以下图像前景提取方法的操作：

将第一图像向第一方向平移第一距离，获得第二图像；

将第一图像向与第一方向相反的方向平移第二距离，获得第三图像；

对第一图像及第二图像进行阈值处理，获取第一前景区域图像；对第一图像及第三图像进行阈值处理，获取第二前景区域图像；

基于第一前景区域图像和第二前景区域图像，获取第一图像的真实前景区域图像。

在一些实施例中，第一距离和第二距离均根据第一图像中待提取的前景区域尺寸决定，且第一距离及第二距离均大于第一图像中待提取的前景区域。

在一些实施例中，第一距离及第二距离相同。

在一些实施例中，第一方向为竖直向上、竖直向下、水平向左或者水平向右。

在一些实施例中，在基于第一前景区域图像和第二前景区域图像，获取第一图像的真实前景区域图像步骤中，进一步包括：

获取第一前景区域图像和第二前景区域图像的交集区域图像，交集区域图像为第一图像的真实前景区域图像。

在一些实施例中，在基于第一前景区域图像和第二前景区域图像，获取第一图像的真实前景区域图像步骤中，进一步包括：

获取第一前景区域图像和第二前景区域图像的交集区域图像；

获取第一图像向第一方向平移时，第一图像第一方向上的边界线外围的第一保留区域图像，和第一图像向第二方向平移时，第一图像第二方向上的边界线外围的第二保留区域图像；

获取第一保留区域图像与第一前景区域图像的交集，第一保留区域图像与第一前景区域图像的交集为第一补偿区域图像；获取第二保留区域图像与第二前景区域图像的交集，第二保留区域图像与第二前景区域图像的交集为第二补偿区域图像；

获取交集区域图像、第一补偿区域图像和第二补偿区域图像的并集，所述并集为第一图像的真实前景区域图像。

在一些实施例中，若第一图像为矩形，第一方向为向左或向右水平平移，则第一保留区域图像及第二保留区域图像的宽度均为第一距离，高度与第一图像的高度相同。

在一些实施例中，在对第一图像及第二图像进行阈值处理，获取第一前景区域图像步骤中，进一步包括：

差分第一图像及第二图像，获取第一差分图像；

阈值分割第一差分图像后，获得第一前景区域图像。

关于图像前景提取系统的具体限定可以参见上文中对于图像前景提取方法的限定，在此不再赘述。

本部分实施例的有益效果在于，通过将图像在第一方向平移第一距离及在与第一方向相反的方向平移第二距离后，将分别得到的第二图像及第三图像均与第一图像进行阈值处理，并基于第一前景区域图像和第二前景区域图像，获取第一图像的真实前景区域图像，在此过程中，可将第一图像进行阈值处理的区域范围扩大，有助于精确确定图像前景，进而有效提高了图像中前景提取的准确性。

进一步将第一方向是设置为竖直方向或者水平方向，有助于第一图像的准确移动；进一步将第一距离及第二距离设置为相同距离，既有助于囊括前景区域，又有助于便捷计算过程。

进一步通过获取第一补偿区域图像及第二补偿区域图像，并通过获取交集区域图像、第一补偿区域图像和第二补偿区域图像的并集，确定第一图像的真实前景区域图像，有助于降低交集为空的情况，进而能够准确提取第一图像中的前景区域图像。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory，ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic Random Access Memory，DRAM)等。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。