掌桥专利:专业的专利平台
掌桥专利
首页

手势识别方法、装置、电子设备和可读存储介质

文献发布时间:2024-04-18 20:01:23


手势识别方法、装置、电子设备和可读存储介质

技术领域

本申请属于电子设备技术领域,具体涉及一种手势识别方法、装置、电子设备和可读存储介质。

背景技术

随着电子通信技术的不断发展,穿戴式智能设备逐渐走进人们的生活,例如智能手表、智能手环等。

相关技术中,穿戴式智能设备支持的操作手势较少,无法准确识别不同的手势操作。

发明内容

本申请实施例的目的是提供一种手势识别方法、装置、电子设备和可读存储介质,增大了穿戴式电子设备所能够识别手势的范围,提高了对穿戴式电子设备控制的准确性。

第一方面,本申请实施例提供了一种手势识别方法,应用于穿戴式电子设备,穿戴式电子设备包括:测距组件,手势识别方法包括:通过测距组件获取第一手势在球坐标系下的至少两个锚点坐标,至少两个锚点坐标与至少两个手部特征一一对应,球坐标系为基于测距组件构建的坐标系;在至少两个锚点坐标与第一坐标信息相匹配的情况下,获取至少两个手部特征的第一动作信息;根据第一动作信息和穿戴式电子设备的显示内容,控制穿戴式电子设备执行第一操作。

第二方面,本申请实施例提供了一种手势识别装置,应用于穿戴式电子设备,穿戴式电子设备包括:测距组件,手势识别装置包括:获取模块,用于通过测距组件获取第一手势在球坐标系下的至少两个锚点坐标,至少两个锚点坐标与至少两个手部特征一一对应,球坐标系为基于测距组件构建的坐标系;获取模块,用于在至少两个锚点坐标与第一坐标信息相匹配的情况下,获取至少两个手部特征的第一动作信息;控制模块,用于根据第一动作信息和穿戴式电子设备的显示内容,控制穿戴式电子设备执行第一操作。

第三方面,本申请实施例提供了一种电子设备,包括处理器和存储器,存储器存储可在处理器上运行的程序或指令,程序或指令被处理器执行时实现如第一方面的方法的步骤。

第四方面,本申请实施例提供了一种可读存储介质,该可读存储介质上存储程序或指令,该程序或指令被处理器执行时实现如第一方面的方法的步骤。

第五方面,本申请实施例提供了一种芯片,该芯片包括处理器和通信接口,该通信接口和该处理器耦合,该处理器用于运行程序或指令,实现如第一方面的方法的步骤。

第六方面,本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如第一方面的方法的步骤。

本申请实施例中,通过在穿戴式电子设备中配置测距组件,并基于测距组件构建球坐标系,在检测到第一手势的锚点坐标与预存的第一坐标信息相匹配时,则开始检测第一手势的后续动作的第一动作信息,并基于该第一动作信息和穿戴式电子设备的显示内容,控制穿戴式电子设备执行相应的第一操作。由于测距组件能够准确检测第一手势后续的第一动作信息,故增大了穿戴式电子设备所能够识别手势的范围,并且基于对穿戴式电子设备的显示内容和第一动作信息确定所需执行的第一操作,还提高了对穿戴式电子设备控制的准确性。

附图说明

图1示出了本申请的一些实施例提供的手势识别方法的流程示意图;

图2示出了本申请的一些实施例中提供的穿戴式电子设备的结构示意图;

图3示出了本申请的一些实施例中提供的球坐标系的示意图;

图4示出了本申请的一些实施例中提供的手部特征的锚点的示意图;

图5示出了本申请的一些实施例中提供的第一手势的示意图;

图6示出了本申请的一些实施例提供的手势识别装置的示意框图;

图7示出了本申请的一些实施例提供的电子设备的结构框图;

图8示出了本申请的一些实施例提供的电子设备的硬件结构示意图。

具体实施方式

下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。

本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的术语在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。

下面结合附图1至图8,通过具体的实施例及其应用场景对本申请实施例提供的手势识别方法、手势识别装置、电子设备和可读存储介质进行详细地说明。

在本申请的一些实施例中,提供了一种手势识别方法,应用于穿戴式电子设备,穿戴式电子设备包括测距组件,图1示出了本申请的一些实施例提供的手势识别方法的流程示意图。如图1所示,手势识别方法包括:

步骤102,通过测距组件获取第一手势在球坐标系下的至少两个锚点坐标,至少两个锚点坐标与至少两个手部特征一一对应,球坐标系为基于测距组件构建的坐标系;

本申请实施例中,测距组件为安装在穿戴式电子设备上的测距传感器,示例性地,穿戴式电子设备为智能手表,测距组件可以为FMCW(Frequency Modulated ContinuousWave,调频连续波雷达)雷达。

图2示出了本申请的一些实施例中提供的穿戴式电子设备的结构示意图,如图2所示,智能手表200上设置有两个FMCW模块202,两个FMCW模块分别设置在智能手表200的12点和6点位置。

本申请实施例中,球坐标系为基于穿戴式电子设备上的测距组件建立的坐标系,测距组件能够采集第一手势的各个手部特征在该球坐标系下的锚点坐标。

图3示出了本申请的一些实施例中提供的球坐标系的示意图,如图3所示,基于测距组件构建球坐标系,且球坐标系的原点0为两个测距组件连线的中点。

本申请实施例中,在构建球坐标系后,对手势的手部特征建立锚点,每个手部特征均对应一个锚点。示例性地,手部特征可以为每个手指的手指关节,例如:食指第一关节、食指第二关节、食指第三关节。

图4示出了本申请的一些实施例中提供的手部特征的锚点的示意图,如图4所示,以左手为例,拇指的三个关节对应三个锚点分别为LT1、LT2和LT3,食指的三个关节对应的三个锚点分别为LF1、LF2和LF3,中指的三个关节对应的三个锚点分别为LM1、LM2和LM3,无名指的三个关节对应的三个锚点分别为LR1、LR2和LR3,小指的三个关节对应的三个锚点分别为LL1、LL2和LL3。

本申请实施例中,第一手势为用户所做的手势动作,至少两个锚点坐标为第一手势中的手部特征对应的锚点坐标,即测距组件持续采集用户的第一手势相应的锚点坐标。

步骤104,在至少两个锚点坐标与第一坐标信息相匹配的情况下,获取至少两个手部特征的第一动作信息;

本申请实施例中,第一坐标信息为预存在智能穿戴设备中的坐标信息,在锚点坐标与第一坐标信息相匹配时,则确定用户触发进行动作检测,此时,获取用户的第一手势中至少两个手部特征的第一动作信息,第一动作信息为通过测距组件采集到的锚点坐标确定的动作信息,根据锚点坐标的变化能够确定当前用户所做的第一动作信息。

本申请实施例中,锚点坐标为手部特征在球坐标系下的坐标,第一坐标信息为预存在本地的坐标。

图5示出了本申请的一些实施例中提供的第一手势的示意图,如图5所示,第一手势为食指与拇指捏合的手势动作,则采集到的锚点坐标包括食指的锚点坐标和拇指的锚点坐标,如下所示:

LFi(r_LFi, θ_LFi , φ_LFi),i=1,2,3; (1)

LTi(r_LTi, θ_LTi , φ_LTi),i=1,2,3; (2)

其中,LFi为食指的第i个关节的锚点坐标,r_LFi为食指的第i个关节与球坐标系原点之间的距离值,θ_LFi为食指的第i个关节在球坐标系下的天顶角,φ_LFi为食指的第i个关节在球坐标系下的方位角,r_LTi为拇指的第i个关节与球坐标系原点之间的距离值,θ_LTi为拇指的第i个关节在球坐标系下的天顶角,φ_LTi为拇指的第i个关节在球坐标系下的方位角。

本申请实施例中,在锚点坐标与第一坐标信息相匹配时,则确定第一手势触发测距组件进行采集第一动作信息。

步骤106,根据第一动作信息和穿戴式电子设备的显示内容,控制穿戴式电子设备执行第一操作。

本申请实施例中,获取穿戴式电子设备的显示内容,基于该显示内容和检测到的第一坐标信息,能够需要控制穿戴式电子设备所需执行的第一操作。需要说明的是,在穿戴式电子设备所显示的显示内容不同时,相同的手势动作能够触发不同的操作。

本申请实施例中,通过在穿戴式电子设备中配置测距组件,并基于测距组件构建球坐标系,在检测到第一手势的锚点坐标与预存的第一坐标信息相匹配时,则开始检测第一手势的后续动作的第一动作信息,并基于该第一动作信息和穿戴式电子设备的显示内容,控制穿戴式电子设备执行相应的第一操作。由于测距组件能够准确检测第一手势后续的第一动作信息,故增大了穿戴式电子设备所能够识别手势的范围,并且基于对穿戴式电子设备的显示内容和第一动作信息确定所需执行的第一操作,还提高了对穿戴式电子设备控制的准确性。

在本申请的一些实施例中,获取至少两个手部特征的第一动作信息,包括:通过测距组件确定至少两个手部特征的锚点坐标;获取至少两个第二动作信息对应的手势识别条件;将锚点坐标所满足的手势识别条件对应的第二动作信息,确定为第一动作信息。

本申请实施例中,测距组件持续监测至少两个手部特征的锚点坐标,第二动作信息为预存在穿戴式电子设备中的动作信息,通过锚点坐标能够确定用户是否执行与第二动作信息相匹配的手势动作。第二动作信息的数量为至少两个,手势识别条件与第二动作信息一一对应,即手势识别条件的数量与第二动作信息的数量相同。在持续检测手部特征的锚点坐标的过程中,持续判断手部特征的锚点坐标是否满足第二动作信息对应的手势识别条件,在手部特征的锚点坐标满足第二动作信息对应的手势识别条件时,则将满足手势识别条件的第二动作信息,确定为第一动作信息。

示例性地,第二动作信息包括食指与拇指捏一次松开,则手势识别条件包括食指的第三关节与拇指的第三关节捏合触碰,且食指的第二关节与拇指的第二关节未触碰,以及食指的第三关节与拇指的第二关节未触碰达到第一时长,然后,食指的第三关节与拇指的第三关节之间的距离在第一距离范围内达到第二时长。其中,第一时长的取值范围为0.05秒至0.15秒,第二时长的取值范围为0.1秒至0.2秒,且第二时长大于第一时长。

示例性地,第二动作信息包括食指与拇指捏两次松开,则手势识别条件包括食指的第三关节与拇指的第三关节捏合触碰,且食指的第二关节与拇指的第二关节未触碰,以及食指的第三关节与拇指的第二关节未触碰达到第一时长,然后,食指的第三关节与拇指的第三关节之间的距离在第一距离范围内达到第三时长,重复判断食指的第三关节与拇指的第三关节捏合触碰,且食指的第二关节与拇指的第二关节未触碰,以及食指的第三关节与拇指的第二关节未触碰达到第一时长之后,食指的第三关节与拇指的第三关节之间的距离在第一距离范围内达到第二时长。其中,第一时长和第三时长的取值范围为0.05秒至0.15秒,第二时长的取值范围为0.1秒至0.2秒,且第二时长大于第一时长。

示例性地,第二动作信息包括食指与拇指捏两次不松开,则手势识别条件包括食指的第三关节与拇指的第三关节捏合触碰,且食指的第二关节与拇指的第二关节未触碰,以及食指的第三关节与拇指的第二关节未触碰达到第一时长,然后,食指的第三关节与拇指的第三关节之间的距离在第一距离范围内达到第三时长,重复判断食指的第三关节与拇指的第三关节捏合触碰,且食指的第二关节与拇指的第二关节未触碰,以及食指的第三关节与拇指的第二关节未触碰达到第一时长之后,食指的第三关节与拇指的第三关节保持捏合达到第二时长。其中,第一时长和第三时长的取值范围为0.05秒至0.15秒,第二时长的取值范围为0.1秒至0.2秒,且第二时长大于第一时长。

示例性地,第二动作信息包括食指在拇指上划或下划,拇指第三关节与食指第三关节捏合触碰,且拇指的第三关节、食指的第三关节和食指的第二关节位于同一平面,然后经过第一时长,拇指的滑动距离等于食指第三关节至第二关节的距离,或者经过第一时长,拇指的滑动距离等于食指第二关节值第一关节的距离值。

示例性地,第二动作信息包括食指在拇指左划或右划,拇指第三关节与食指第三关节捏合触碰,且拇指的第三关节、食指的第三关节和食指的第二关节位于同一平面,然后经过第一时长,食指的滑动距离等于拇指第三关节至第二关节的距离,或者经过第一时长,食指的滑动距离等于拇指第二关节至第一关节的距离值。

本申请实施例中,手部特征包括每个手指的手指关节,每个手指关节均对应一个锚点坐标,通过预存的手势识别条件对手势特征的锚点坐标进行识别,在识别到的锚点坐标与第二坐标信息相匹配的情况下,则将该第二动作信息确定为第一动作信息,提高了识别第一动作信息的准确性。

在本申请的一些实施例中,锚点坐标包括第一距离信息、天顶角信息和方位角信息,第一距离信息包括锚点坐标与球坐标系的原点之间的距离;

手势识别条件包括以下至少一项:

第一子特征的锚点坐标与第二子特征的锚点坐标之间的坐标差处于第一范围内;第一子特征的锚点坐标与第三子特征的锚点坐标之间的坐标差处于第一范围外;第一子特征的方位角信息、第二子特征的方位角信息和第三子特征的方位角信息相匹配;第一子特征的第一距离信息与第一子特征的旋转角度的乘积与第二距离值相匹配,第二距离信息为第二子特征与第三子特征之间的距离;

其中,第一子特征与第二子特征为不同的手部特征的子特征,第二子特征与第三子特征为相同的手部特征的子特征。

本申请实施例中,锚点坐标包括第一距离信息、天顶角信息和方位角信息,其中,第一距离信息每个锚点坐标在球坐标系下与原点之间的距离。示例性地,食指第一关节的锚点坐标为LF1,其中,第一距离信息为r_LF1,天顶角信息为θ_LF1,方位角信息为φ_LF1。

本申请实施例中,第一子特征和第二子特征为不同手部特征的子特征,示例性地,第一子特征为食指的第三关节,第二子特征为拇指的第三关节。第二子特征与第三子特征为相同手部特征的子特征,示例性地,第二子特征为拇指第三关节,第三子特征为拇指第二关节。

本申请实施例中,通过第一子特征的锚点坐标与第二子特征的锚点坐标之间的坐标差能够确定第一子特征是否与第二子特征捏合在一起,具体来说,在第一子特征的锚点坐标与第二子特征的锚点坐标之间的坐标差处于第一范围内,则确定第一子特征对应的手指关节与第二子特征对应的手指关节捏合在一起。

本申请实施例中,通过第一子特征的锚点坐标与第三子特征的锚点坐标之间的坐标差能够确定第一子特征是否远离第三子特征,具体来说,在第一子特征的锚点坐标与第三子特征的锚点坐标之间的坐标差处于第一范围外,则确定第一子特征对应的手指关节未与第二子特征的手指关节捏合在一起。

在本申请实施例中,通过第一子特征的方位角信息、第二子特征的方位角信息和第三子特征的方位角信息能够确定第一子特征、第二子特征和第三子特征是否处于同一平面内。

在本申请实施例中,第一距离信息为第一子特征与球坐标系的原点之间的距离值,第二距离信息为第二子特征与第三子特征之间的距离值。根据球坐标系转换公式,通过第一距离信息的距离值与旋转角度的乘积能够得到第二距离信息的距离值。在第一距离信息与旋转角度的乘积与第二距离信息相匹配时,能够确定第一子特征由第二子特征的位置移动至第三子特征的位置。

示例性地,以食指与拇指捏一次松开为例进行说明:

第一子特征的锚点坐标为LT3,第二子特征的锚点坐标为LF3,通过以下关系式确定LT3与LF3考虑误差后重叠达到t1秒,则确定手指捏合触碰,即第一子特征的锚点坐标与第二子特征的锚点坐标之间的坐标差处于第一范围内:

r_LT3=r_LF3+e且θ_LT3=θ_LF3+e且φ_LT3=φ_LF3+e;(3)

通过以下关系式确定手指捏合触碰,且排除误识别持续t1秒,即第一子特征的锚点坐标与第三子特征的锚点坐标之间的坐标差处于第一范围外:

r_LT2≠r_LF3+e且θ_LT3≠θ_LF3+e且φ_LT3≠φ_LF3+e;(4)

r_LT3≠r_LF2+e且θ_LT2≠θ_LF2+e且φ_LT2≠φ_LF2+e;(5)

通过以下关系式确定在松开时间ts内,LT3与LF3分开但距离接近:

r_LT3=r_LF3+T且θ_LT3=θ_LF3+T且θ_LT3=θ_LF3+e;(6)

其中,r_LT3为食指第三关节的第一距离信息,r_LF3为拇指第三关节的第一距离信息,θ_LT3为食指第三关节的天顶角,θ_LF3为拇指第三关节的天顶角,φ_LT3为食指第三关节的方位角,θ_LF3为拇指第三关节的方位角,r_LT2为食指第三关节的第一距离信息,r_LF2为拇指第三关节的第一距离信息,e为误差系数。

在采集到的LT3与LF3满足上述关系式(3)、(4)、(5)、(6)的情况下,则确定识别到食指与拇指捏一次松开对应的第二动作信息。

示例性地,以食指与拇指捏两次松开为例进行说明:

通过判断重复满足两次食指与拇指捏一次中的关系式(3)、(4)、(5)、(6)的情况下,则确定识别到食指与拇指捏两次松开的第二动作信息。

示例性地,以食指与拇指捏两次不松开为例进行说明:

通过判断满足食指与拇指捏一次中的关系式(3)、(4)、(5)、(6)之后,重复判断是否满足食指与拇指捏一次中的关系式(3)、(4)、(5)达到t2秒后,确定食指与拇指捏两次不松开的第二动作信息,其中,t2大于t1,t1的取值范围为0.08秒至0.1秒,t2的取值范围为0.1秒至0.15秒。

示例性地,以拇指在食指上划或下划为例进行说明:

第一子特征的锚点坐标为LT3,第二子特征的锚点坐标为LF3,通过以下关系式确定LT3与LF3考虑误差后重叠达到t1秒,则确定捏合触碰,即第一子特征的锚点坐标与第二子特征的锚点坐标之间的坐标差处于第一范围内:

r_LT3=r_LF3+e且θ_LT3=θ_LF3+e且φ_LT3=φ_LF3+e;(7)

r_LT3=r_LF1+e且θ_LT1=θ_LF1+e且φ_LT1=φ_LF1+e;(8)

其中,关系式(7)用于判定食指第三关节是否与拇指第三关节接触,关系式(8)用于判定食指第三关节是否与拇指第一关节接触。

通过上述关系式(4)和(5)确定手指捏合触碰,且排除误识别持续t1秒;

通过以下关系式确定拇指第三关节与食指第三关节、食指第二关节在同一平面,即第一子特征的方位角信息、第二子特征的方位角信息和第三子特征的方位角信息相匹配:

φ_LF3=φ_LF2=φ_LT3;(9)

通过以下关系式确定拇指第三关节由食指第三关节滑动至食指第二关节,即第一子特征的第一距离信息与第一子特征的旋转角度的乘积与第二距离值相匹配,第二距离信息为第二子特征与第三子特征之间的距离:

r_LT3×Δθ1=|LF3-LF2|;(10)

通过以下关系式确定拇指第三关节由食指第二关节滑动至食指第一关节:

r_LT3×Δθ1=|LF2-LF1|;(11)

其中,LF3为拇指第三关节的锚点坐标,LF3为拇指第二关节的锚点坐标,LF1为拇指第一关节的锚点坐标,Δθ1为食指的转动角度。

在采集到的LT3与LF3满足上述关系式(7)或(8)以及(9)以及(10)或(11)的情况下,则确定识别到拇指在食指上划或下划对应的第二动作信息。

示例性地,以食指在拇指左划或右划为例进行说明:通过上述关系式(4)和(5)确定手指捏合触碰,且排除误识别持续t1秒,通过上述关系式(7)判定食指第三关节是否与拇指第三关节接触,或者通过上述关系式(8)判定食指第三关节是否与拇指第一关节接触,以及通过上述关系式(9)确定拇指第三关节与食指第三关节、食指第二关节在同一平面;

通过以下关系式确定食指第三关节由拇指第三关节滑动至拇指第二关节,即第一子特征的第一距离信息与第一子特征的旋转角度的乘积与第二距离值相匹配,第二距离信息为第二子特征与第三子特征之间的距离:

r_LT3×Δθ2=|LF3-LF2|;(12)

通过以下关系式确定食指第三关节由拇指第二关节滑动至拇指第一关节:

r_LT3×Δθ2=|LF2-LF1|;(13)

其中,LF3为拇指第三关节的锚点坐标,LF3为拇指第二关节的锚点坐标,LF1为拇指第一关节的锚点坐标,Δθ2为拇指的转动角度。

在采集到的LT3与LF3满足上述关系式(7)或(8)以及(9)以及(12)或(13)的情况下,则确定识别到食指在拇指左划或右划对应的第二动作信息。

本申请实施例中,通过第一子特征、第二子特征和第三子特征的锚点坐标,能够对不同动作信息的手势动作进行识别,进一步提高了识别的准确性。

在本申请的一些实施例中,根据第一动作信息和穿戴式电子设备的显示内容,控制穿戴式电子设备执行第一操作,包括:

获取显示内容对应的至少两个第三动作信息,至少两个第三动作信息与至少两个第二操作一一对应;

将与第一动作信息相匹配的第三动作信息对应的第二操作,确定为第一操作。

本申请实施例中,建立显示内容与第二动作信息的关联关系,在不同的显示内容下,相同的第二动作信息对应不同的第二操作,在识别到第一动作信息之后,确定与第一动作信息相匹配的第二动作信息,并将该第二动作信息对应的第二操作确定为第一操作。

示例性地,第一动作信息对应的手势动作为食指与拇指捏一次松开,在穿戴式电子设备的显示界面为主界面时,则触发进入选择框对应的次级界面,在穿戴式电子设备的显示界面为通话接听界面时,则触发接听操作,在穿戴式电子设备的显示界面为功能选择界面时,则触发确定按钮。

示例性地,第一动作信息对应的手势动作为食指与拇指捏两次松开,在穿戴式电子设备的显示界面为次级界面时,则触发进入选择框对应的上一级界面,在穿戴式电子设备的显示界面为通话接听界面时,则触发拒接操作,在穿戴式电子设备的显示界面为功能选择界面时,则触发取消按钮。

示例性地,第一动作信息对应的手势动作为食指与拇指捏两次不松开,在穿戴式电子设备的显示界面为主界面时,则触发进入选择框对应的次级界面,在穿戴式电子设备的显示界面为通话接听界面时,则触发接听操作,在穿戴式电子设备的显示界面为功能选择界面时,则触发确定按钮。

示例性地,第一动作信息对应的手势动作为拇指在食指处上下滑动或左右滑动,在不同显示界面下能够触发以下操作之一:选择框往上下移动一位、滚动条上下滑动、增大或减小屏幕亮度、增大或减小系统音量、增大或减小定时器时间、取消或确定当前通知详情。

本申请实施例中,通过将手势动作对应的动作信息与显示内容建立关联关系,使相同的手势动作能够在不同的显示内容下触发不同的操作,提高了手势触发控制电子设备的灵活性。

在本申请的一些实施例中,在至少两个锚点坐标与第一坐标信息相匹配的情况下,获取至少两个手部特征的第一动作信息之前,还包括:

通过测距组件获取第一坐标信息。

本申请实施例中,在锚点坐标与第一坐标信息相匹配的情况下,则触发穿戴式电子设备采集第一动作信息,该第一坐标信息可以在手势触发之前进行录制。示例性地,用户主动触发目标手势动作,并通过测距组件采集该目标手势动作的坐标信息作为第一坐标信息,使用户能够灵活设置触发采集第一动作信息的手势动作,进一步提高了手势识别的准确性。

本申请实施例提供的手势识别方法,执行主体可以为手势识别装置。本申请实施例中以手势识别装置执行手势识别方法为例,说明本申请实施例提供的手势识别装置。

在本申请的一些实施例中,提供了一种手势识别装置600,应用于穿戴式电子设备,穿戴式电子设备包括:测距组件,图6示出了本申请的一些实施例提供的手势识别装置的示意框图。如图6所示,手势识别装置600包括:

获取模块602,用于通过测距组件获取第一手势在球坐标系下的至少两个锚点坐标,至少两个锚点坐标与至少两个手部特征一一对应,球坐标系为基于测距组件构建的坐标系;

获取模块602,用于在至少两个锚点坐标与第一坐标信息相匹配的情况下,获取至少两个手部特征的第一动作信息;

控制模块604,用于根据第一动作信息和穿戴式电子设备的显示内容,控制穿戴式电子设备执行第一操作。

本申请实施例中,通过在穿戴式电子设备中配置测距组件,并基于测距组件构建球坐标系,在检测到第一手势的锚点坐标与预存的第一坐标信息相匹配时,则开始检测第一手势的后续动作的第一动作信息,并基于该第一动作信息和穿戴式电子设备的显示内容,控制穿戴式电子设备执行相应的第一操作。由于测距组件能够准确检测第一手势后续的第一动作信息,故增大了穿戴式电子设备所能够识别手势的范围,并且基于对穿戴式电子设备的显示内容和第一动作信息确定所需执行的第一操作,还提高了对穿戴式电子设备控制的准确性。

在本申请的一些实施例中,手势识别装置,还包括:

确定模块,用于通过测距组件确定至少两个手部特征的锚点坐标;

获取模块602,用于获取至少两个第二动作信息对应的手势识别条件;

确定模块,用于将锚点坐标所满足的手势识别条件对应的第二动作信息,确定为第一动作信息。

本申请实施例中,手部特征包括每个手指的手指关节,每个手指关节均对应一个锚点坐标,通过预存的手势识别条件对手势特征的锚点坐标进行识别,在识别到的锚点坐标与第二坐标信息相匹配的情况下,则将该第二动作信息确定为第一动作信息,提高了识别第一动作信息的准确性。

在本申请的一些实施例中,锚点坐标包括第一距离信息、天顶角信息和方位角信息,第一距离信息包括锚点坐标与球坐标系的原点之间的距离;

手势识别条件包括以下至少一项:

第一子特征的锚点坐标与第二子特征的锚点坐标之间的坐标差处于第一范围内;第一子特征的锚点坐标与第三子特征的锚点坐标之间的坐标差处于第一范围外;第一子特征的方位角信息、第二子特征的方位角信息和第三子特征的方位角信息相匹配;第一子特征的第一距离信息与第一子特征的旋转角度的乘积与第二距离信息相匹配,第二距离信息为第二子特征与第三子特征之间的距离;

其中,第一子特征与第二子特征为不同的手部特征的子特征,第二子特征与第三子特征为相同的手部特征的子特征。

本申请实施例中,通过第一子特征的锚点坐标与第三子特征的锚点坐标之间的坐标差能够确定第一子特征是否远离第三子特征。通过第一子特征的方位角信息、第二子特征的方位角信息和第三子特征的方位角信息能够确定第一子特征、第二子特征和第三子特征是否处于同一平面内。第一距离信息为第一子特征与球坐标系的原点之间的距离值,第二距离信息为第二子特征与第三子特征之间的距离值。根据球坐标系转换公式,通过第一距离信息的距离值与旋转角度的乘积能够得到第二距离信息的距离值。在第一距离信息与旋转角度的乘积与第二距离信息相匹配时,能够确定第一子特征由第二子特征的位置移动至第三子特征的位置。

本申请实施例中,通过第一子特征、第二子特征和第三子特征的锚点坐标,能够对不同动作信息的手势动作进行识别,进一步提高了识别的准确性。

在本申请的一些实施例中,获取模块602,用于获取显示内容对应的至少两个第三动作信息,至少两个第三动作信息与至少两个第二操作一一对应;

确定模块,用于将与第一动作信息相匹配的第三动作信息对应的第二操作,确定为第一操作。

本申请实施例中,建立显示内容与第二动作信息的关联关系,在不同的显示内容下,相同的第二动作信息对应不同的第二操作,在识别到第一动作信息之后,确定与第一动作信息相匹配的第二动作信息,并将该第二动作信息对应的第二操作确定为第一操作。

本申请实施例中,通过将手势动作对应的动作信息与显示内容建立关联关系,使相同的手势动作能够在不同的显示内容下触发不同的操作,提高了手势触发控制电子设备的灵活性。

在本申请的一些实施例中,获取模块602,用于通过测距组件获取第一坐标信息。

本申请实施例中,在锚点坐标与第一坐标信息相匹配的情况下,则触发穿戴式电子设备采集第一动作信息,该第一坐标信息可以在手势触发之前进行录制。示例性地,用户主动触发目标手势动作,并通过测距组件采集该目标手势动作的坐标信息作为第一坐标信息,使用户能够灵活设置触发采集第一动作信息的手势动作,进一步提高了手势识别的准确性。

本申请实施例中的手势识别装置可以是电子设备,也可以是电子设备中的部件,例如集成电路或芯片。该电子设备可以是终端,也可以为除终端之外的其他设备。示例性地,电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device,MID)、增强现实(augmented reality,AR)/虚拟现实(virtualreality,VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobile personalcomputer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等,还可以为服务器、网络附属存储器(Network Attached Storage,NAS)、个人计算机(personalcomputer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。

本申请实施例中的手势识别装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为iOS操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。

本申请实施例提供的手势识别装置能够实现上述方法实施例实现的各个过程,为避免重复,这里不再赘述。

可选地,本申请实施例还提供了一种电子设备,其中包括如上述任一实施例中的手势识别装置,因而具有任一实施例中的手势识别装置的全部有益效果,在此不再做过多赘述。

可选地,本申请实施例还提供一种电子设备,图7示出了根据本申请实施例的电子设备的结构框图,如图7所示,电子设备700包括处理器702,存储器704,存储在存储器704上并可在处理器702上运行的程序或指令,该程序或指令被处理器702执行时实现上述手势识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。

需要说明的是,本申请实施例中的电子设备包括上述的移动电子设备和非移动电子设备。

图8为实现本申请实施例的一种电子设备的硬件结构示意图。

该电子设备800包括但不限于:射频单元801、网络模块802、音频输出单元803、输入单元804、传感器805、显示单元806、用户输入单元807、接口单元808、存储器809以及处理器810等部件。

本领域技术人员可以理解,电子设备800还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器810逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图8中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。

其中,处理器810,用于通过测距组件获取第一手势在球坐标系下的至少两个锚点坐标,至少两个锚点坐标与至少两个手部特征一一对应,球坐标系为基于测距组件构建的坐标系;

处理器810,用于在至少两个锚点坐标与第一坐标信息相匹配的情况下,获取至少两个手部特征的第一动作信息;

处理器810,用于根据第一动作信息和穿戴式电子设备的显示内容,控制穿戴式电子设备执行第一操作。

本申请实施例中,通过在穿戴式电子设备中配置测距组件,并基于测距组件构建球坐标系,在检测到第一手势的锚点坐标与预存的第一坐标信息相匹配时,则开始检测第一手势的后续动作的第一动作信息,并基于该第一动作信息和穿戴式电子设备的显示内容,控制穿戴式电子设备执行相应的第一操作。由于测距组件能够准确检测第一手势后续的第一动作信息,故增大了穿戴式电子设备所能够识别手势的范围,并且基于对穿戴式电子设备的显示内容和第一动作信息确定所需执行的第一操作,还提高了对穿戴式电子设备控制的准确性。

进一步地,处理器810,用于通过测距组件确定至少两个手部特征的锚点坐标;

处理器810,用于获取至少两个第二动作信息对应的手势识别条件;

处理器810,用于将锚点坐标所满足的手势识别条件对应的第二动作信息,确定为第一动作信息。

本申请实施例中,手部特征包括每个手指的手指关节,每个手指关节均对应一个锚点坐标,通过预存的手势识别条件对手势特征的锚点坐标进行识别,在识别到的锚点坐标与第二坐标信息相匹配的情况下,则将该第二动作信息确定为第一动作信息,提高了识别第一动作信息的准确性。

进一步地,锚点坐标包括第一距离信息、天顶角信息和方位角信息,第一距离信息包括锚点坐标与球坐标系的原点之间的距离;

手势识别条件包括以下至少一项:

第一子特征的锚点坐标与第二子特征的锚点坐标之间的坐标差处于第一范围内;第一子特征的锚点坐标与第三子特征的锚点坐标之间的坐标差处于第一范围外;第一子特征的方位角信息、第二子特征的方位角信息和第三子特征的方位角信息相匹配;第一子特征的第一距离信息与第一子特征的旋转角度的乘积与第二距离信息相匹配,第二距离信息为第二子特征与第三子特征之间的距离;

其中,第一子特征与第二子特征为不同的手部特征的子特征,第二子特征与第三子特征为相同的手部特征的子特征。

本申请实施例中,通过第一子特征的锚点坐标与第三子特征的锚点坐标之间的坐标差能够确定第一子特征是否远离第三子特征。通过第一子特征的方位角信息、第二子特征的方位角信息和第三子特征的方位角信息能够确定第一子特征、第二子特征和第三子特征是否处于同一平面内。第一距离信息为第一子特征与球坐标系的原点之间的距离值,第二距离信息为第二子特征与第三子特征之间的距离值。根据球坐标系转换公式,通过第一距离信息的距离值与旋转角度的乘积能够得到第二距离信息的距离值。在第一距离信息与旋转角度的乘积与第二距离信息相匹配时,能够确定第一子特征由第二子特征的位置移动至第三子特征的位置。

本申请实施例中,通过第一子特征、第二子特征和第三子特征的锚点坐标,能够对不同动作信息的手势动作进行识别,进一步提高了识别的准确性。

进一步地,处理器810,用于获取显示内容对应的至少两个第三动作信息,至少两个第三动作信息与至少两个第二操作一一对应;

处理器810,用于将与第一动作信息相匹配的第三动作信息对应的第二操作,确定为第一操作。

本申请实施例中,建立显示内容与第二动作信息的关联关系,在不同的显示内容下,相同的第二动作信息对应不同的第二操作,在识别到第一动作信息之后,确定与第一动作信息相匹配的第二动作信息,并将该第二动作信息对应的第二操作确定为第一操作。

本申请实施例中,通过将手势动作对应的动作信息与显示内容建立关联关系,使相同的手势动作能够在不同的显示内容下触发不同的操作,提高了手势触发控制电子设备的灵活性。

进一步地,处理器810,用于通过测距组件获取第一坐标信息。

本申请实施例中,在锚点坐标与第一坐标信息相匹配的情况下,则触发穿戴式电子设备采集第一动作信息,该第一坐标信息可以在手势触发之前进行录制。示例性地,用户主动触发目标手势动作,并通过测距组件采集该目标手势动作的坐标信息作为第一坐标信息,使用户能够灵活设置触发采集第一动作信息的手势动作,进一步提高了手势识别的准确性。

应理解的是,本申请实施例中,输入单元804可以包括图形处理器(GraphicsProcessing Unit,GPU)8041和麦克风8042,图形处理器8041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元806可包括显示面板8061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板8061。用户输入单元807包括触控面板8071以及其他输入设备8072中的至少一种。触控面板8071,也称为触摸屏。触控面板8071可包括触摸检测装置和触摸控制器两个部分。其他输入设备8072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。

存储器809可用于存储软件程序以及各种数据。存储器809可主要包括存储程序或指令的第一存储区和存储数据的第二存储区,其中,第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外,存储器809可以包括易失性存储器或非易失性存储器,或者,存储器809可以包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DRRAM)。本申请实施例中的存储器809包括但不限于这些和任意其它适合类型的存储器。

处理器810可包括一个或多个处理单元;可选地,处理器810集成应用处理器和调制解调处理器,其中,应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作,调制解调处理器主要处理无线通信信号,如基带处理器。可以理解的是,上述调制解调处理器也可以不集成到处理器810中。

本申请实施例还提供一种可读存储介质,可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。

其中,处理器为上述实施例中的电子设备中的处理器。可读存储介质,包括计算机可读存储介质,如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。

本申请实施例另提供了一种芯片,芯片包括处理器和通信接口,通信接口和处理器耦合,处理器用于运行程序或指令,实现上述手势识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。

应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。

本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如上述手势识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。

需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、装置、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、装置、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、装置、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的装置和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的装置,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。

通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例装置可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例的装置。

上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

相关技术
  • 体声波谐振器滤波器和体声波谐振器封装件
  • 体声波谐振器滤波器和体声波谐振器模块
技术分类

06120116554188