手势识别方法、装置及电子设备
文献发布时间:2023-06-19 10:27:30
技术领域
本申请涉及通信技术领域,具体涉及一种手势识别方法、装置及电子设备。
背景技术
随着移动通信技术的不断发展,智能电子设备(如手机)的不断普及。电子设备(如手机)从实体按键发展到触摸屏幕,再到语音交互,实现了交互方式的变革,使得电子设备上的应用从程序也愈加丰富有趣,拓展了电子设备的功能性和娱乐性。时至今日,触摸这一交互方式也日益显现出其不足之处,而语音交互显然也不适合需要安静的场合,难以满足某些场景下的用户需求。因此,通过手势识别以实现隔空操作的交互方式应运而生。用户无需触碰电子设备,在空中比划出特定动作后,电子设备通过识别出手势动作即可完成指定操作。
目前,电子设备的手势识别交互有三种实现方式,一者,采用特定的雷达芯片实现手势识别交互;另一者,利用结构光摄像头实现三维立体成像的光学加图像处理实现手势识别交互;再者,通过电子设备附带的触控笔,在触控笔中集成电子罗盘和多轴加速度传感器,实现手势识别,再通过与电子设备通信实现交互。以上手势识别交互的实现方式,通过增加额外的模块实现,存在成本高,且增加整机功耗的问题。
发明内容
本申请实施例的目的是提供一种手势识别方法、装置及电子设备,能够解决现有手势识别需要增加额外的模块实现,从而存在成本高,且增加整机功耗的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本申请实施例提供一种手势识别方法,该方法包括:
在手势识别功能开启且存在满足预设条件的射频电路的情况下,将所述射频电路调整为用于手势识别的目标工作模式,其中,处于所述目标工作模式的所述射频电路包括至少一个发射通路和至少一个接收通路;
获取与反射信号相关的第一信息,其中,所述第一信息包括所述反射信号与探测信号之间的差频信息,或者,所述第一信息包括所述反射信号与探测信号之间的差频信息以及所述反射信号到达不同接收通路的天线的相位差信息,所述探测信号为通过所述发射通路发送的信号,所述反射信号为所述探测信号被用户手部反射后,由所述接收通路接收的信号;
根据所述第一信息,识别出所述用户手部的手势动作。
第二方面,本申请实施例还提供一种手势识别装置,包括:
第一处理模块,用于在手势识别功能开启且存在满足预设条件的射频电路的情况下,将所述射频电路调整为用于手势识别的目标工作模式,其中,处于所述目标工作模式的所述射频电路包括至少一个发射通路和至少一个接收通路;
获取模块,用于获取与反射信号相关的第一信息,其中,所述第一信息包括所述反射信号与探测信号之间的差频信息,或者,所述第一信息包括所述反射信号与探测信号之间的差频信息以及所述反射信号到达不同接收通路的天线的相位差信息,所述探测信号为通过所述发射通路发送的信号,所述反射信号为所述探测信号被用户手部反射后,由所述接收通路接收的信号;
手势识别模块,用于根据所述第一信息,识别出所述用户手部的手势动作。
第三方面,本申请实施例提供了一种电子设备,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的手势识别方法的步骤。
第四方面,本申请实施例还提供了一种可读存储介质,所述可读存储介质上存储有程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的手势识别方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的手势识别方法。
本申请实施例中,在手势识别功能开启且存在满足预设条件的射频电路的情况下,将所述射频电路调整为用于手势识别的目标工作模式,其中,处于所述目标工作模式的所述射频电路包括至少一个发射通路和至少一个接收通路;获取与反射信号相关的第一信息,其中,所述第一信息包括所述反射信号与探测信号之间的差频信息,或者,所述第一信息包括所述反射信号与探测信号之间的差频信息以及所述反射信号到达不同接收通路的天线的相位差信息,所述探测信号为通过所述发射通路发送的信号,所述反射信号为所述探测信号被用户手部反射后,由所述接收通路接收的信号;根据所述第一信息,识别出所述用户手部的手势动作,如此,通过复用电子设备上已有的射频电路实现手势识别,无需增加额外的模块,从而降低制造成本以及整机功耗。
附图说明
图1为本申请实施例电子设备的射频架构的结构示意图;
图2为本申请实施例提供的手势识别方法的流程示意图;
图3为本申请实施例提供的手势识别装置的结构示意图;
图4为本申请实施例提供的电子设备的结构示意图;
图5为本申请实施例提供的电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面将结合附图,通过具体的实施例及其应用场景对本申请实施例提供的手势识别方法进行详细地说明。
为使本领域技术人员更好的理解本发明实施例的方法,先进行如下说明。
本申请实施例的方法适用于如图1所示的射频架构,该射频架构应用于电子设备,该电子设备支持毫米波波段。比如,5G网络的FR2频段,该频段的的频率范围为24GHz~52GHz,其波长为毫米级别,且频段带宽较宽可用于高精度手势识别。
其中,该射频架构包括:处理器、基带芯片和射频电路。其中,基带芯片分别与处理器和射频电路连接;射频电路包括:射频前端电路和天线模组,射频前端电路与天线模组连接。
这里,射频电路在电路结构上包括发射通路和接收通路。
其中,发射通路包括:收发器、功率放大器PA、滤波器Tx filter和第一天线。其中,PA分别连接收发器和滤波器Tx filter,滤波器Tx filter连接第一天线。
接收通路包括:收发器、低噪声放大器LNA、滤波器Rx filter和第二天线。其中,LNA分别连接收发器和滤波器Rx filter,滤波器Rx filter连接第二天线。这里,第一天线和第二天线为天线模组中的天线。
具体的,处理器通过接口电路与架构中各模块互连,负责数据处理和运算,是电子设备的核心。其中,具有AI功能的AI芯片可集成于处理器中。
基带芯片具有无线通信功能,包括无线通信协议、数据编解码等。
射频前端电路包括但不限于:与基带芯片连接收发器、混频器、功率放大器PA、滤波器、耦合器和低噪声放大器LNA。
需要说明的是,收发器为数字信号与模拟信号的转换器,用于接收和发射信号。功率放大器PA、滤波器、耦合器和低噪声放大器LNA等器件,实现中频信号到高频的毫米波信号的相互转换。
天线模组用于将毫米波辐射到空中,以及接收空中的毫米波信号。需要说明的是,该天线模组可包括毫米波天线阵列,通过该毫米波天线阵列上的多路天线同时工作,可实现MIMO、空分复用等功能。
这里,射频前端电路与天线模组可封装于同一模组(射频模组)内,省去在PCB上走线,降低功耗,PCB上仅需传输中频信号,中频信号在射频模组内完成混频、放大、滤波等功能。
如图2所示,为本申请实施例提供的手势识别方法的流程示意图,该方法应用于电子设备,下面就该图具体说明该方法的实施过程。
步骤201,在手势识别功能开启且存在满足预设条件的射频电路的情况下,将所述射频电路调整为用于手势识别的目标工作模式,其中,处于所述目标工作模式的所述射频电路包括至少一个发射通路和至少一个接收通路;
本步骤中,触发手势识别功能开启的方式有二,一者,通过用户操作触发手势识别功能开启;二者,识别到电子设备处于目标应用场景时,触发手势识别功能开启。
这里,电子设备能够自主识别应用场景,判断是否启动手势识别功能。例如,电子设备处于静止状态,且正在播放音频或者视频的应用场景为目标应用场景。在此场景下,用户期望通过手势识别完成音量调节、播放进度调节等操作的可能性较高,此时,触发手势识别功能开启。
可选地,预设条件包括以下中的一者:
当前不存在基于预设通信网络的通信事件;
这里,预设通信网络可为5G通信网络。
需要说明的是,在当前不存在基于预设通信网络(如5G通信网络)的通信事件的情况下,说明当前存在处于空闲状态的射频电路。
当前存在基于预设通信网络的通信事件,且所述预设通信网络的吞吐量小于预设阈值。
需要说明的是,在当前存在基于预设通信网络的通信事件,且所述预设通信网络的吞吐量小于预设阈值的情况下,可对射频电路的发射通路和接收通路进行合理分配,选取包括至少一个发射通路和接收通路的射频电路用于手势识别。
这里,在当前存在基于预设通信网络的通信事件,且所述预设通信网络的吞吐量大于预设阈值的情况下,说明当前所有的射频电路均需用于预设网络的通信事件,即没有处于空闲状态的射频电路可用于手势识别。此时,若是通过用户操作触发手势识别功能开启,则提示用户当前场景无法启动手势识别功能;若是通过电子设备自主识别应用场景,则该场景下不启动手势识别功能。
这里,处于目标工作模式的所述射频电路中的发射通路和接收通路均处于工作状态。也就是说,发射通路和接收通路同时工作。
步骤202,获取与反射信号相关的第一信息,其中,所述第一信息包括所述反射信号与探测信号之间的差频信息,或者,所述第一信息包括所述反射信号与探测信号之间的差频信息以及所述反射信号到达不同接收通路的天线的相位差信息,所述探测信号为通过所述发射通路发送的信号,所述反射信号为所述探测信号被用户手部反射后,由所述接收通路接收的信号;
可选地,所述探测信号为调频连续波信号。该调频连续波的波形可以是锯齿波或者三角波形或者前述两种波形的变体。这里,调频连续波信号即可测距又可测速。在发射通路在扫频周期内发射频率变化的连续波信号(即调频连续信号)时,被用户手部反射后的反射信号与发射信号之间一定的频率差值,即差频信息,通过该差频信息即可获得用户手部与电子设备之间的距离信息,从而实现手势识别。
步骤203,根据所述第一信息,识别出所述用户手部的手势动作。
本申请实施例的手势识别方法,在手势识别功能开启且存在满足预设条件的射频电路的情况下,将所述射频电路调整为用于手势识别的目标工作模式,其中,处于所述目标工作模式的所述射频电路包括至少一个发射通路和至少一个接收通路;获取与反射信号相关的第一信息,其中,所述第一信息包括所述反射信号与探测信号之间的差频信息,或者,所述第一信息包括所述反射信号与探测信号之间的差频信息以及所述反射信号到达不同接收通路的天线的相位差信息,所述探测信号为通过所述发射通路发送的信号,所述反射信号为所述探测信号被用户手部反射后,由所述接收通路接收的信号;根据所述第一信息,识别出所述用户手部的手势动作,如此,通过复用电子设备上已有的射频电路实现手势识别,无需增加额外的模块,从而降低制造成本以及整机功耗。
作为一可选地实现方式,本申请实施例的方法步骤201中将所述射频电路调整为用于手势识别的目标工作模式,可包括:
控制满足所述预设条件的射频前端电路与天线导通,使导通后形成的射频电路包括至少一个发射通路和至少一个接收通路;
本步骤可实现射频电路配置。如,由于5G通信时工作方式为时分复用TDD模式,同一天线在不同时刻下分别发射、接收信号,因此,复用5G射频电路时需通过开关完成射频电路配置。
具体的,通过第一开关控制所述预设条件的射频前端电路与目标天线导通。
以图1为例,天线模组包括第一天线1、第二天线2、第三天线3、第四天线和第一开关5,其中,所述第一开关5分别连接所述第一天线1、所述第二天线2、所述第三天线3、第四天线4和射频前端电路连接。
例如,可配置为1T3R通路,具体的,控制第一天线5的端口p1与端口p5连接,形成一路发射通路;控制第一天线5的端口p2、端口p3、端口p4分别与端口p8、端口p9、端口p10一一对应连接,形成3路接收通路。
控制所述发射通路的信号输出端与所述接收通路的混频器导通;
这里,通常情况,在通过射频电路执行预设通信网络的通信事件的情况下,射频电路处于用于收发信号的工作模式,射频电路中的发射通路和接收通路均与本振源混频,也就是说,发射通路的混频器与本振源混频,接收通路的混频器与本振源混频。所以,具体的,通过第二开关实现所述发射通路的信号输出端与所述接收通路的混频器导通。
可选地,以图1为例,第二开关6的动端与接收通路的混频器连接,第二开关6的第一不动端与本振源LO连接,第二开关6的第二不动端与发射通路的信号输出端连接。即,将从发射通路的信号输出端输出的发射信号通过耦合器耦合出来的部分能量,反馈到接收通路的混频电路。
在射频电路处于用于收发信号的工作模式的情况下,第二开关6的动端与第二开关6的第一不动端电连接,也就是,发射通路的混频器与本振源混频,接收通路的混频器与本振源混频。
在满足预设条件的射频电路处于目标工作模式的情况下,控制第二开关6的动端与第二开关6的第二不动端电连接,使所述发射通路的信号输出端与所述接收通路的混频器导通。
需要说明的是,本步骤中,通过控制处于目标工作模式的射频电路的发射通路的信号输出端与接收通路的混频器导通,能够使得后续通过发射通路的发射信号(即探测信号)与接收通路接收的接收信号(即反射信号)混频,得到反射信号与探测信号之间的差频信息,从而用于手势识别中。
这里,处于目标工作模式的射频电路的发射通路的个数以及接收通路的个数可根据需要设置。
在图1所示的示例中,处于目标工作模式的射频电路包括一路发射通路,三路接收通路,即1T3R,即接收通路的个数多于发射通路的个数,如此设置,可以提高电子设备对用户手部(尤其是手指)位置判断的精度,原因在于,三个接收通路上的天线的位置不同,与用户的同一只手或者手指的相对位置也不同,从而实现定位精度。
实际中,还可以设置为2T2R,即每个发射通路对应2路接收通路,合并起来则有4路接收通路,同样的,也可以提高电子设备对用户手部(尤其是手指)位置判断的精度,原因同上。上述仅为示例,可根据实际需求配置更多的天线,这里不做具体限定。
控制所述发射通路以第一反射功率发送探测信号,其中,所述第一反射功率由预设用于手势识别的距离检测范围确定。
这里,本申请实施例中手势识别为近距离应用,无需发射大功率信号,发射较小功率信号可降低功耗减少能量消耗。
作为一可选的实现方式,所述差频信息为多个连续周期内的差频信息;本申请实施例的方法步骤203包括:
对所述反射信号与探测信号的差频信息进行一维傅里叶变换,得到与用户手部的距离信息;
这里,射频电路中的天线到用户手部的距离越远,则接收到的反射信号相对于探测信号的时延越长,故在同一时刻,反射信号与探测信号的差频越大,因此差频信息对应距离。本步骤中,通过一维傅里叶变换,将时域信息转换为频域信息,识别到频点,从而得到电子设备,具体的是,射频电路中的天线到用户手部的距离信息。
对所述反射信号与探测信号的差频信息进行二维傅里叶变换,得到所述用户手部的速度信息;
本步骤中,差频信息为多个连续周期内的差频信息。以三角波为例,一个周期具体指的是发射信号(探测信号)从低频扫到高频,再从高频扫到低频,发射通路一直在工作,则存在多个连续周期的信号。
具体的,通过第一个周期的信号得到差频信息1(代表距离1),与第二周期的差频信息2(代表距离2),若差频信息1中的频率差值大于差频信息2中的频率差值,说明距离1大于距离2,则说明用户手部在第二周期比在第一周期距离电子设备更远,如此,通过变化的距离与时间,即二维傅里叶变换,即可计算得到所述用户手部的速度信息。
在所述第一信息未包括所述反射信号到达不同接收通路的天线的相位差信息的情况下,根据所述距离信息和所述速度信息,识别出所述用户手部的手势动作;
这里,在所述第一信息未包括所述反射信号到达不同接收通路的天线的相位差信息,说明第一信息仅包括反射信号与探测信号之间的差频信息,且满足预设条件的射频电路的接收通路的个数为1个。因此,可根据距离信息和速度信息,识别出用户手部的手势动作,此时,可以识别到基础的手势动作。
为了消除多普勒频移效应,即物体运动时导致反射回来的反射信号出现频率偏移,进而导致计算出的距离信息有偏差,进一步的,作为一可选的实现方式,对所述反射信号与探测信号的频差信息进行二维傅里叶变换,得到所述用户手部的速度信息之后,本申请实施例的方法还可包括:
基于所述速度信息,对所述距离信息进行校准,得到校准后的距离信息。
需要说明的是,校准后的距离信息是消除了多普勒频移后的准确的距离信息。
这里,对于距离校准简要说明,以三角波为例,前半周期,低频扫到高频,存在正偏移;后半周期,高频扫回低频,存在负偏移,二者可以抵消。这里,后半周期比前半周期,位置也发生了变化,故距离校准时,将速度信息也考虑进来。
在所述第一信息包括所述反射信号到达不同接收通路的天线的相位差信息的情况下,根据所述距离信息、所述速度信息和所述相位差信息,识别出所述用户手部的手势动作。
这里,在所述第一信息包括所述反射信号到达不同接收通路的天线的相位差信息,说明第一信息包括反射信号与探测信号之间的差频信息和天线的相位差信息,且满足预设条件的射频电路的接收通路的个数多于1个。因此,可根据距离信息、速度信息和相位差信息,识别出用户手部的手势动作,此时,可以识别到复杂的手势动作。
需要说明的是,可以将距离信息、速度信息和角度信息作为样本数据,进行机器学习,其中上述信息作为神经网络的输入,通过训练得到用于识别手势动作的神经网络。
作为一可选的实现方式,在步骤203之后,本申请实施例的方法还可包括:
响应于所述手势动作对应的手势指令。
这里,手势动作与手势指令具有对应关系,也就是说,不同的手势动作,结合电子设备的当前应用场景,对应不同的手势指令。
通过前述方法识别到手势动作后,得到对应的手势指令并响应该手势指令,执行对应的事件。
本申请实施例通过复用电子设备上的射频电路,并利用电子设备强大的数据处理能力和AI能力,在不增加额外成本,不牺牲机身空间与外观美感的前提下,实现了手势识别的交互方式,使得用户得到了更便捷和有趣的操作体验,提升用户对电子设备的感知价值。
需要说明的是,通常电子设备会应用3~4个天线模组,并分布在机身四周,以获得全向性,将多组天线模组级联起来,可实现全方位的手势识别,同时利用多发多收,提升识别精度。
本申请实施例的手势识别方法,在手势识别功能开启且存在满足预设条件的射频电路的情况下,将所述射频电路调整为用于手势识别的目标工作模式,其中,处于所述目标工作模式的所述射频电路包括至少一个发射通路和至少一个接收通路;获取与反射信号相关的第一信息,其中,所述第一信息包括所述反射信号与探测信号之间的差频信息,或者,所述第一信息包括所述反射信号与探测信号之间的差频信息以及所述反射信号到达不同接收通路的天线的相位差信息,所述探测信号为通过所述发射通路发送的信号,所述反射信号为所述探测信号被用户手部反射后,由所述接收通路接收的信号;根据所述第一信息,识别出所述用户手部的手势动作,如此,通过复用电子设备上已有的射频电路实现手势识别,无需增加额外的模块,从而降低制造成本以及整机功耗。
需要说明的是,本申请实施例提供的手势识别方法,执行主体可以为手势识别装置,或者该手势识别装置中的用于执行手势识别方法的控制模块。本申请实施例中以手势识别装置执行手势识别方法为例,说明本申请实施例提供的手势识别装置。
如图3所示,为本申请实施例提供的手势识别装置的结构示意图。该手势识别装置300可以包括:
第一处理模块301,用于在手势识别功能开启且存在满足预设条件的射频电路的情况下,将所述射频电路调整为用于手势识别的目标工作模式,其中,处于所述目标工作模式的所述射频电路包括至少一个发射通路和至少一个接收通路;
获取模块302,用于获取与反射信号相关的第一信息,其中,所述第一信息包括所述反射信号与探测信号之间的差频信息,或者,所述第一信息包括所述反射信号与探测信号之间的差频信息以及所述反射信号到达不同接收通路的天线的相位差信息,所述探测信号为通过所述发射通路发送的信号,所述反射信号为所述探测信号被用户手部反射后,由所述接收通路接收的信号;
手势识别模块303,用于根据所述第一信息,识别出所述用户手部的手势动作。
可选地,所述第一处理模块301包括:
第一控制单元,用于控制满足所述预设条件的射频前端电路与天线导通,使导通后形成的射频电路包括至少一个发射通路和至少一个接收通路;
第二控制单元,用于控制所述发射通路的信号输出端与所述接收通路的混频器导通;
第三控制单元,用于控制所述发射通路以第一反射功率发送探测信号,其中,所述第一反射功率由预设用于手势识别的距离检测范围确定。
可选地,所述预设条件包括以下中的一者:
当前不存在基于预设通信网络的通信事件;
当前存在基于预设通信网络的通信事件,且所述预设通信网络的吞吐量小于预设阈值。
可选地,所述差频信息为多个连续周期内的差频信息;相应的,所述手势识别模块303包括:
第一计算单元,用于对所述反射信号与探测信号的差频信息进行一维傅里叶变换,得到与用户手部的距离信息;
第二计算单元,用于对所述反射信号与探测信号的差频信息进行二维傅里叶变换,得到所述用户手部的速度信息;
第一手势识别单元,用于在所述第一信息未包括所述反射信号到达不同接收通路的天线的相位差信息的情况下,根据所述距离信息和所述速度信息,识别出所述用户手部的手势动作;
第二手势识别单元,用于在所述第一信息包括所述反射信号到达不同接收通路的天线的相位差信息的情况下,根据所述距离信息、所述速度信息和所述相位差信息,识别出所述用户手部的手势动作。
可选地,所述装置300还包括:
校准模块,用于基于所述速度信息,对所述距离信息进行校准,得到校准后的距离信息。
可选地,所述探测信号为调频连续波信号。
可选地,所述装置300还包括:
响应模块,用于响应于所述手势动作对应的手势指令。
本申请实施例中的手势识别装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为网络附属存储器(Network AttachedStorage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的手势识别装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的手势识别装置能够实现图2的方法实施例实现的各个过程,为避免重复,这里不再赘述。
本申请实施例的手势识别装置,第一处理模块在手势识别功能开启且存在满足预设条件的射频电路的情况下,将所述射频电路调整为用于手势识别的目标工作模式,其中,处于所述目标工作模式的所述射频电路包括至少一个发射通路和至少一个接收通路;获取模块获取与反射信号相关的第一信息,其中,所述第一信息包括所述反射信号与探测信号之间的差频信息,或者,所述第一信息包括所述反射信号与探测信号之间的差频信息以及所述反射信号到达不同接收通路的天线的相位差信息,所述探测信号为通过所述发射通路发送的信号,所述反射信号为所述探测信号被用户手部反射后,由所述接收通路接收的信号;手势识别模块根据所述第一信息,识别出所述用户手部的手势动作,如此,通过复用电子设备上已有的射频电路实现手势识别,无需增加额外的模块,从而降低制造成本以及整机功耗。
可选地,如图4所示,本申请实施例还提供一种电子设备400,包括处理器401,存储器402,存储在存储器402上并可在所述处理器401上运行的程序或指令,该程序或指令被处理器401执行时实现上述手势识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图5为实现本申请各个实施例的一种电子设备的硬件结构示意图。
该电子设备500包括但不限于:射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、处理器510、以及电源511等部件。
本领域技术人员可以理解,电子设备500还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器510逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图5中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器510,用于在手势识别功能开启且存在满足预设条件的射频电路的情况下,将所述射频电路调整为用于手势识别的目标工作模式,其中,处于所述目标工作模式的所述射频电路包括至少一个发射通路和至少一个接收通路;获取与反射信号相关的第一信息,其中,所述第一信息包括所述反射信号与探测信号之间的差频信息,或者,所述第一信息包括所述反射信号与探测信号之间的差频信息以及所述反射信号到达不同接收通路的天线的相位差信息,所述探测信号为通过所述发射通路发送的信号,所述反射信号为所述探测信号被用户手部反射后,由所述接收通路接收的信号;根据所述第一信息,识别出所述用户手部的手势动作。
本申请实施例中,通过复用电子设备上已有的射频电路实现手势识别,无需增加额外的模块,从而降低制造成本以及整机功耗。
可选地,处理器510,还用于:
控制满足所述预设条件的射频前端电路与天线导通,使导通后形成的射频电路包括至少一个发射通路和至少一个接收通路;
控制所述发射通路的信号输出端与所述接收通路的混频器导通;
控制所述发射通路以第一反射功率发送探测信号,其中,所述第一反射功率由预设用于手势识别的距离检测范围确定。
可选地,所述预设条件包括以下中的一者:
当前不存在基于预设通信网络的通信事件;
当前存在基于预设通信网络的通信事件,且所述预设通信网络的吞吐量小于预设阈值。
可选地,所述差频信息为多个连续周期内的差频信息;处理器510,还用于:
对所述反射信号与探测信号的差频信息进行一维傅里叶变换,得到与用户手部的距离信息;
对所述反射信号与探测信号的差频信息进行二维傅里叶变换,得到所述用户手部的速度信息;
在所述第一信息未包括所述反射信号到达不同接收通路的天线的相位差信息的情况下,根据所述距离信息和所述速度信息,识别出所述用户手部的手势动作;
在所述第一信息包括所述反射信号到达不同接收通路的天线的相位差信息的情况下,根据所述距离信息、所述速度信息和所述相位差信息,识别出所述用户手部的手势动作。
可选地,处理器510,还用于:
基于所述速度信息,对所述距离信息进行校准,得到校准后的距离信息。
可选地,所述探测信号为调频连续波信号。
可选地,处理器510,还用于:
响应于所述手势动作对应的手势指令。
本申请实施例中,通过复用电子设备上已有的射频电路实现手势识别,无需增加额外的模块,从而降低制造成本以及整机功耗。
应理解的是,本申请实施例中,输入单元504可以包括图形处理器(GraphicsProcessing Unit,GPU)5041和麦克风5042,图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元506可包括显示面板5061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板5061。用户输入单元507包括触控面板5051以及其他输入设备5072。触控面板5051,也称为触摸屏。触控面板5051可包括触摸检测装置和触摸控制器两个部分。其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器509可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器510可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器510中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述手势识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述手势识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
- 一种手势识别方法、手势识别装置及电子设备
- 手势识别装置、手势识别方法、以及电子设备