掌桥专利:专业的专利平台
掌桥专利
首页

基于动作识别的方法及装置

文献发布时间:2023-06-19 11:22:42


基于动作识别的方法及装置

技术领域

本申请涉及直播领域,具体而言,涉及一种基于动作识别的方法及装置。

背景技术

相关技术中,现有运动直播间没有与硬件结合的动作识别模式,用户无法通过一些硬件设备将自己的运动动作实时地与服务器进行交互,进而将自己的运动动作呈现在直播页面,并接收服务器的指示信息进而确定自身的动作是否标准(有效),因而导致用户难以确定自己所做的运动动作是否规范以及确定自己的运动次数,进而影响用户的训练效果,甚至因为用户自身运动的动作存在错误导致用户受伤,影响用户的运动体验和正常运动。

针对上述的问题,目前尚未提出有效的解决方案。

发明内容

本申请实施例提供了一种基于动作识别的方法及装置,以至少解决由于相关技术中没有与硬件结合的动作识别模式,导致的用户无法与直播间进行实时交互确定自身运动动作是否有效造成的用户难以确定自身的运动动作是否规范,影响用户的训练效果及用户的运动体验的技术问题。

根据本申请实施例的一个方面,提供了一种基于动作识别的交互方法,包括:通过第一可穿戴设备检测第一目标对象基于运动任务产生的运动数据,其中,该运动数据至少包括:第一预定动作的类型;判断第一预定动作是否满足第一预设标准动作;在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作。

可选地,判断第一预定动作是否满足第一预设标准动作之前,包括:确定第一预设标准动作中,参与的肢体的第一位置高度以及肢体与身体预定部位所形成夹角的第一角度;其中,第一位置高度为参与的肢体的最低位置高度,第一角度为肢体与身体预定部位所形成夹角的最小角度。

可选地,在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作,包括:在第一目标对象完成第一预定动作的过程中,参与的肢体的第二位置高度大于第一位置高度,以及肢体与身体预定部位所形成的第二角度大于第一角度的情况下;则确定第一预定动作为有效动作。

可选地,在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作后,包括:确定有效动作对应的次数为第一预定动作的运动次数。

可选地,在确定有效动作对应的次数为第一预定动作的运动次数之后,包括:在直播页面展示虚拟对象在执行有效动作的过程中对应的动作状态,以及与有效动作对应的运动次数。

可选地,在直播页面展示虚拟对象在执行有效动作的过程中对应的动作状态之后,方法还包括:判断有效动作是否满足第二预设标准动作,其中,第二预设标准动作为通过第二可穿戴设备检测的第二目标对象的第二预定动作:在有效动作不满足第二预设标准动作的情况下,取消有效动作对应的运动次数;在直播页面中展示提示信息,提示信息用于指示对第一目标对象的运动动作进行纠正。

可选地,判断有效动作是否满足第二预设标准动作,包括:确定有效动作的第一属性信息大小,其中,第一属性信息包括:动作频率及动作幅度;确定第二预设动作的第二属性信息大小,其中,第二属性信息包括:动作频率及动作幅度;在第一属性信息大小与第二属性信息大小的差值在预设范围以内的情况下,则确定有效动作满足第二预设标准动作。

根据本申请实施例的一个方面,还提供了一种基于动作识别的交互装置,包括:检测模块,用于通过第一可穿戴设备检测第一目标对象基于运动任务产生的运动数据,其中,该运动数据至少包括:第一预定动作的类型;判断模块,用于判断第一预定动作是否满足第一预设标准动作;确定模块,用于在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作。

根据本申请实施例的一个方面,还提供了一种非易失性存储介质,非易失性存储介质包括存储的程序,其中,在程序运行时控制非易失性存储介质所在设备执行任意一种基于动作识别的交互方法。

根据本申请实施例的一个方面,还提供了一种处理器,处理器用于运行程序,其中,程序运行时执行任意一种基于动作识别的交互方法。

在本申请实施例中,采用基于可穿戴设备对用户动作进行识别的方式,通过第一可穿戴设备检测第一目标对象基于运动任务产生的运动数据,其中,该运动数据至少包括:第一预定动作的类型;判断第一预定动作是否满足第一预设标准动作;在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作,达到了将第一可穿戴设备检测大的第一预定动作发送至服务器,使服务器将该第一预定动作与自身配置的第一预设标准动作进行比对,进而自动确定该第一预定动作是否规范的目的,从而实现了基于可穿戴设备对用户的动作进行识别并确定该动作是否规范有效的技术效果,进而解决了由于相关技术中没有与硬件结合的动作识别模式,导致的用户无法与直播间进行实时交互确定自身运动动作是否有效造成的用户难以确定自身的运动动作是否规范,影响用户的训练效果及用户的运动体验的技术问题。

附图说明

此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:

图1是根据本申请实施例的一种可选的基于动作识别的交互方法的流程示意图;

图2是本申请一种可选的直播页面的示意图;

图3是根据本申请实施例的一种可选的基于动作识别的交互装置的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。

需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

根据本申请实施例,提供了一种基于动作识别的交互方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。

图1是根据本申请实施例的基于动作识别的交互方法,如图1所示,该方法包括如下步骤:

步骤S102,通过第一可穿戴设备检测第一目标对象基于运动任务产生的运动数据,其中,该运动数据至少包括:第一预定动作的类型;

步骤S104,判断第一预定动作是否满足第一预设标准动作;

步骤S106,在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作。

该基于动作识别的交互方法中,首先,服务器可通过第一可穿戴设备检测第一目标对象基于运动任务产生的运动数据,其中,该运动数据至少包括:第一预定动作的类型;然后,判断第一预定动作是否满足第一预设标准动作;最后在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作,达到了将第一可穿戴设备检测大的第一预定动作发送至服务器,使服务器将该第一预定动作与自身配置的第一预设标准动作进行比对,进而自动确定该第一预定动作是否规范的目的,从而实现了基于可穿戴设备对用户的动作进行识别并确定该动作是否规范有效的技术效果,进而解决了由于相关技术中没有与硬件结合的动作识别模式,导致的用户无法与直播间进行实时交互确定自身运动动作是否有效造成的用户难以确定自身的运动动作是否规范,影响用户的训练效果及用户的运动体验的技术问题。

需要说明的是,该第一预设标准动作为服务器预先存储的标准动作,第一可穿戴设备包括但不限于:运动手环、运动首饰、运动手表等智能佩戴设备。

本申请一些可选的实施例中,可通过以下方式判断第一预定动作是否满足第一预设标准动作,具体的,确定第一预设标准动作中,参与的肢体的第一位置高度以及肢体与身体预定部位所形成夹角的第一角度,需要说明的是,第一位置高度为参与的肢体的最低位置高度,第一角度为肢体与身体预定部位所形成夹角的最小角度,进一步地,在第一目标对象完成第一预定动作的过程中,参与的肢体的第二位置高度大于第一位置高度,以及肢体与身体预定部位所形成的第二角度大于第一角度的情况下,则确定第一预定动作为有效动作,即,将用户执行的第一预定动作与服务器中的第一预设标准动作进行比较,根据比较结果确定第一预定动作是否标准。

例如,用户所做的第一预定动作的类型为“开合跳”,可以理解的,用户在完成“开合跳”这一动作的过程中,参与的肢体有双臂,腿部等,可通过可穿戴设备采集用户双臂的手部位置距离头顶位置的距离(第二位置高度),并采集双臂在向上伸展过程中与上半身的侧面部位所形成的最大夹角(第二角度),当第二位置高度大于第一预设标准动作中的第一位置高度,且该第二角度大于第一预设标准动作中的第一角度,则确定用户所做的第一预定动作有效。

可以理解的,在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作后,可以确定有效动作对应的次数为第一预定动作的运动次数。

本申请一些可选的实施例中,在确定有效动作对应的次数为第一预定动作的运动次数之后,可以在直播页面展示虚拟对象在执行有效动作的过程中对应的动作状态,以及与有效动作对应的运动次数,以方便用户实时的在自己所持有的终端上查看自己的运动状态,图2是本申请一种可选的直播页面的示意图,如图2所示,图中右下角的3D虚拟人物为与用户对应的虚拟人物,该虚拟人物可展示用户的运动状态,图中中下位置显示的训练时间进度条,左下方显示的是第一目标对象对应的运动次数,在左上方显示当前直播间所有用户的运动次数,容易注意到的,该直播页面还可以展示用户消耗的热量,以及用户所在团队的消耗的总热量及团队成员的平均消耗的热量等信息。

本申请一些实施例中,在直播页面展示虚拟对象在执行有效动作的过程中对应的动作状态之后,还可以判断有效动作是否满足第二预设标准动作,其中,第二预设标准动作为通过第二可穿戴设备检测的第二目标对象的第二预定动作:在有效动作不满足第二预设标准动作的情况下,取消有效动作对应的运动次数;在直播页面中展示提示信息,提示信息用于指示对第一目标对象的运动动作进行纠正,具体地,该第二可穿戴设备为教练(第二目标对象)佩戴的设备,通过该第二可穿戴设备检测教练的所做的动作,进而实现对用户所做的动作的矫正,并通过对比教练的动作以及用户的动作,在用户所持有的移动终端的直播页面显示提示信息,以用于提示用户纠正动作。

具体的,可通过以下方式判断有效动作是否满足第二预设标准动作:确定有效动作的第一属性信息大小,需要说明的是,该第一属性信息包括:动作频率及动作幅度,并确定第二预设动作的第二属性信息大小,该第二属性信息也可包括:动作频率及动作幅度,然后,在第一属性信息大小与第二属性信息大小的差值在预设范围以内的情况下,则确定有效动作满足第二预设标准动作。

为了更好理解的本申请的实施例,现结合具体的一个可选的应用场景对上述实施例进行说明:

教练在自身所持有的终端上(直播端)进行备课,备课后台(即,服务器配置端,)接收教练的设置,实现对课程小节进行配置,选择开启动作挑战(运动任务),设定挑战动作,设定挑战时长保存后,该节课生效可触发的动作挑战模式,然后,教练在直播时,在即将到动作挑战小节时,与导播配合在准确的时间,由导播触发动作挑战模式或者由设置的时间节点自动触发,也可由教练本人触发动作挑战模式,导播触发动作挑战模式后,用户端将看到动作挑战模式准备状态,准备状态在直播间右下角出现提示浮层,显示动作挑战的3D虚拟人物、挑战名称及挑战时长等信息,并开始准备阶段的倒计时,最后4秒退出准备状态,全屏倒计时,且可以配合独有的语音播报提示用户,在挑战即将开始,即,倒计时结束后,进入挑战状态并在入挑战状态后,直播间内所有控件收起,例如,用户的头像、送出的礼物等,仅展示与动作挑战模式的元素,例如,挑战进度条等,并展示挑战的前三名的排行榜,并每间隔1S刷新一次排行榜,用户可以自身对应的排行榜的名次、挑战时长进度条、及对应的3D虚拟人物,该3D虚拟人物会根用户的挑战动作做出相应动作,且根据该用户手环识别到的次数实时做动作;用户可长按屏幕5S退出动作挑战,并在挑战进度条走完后,挑战状态结束,展示跳转完成状态,展示挑战前3名数据、头像、昵称、展示5S后自动消失,恢复直播间正常其他控件。

图3是根据本申请实施例的一种可选的基于动作识别的交互装置,如图3所示,该装置包括:

检测模块40,用于通过第一可穿戴设备检测第一目标对象基于运动任务产生的运动数据,其中,该运动数据至少包括:第一预定动作的类型;

判断模块42,用于判断第一预定动作是否满足第一预设标准动作;

确定模块44,用于在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作。

该基于动作识别的交互装置中,检测模块40,用于通过第一可穿戴设备检测第一目标对象基于运动任务产生的运动数据,其中,该运动数据至少包括:第一预定动作的类型;判断模块42,用于判断第一预定动作是否满足第一预设标准动作;确定模块44,用于在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作,达到了将第一可穿戴设备检测大的第一预定动作发送至服务器,使服务器将该第一预定动作与自身配置的第一预设标准动作进行比对,进而自动确定该第一预定动作是否规范的目的,从而实现了基于可穿戴设备对用户的动作进行识别并确定该动作是否规范有效的技术效果,进而解决了由于相关技术中没有与硬件结合的动作识别模式,导致的用户无法与直播间进行实时交互确定自身运动动作是否有效造成的用户难以确定自身的运动动作是否规范,影响用户的训练效果及用户的运动体验的技术问题。

本申请一些可选的实施例中,可通过以下方式判断第一预定动作是否满足第一预设标准动作,具体的,确定第一预设标准动作中,参与的肢体的第一位置高度以及肢体与身体预定部位所形成夹角的第一角度,需要说明的是,第一位置高度为参与的肢体的最低位置高度,第一角度为肢体与身体预定部位所形成夹角的最小角度,进一步地,在第一目标对象完成第一预定动作的过程中,参与的肢体的第二位置高度大于第一位置高度,以及肢体与身体预定部位所形成的第二角度大于第一角度的情况下,则确定第一预定动作为有效动作,即,将用户执行的第一预定动作与服务器中的第一预设标准动作进行比较,根据比较结果确定第一预定动作是否标准。

本申请一些可选的实施例中,在确定有效动作对应的次数为第一预定动作的运动次数之后,可以在直播页面展示虚拟对象在执行有效动作的过程中对应的动作状态,以及与有效动作对应的运动次数,以方便用户实时的在自己所持有的终端上查看自己的运动状态,在直播页面展示虚拟对象在执行有效动作的过程中对应的动作状态之后,还可以判断有效动作是否满足第二预设标准动作,其中,第二预设标准动作为通过第二可穿戴设备检测的第二目标对象的第二预定动作:在有效动作不满足第二预设标准动作的情况下,取消有效动作对应的运动次数;在直播页面中展示提示信息,提示信息用于指示对第一目标对象的运动动作进行纠正,具体的,该第二可穿戴设备为教练(第二目标对象)佩戴的设备,通过该第二可穿戴设备检测教练的所做的动作,进而实现对用户所做的动作的矫正,并通过对比教练的动作以及用户的动作,在用户所持有的移动终端的直播页面显示提示信息,以用于提示用户纠正动作,可以理解的,通过这种方式,达到了使用户与直播间的教练进行实时交互,并根据直播界面的提示信息,对自身运动动作进行适当纠正的目的。

需要说明的是,该第一预设标准动作为服务器预先存储的标准动作,第一可穿戴设备和第二可穿戴设备均包括但不限于:运动手环、运动首饰、运动手表等智能佩戴设备。

根据本申请实施例的一个方面,还提供了一种非易失性存储介质,非易失性存储介质包括存储的程序,其中,在程序运行时控制非易失性存储介质所在设备执行任意一种基于动作识别的交互方法。

根据本申请实施例的一个方面,还提供了一种处理器,处理器用于运行程序,其中,程序运行时执行任意一种基于动作识别的交互方法。

具体地,上述存储介质用于存储执行以下功能的程序指令,实现以下功能:

通过第一可穿戴设备检测第一目标对象基于运动任务产生的运动数据,其中,该运动数据至少包括:第一预定动作的类型;判断第一预定动作是否满足第一预设标准动作;在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作。

具体地,上述处理器用于调用存储器中的程序指令,实现以下功能:

通过第一可穿戴设备检测第一目标对象基于运动任务产生的运动数据,其中,该运动数据至少包括:第一预定动作的类型;判断第一预定动作是否满足第一预设标准动作;在第一预定动作满足第一预设标准动作,确定第一预定动作为有效动作。

上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。

在本申请的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅是本申请的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。

相关技术
  • 动作识别装置、动作识别方法、存储介质及动作识别系统
  • 动作识别模型的训练方法、动作识别方法及相关装置
技术分类

06120112901854