掌桥专利:专业的专利平台
掌桥专利
首页

一种基于虚拟现实的练字方法、装置、系统及电子设备

文献发布时间:2023-06-19 19:28:50


一种基于虚拟现实的练字方法、装置、系统及电子设备

技术领域

本发明涉及虚拟现实技术领域,尤其涉及一种基于虚拟现实的练字方法、装置、系统及电子设备。

背景技术

虚拟现实技术在教育教学中的应用,为用户提供丰富学习资源的同时,提升了用户的学习体验,在教育教学领域内有着及其巨大的应用前景。传统的练字方式是通过在纸质版的字帖上进行训练,这种练字方法过程枯燥,不能为用户提供良好的练字氛围,因而练字效率较低。

发明内容

本发明提供了一种基于虚拟现实的练字方法、装置、系统及电子设备,通过虚拟现实技术在练字过程中的应用,为用户建立不同的虚拟的练字场景,增强用户练字的趣味性和体验感的同时,调动用户的书写训练积极性,进而提高练字的效率。

第一方面,本发明实施例提供了一种基于虚拟现实的练字方法,应用于客户端,所述客户端与虚拟现实眼镜、全景摄像仪、触控练字笔和写字板进行连接通信,该方法包括:

获取用户选择的目标虚拟场景和目标虚拟练字贴;

获取所述全景摄像仪实时采集到的当前用户画面,其中,当前用户画面中包括用户手握的触控练字笔和写字板;

基于所述目标虚拟场景和目标虚拟练字贴,对当前用户画面进行处理,生成当前虚拟场景画面;

将当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜,以使虚拟现实眼镜显示当前虚拟场景画面,并在当前虚拟画面中通过触控练字笔和写字板进行写字练习。

第二方面,本发明实施例还提供了一种基于虚拟现实的练字装置,集成于客户端,该装置包括:

场景选择模块,用于获取用户选择的目标虚拟场景和目标虚拟练字贴;

画面采集模块,用于获取所述全景摄像仪实时采集到的当前用户画面,其中,当前用户画面中包括用户手握的触控练字笔和写字板;

虚拟场景生成模块,用于基于所述目标虚拟场景和目标虚拟练字贴,对当前用户画面进行处理,生成当前虚拟场景画面;

场景呈现模块,用于将当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜,以使所述虚拟现实眼镜显示当前虚拟场景画面,并在当前虚拟画面中通过触控练字笔和写字板进行写字练习。

第三方面,本发明实施例还提供了一种基于虚拟现实的练字系统,所述系统包括:客户端、虚拟现实眼镜、全景摄像仪、触控练字笔和写字板;

其中,

所述客户端用于实现如第一方面所提供的基于虚拟现实的练字方法。

第四方面,本发明还提供了一种电子设备,该电子设备包括:

至少一个处理器;以及

与所述至少一个处理器通信连接的存储器;其中,

所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的基于虚拟现实的练字方法。

本发明实施例的技术方案,通过获取用户选择的目标虚拟场景和目标虚拟练字贴;获取全景摄像仪实时采集到的当前用户画面,其中,当前用户画面中包括用户所述手握的触控练字笔和写字板;基于目标虚拟场景和目标虚拟练字贴,对当前用户画面进行处理,生成当前虚拟场景画面;将当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜,以使虚拟现实眼镜显示当前虚拟场景画面,并在当前虚拟画面中通过触控练字笔和写字板进行写字练习,解决了传统练字方法过程枯燥,不能为用户提供良好的练字氛围,练字效率低的问题,增强用户练字趣味性和体验感,同时调动用户书写训练积极性,进而提高了练字的效率。

应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

附图说明

为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是根据本发明实施例一提供的一种基于虚拟现实的练字方法的流程图;

图2是根据本发明实施例二提供的一种基于虚拟现实的练字方法的流程图;

图3是根据本发明实施例三提供的一种基于虚拟现实的练字方法的流程图;

图4是根据本发明实施例四提供的一种基于虚拟现实的练字装置的结构示意图;

图5是根据本发明实施例五提供的一种基于虚拟现实的练字系统的结构示意图

图6是实现本发明实施例的基于虚拟现实的练字方法的电子设备的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。

需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

实施例一

图1为本发明实施例一提供的一种基于虚拟现实的练字方法的流程图,本实施例可适用于用户在虚拟场景下进行书写训练的情况,该方法可以由基于虚拟现实的练字装置来执行,该基于虚拟现实的练字装置可以采用硬件和/或软件的形式实现,该基于虚拟现实的练字装置可集成于客户端中。客户端与虚拟现实眼镜、全景摄像仪、触控练字笔和写字板进行连接通信。其中,客户端与虚拟现实交互端可集成在电脑、手机等终端设备上实现双方之间的数据传输。虚拟现实交互端可以通过蓝牙、数据线等方式与虚拟现实眼镜、全景摄像仪、触控练字笔和写字板之间进行连接,进而通过虚拟现实交互端实现客户端与虚拟现实眼镜、全景摄像仪、触控练字笔和写字板之间的间接通信。

如图1所示,该方法包括:

S110、获取用户选择的目标虚拟场景和目标虚拟练字贴。

其中,目标虚拟场景是指用户选择的虚拟练字情境。目标虚拟场景可以是但不限于图书馆场景、公园场景、操场场景等。目标虚拟练字帖是指用户选择的虚拟字帖。进一步的,字帖可以包括很多字体如楷书、隶书、小篆等。需要说明的是,在用户首次登录虚拟现实教学客户端时,虚拟现实教学页面中会有默认的虚拟场景和虚拟练字贴,用户可根据实际需求进行自定义虚拟场景和虚拟练字贴。

具体地,虚拟场景与虚拟练字帖是预先保存在虚拟现实教学服务器中的教学资源,进而在用户访问服务器时以图片的形式呈现在客户端界面上,供用户选择。用户通过登录客户端,进入虚拟现实教学页面,该页面可以包括推荐的多个虚拟场景和多个虚拟练字贴,也可以包括用户自定义的虚拟场景和虚拟练字贴。用户在页面中的场景和字帖选项中根据个人需求选择目标虚拟场景和目标虚拟字帖。

示例性的,用户在平板上登录客户端,在虚拟现实教学页面的虚拟场景模块中选择公园场景作为目标虚拟场景;在虚拟字帖模块中选择楷书作为目标虚拟字帖。

S120、获取全景摄像仪实时采集到的当前用户画面,其中,当前用户画面中包括用户手握的触控练字笔和写字板。

其中,全景摄像仪是设置在用户现实场景中合适位置,可以对用户练字过程中的用户整体画面进行采集的设备。当前用户画面是指当前时刻所采集到的用户整体画面。触控练字笔是用来进行书写训练的,可感应当前用户抓笔动作的设备。写字板是用来进行书写和展示书写结果的设备。

具体地,通过全景摄像仪对用户练字时的画面进行实时的采集,并将采集到的当前用户画面实时上传至虚拟现实交互端中,通过虚拟现实交互端将当前用户画面发送至客户端。示例性地,当前用户画面中包括用户手握的触控练字笔和写字板。

S130、基于目标虚拟场景和目标虚拟练字贴,对当前用户画面进行处理,生成当前虚拟场景画面。

其中,当前虚拟场景画面是指用户在选择的目标虚拟场景中,进行练字的画面,进一步的,写字板上是用户选择的目标虚拟练字帖。

具体地,通过客户端将用户选择的目标虚拟场景与目标虚拟字帖与当前用户画面进行裁剪和拼接处理,进而在客户端上生成当前虚拟场景画面。

可选的,S130可以包括:获取当前用户画面中的写字板区域和除触控练字笔和写字板之外的背景区域;将目标虚拟场景的画面渲染到背景区域,以及将目标虚拟练字贴渲染到写字板区域,生成当前虚拟场景画面。

具体地,基于客户端对当前用户画面进行抠图处理,去掉当前用户画面中的写字板对应的区域以及除触控练字笔和写字板之外的背景区域,将预先选择的目标虚拟字渲染到写字板的区域,将目标虚拟场景渲染到背景区域,得到当前虚拟场景画面。

S140、将当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜,以使虚拟现实眼镜显示当前虚拟场景画面,并在当前虚拟画面中通过触控练字笔和写字板进行写字练习。

其中,虚拟现实眼镜是一种头戴式显示设备,将人对外界的视觉、听觉封闭,引导用户产生一种身在虚拟环境中的感觉。

具体地,将客户端生成的当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜中,使用户可以沉浸在目标虚拟场景中,并通过触控练字笔和写字板进行写字练习。

本发明实施例的技术方案,通过获取用户选择的目标虚拟场景和目标虚拟练字贴;获取全景摄像仪实时采集到的当前用户画面,其中,当前用户画面中包括用户手握的触控练字笔和写字板;基于目标虚拟场景和目标虚拟练字贴,对当前用户画面进行处理,生成当前虚拟场景画面;将当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜,以使虚拟现实眼镜显示当前虚拟场景画面,并在当前虚拟画面中通过触控练字笔和写字板进行写字练习,为用户练字搭建了多种虚拟场景,为用户练字提供良好的氛围,解决了传统练字方法过程枯燥的问题,调动了用户的练字积极性,进而提高了练字效率。

在上述技术方案基础上,该方法还可以包括:根据当前用户画面确定当前用户坐姿;若检测到当前用户坐姿不是标准坐姿,则将标准坐姿画面发送至虚拟现实眼镜,以使虚拟现实眼镜将标准坐姿画面叠加到当前虚拟场景画面中进行显示。

其中,当前用户坐姿是指在用户进行练字时当前时刻的姿势。标准坐姿画面可以是一个虚拟的人物保持标准坐姿的画面。

具体地,通过全景摄像仪全程记录用户在进行练字时的坐姿,并将相关的数据或照片上传至虚拟现实交互端。具体地通过计算用户计算头部与写字板之间的距离、脖子与肩膀垂直角度等数据,与标准坐姿对应的数据进行比对,确定当前用户坐姿是否为标准坐姿,若上述数据与标准坐姿对应的数据偏差大于预设范围,则可以确定当前用户坐姿不是标准坐姿,则将保持标准坐姿的虚拟人物画面发送至虚拟现实眼镜,以使用户可以通过虚拟现实眼镜看到标准坐姿画面,进而进行坐姿的调整。

在上述技术方案基础上,该方法还可以包括:获取触控练字笔发送的当前握笔着力点信息;基于当前握笔着力点信息,检测用户握笔姿势是否为标准握笔姿势;若检测到用户握笔姿势不是标准握笔姿势,则将标准握笔姿势画面发送至虚拟现实眼镜,以使虚拟现实眼镜将标准握笔姿势画面叠加到当前虚拟场景画面中进行显示。

其中,着力点信息是指用户在练字手指接触到触控练字笔时,由触控练字笔接收到的接触点的位置信息以及对应的压力信息。标准握笔姿势画面是用来向用户展示标准的握笔姿势的画面,可以是但不限于是一个虚拟的手以正确的握笔姿势握着手中的虚拟触控练字笔的画面,进一步的,标准握笔姿势画面可以自定义。

具体地,在用户进行写字练习时,触控练字笔会记录用户手指接触触控练字笔表面的位置信息以及力度信息,根据位置信息以及力度信息检测用户的握笔姿势是否为标准握笔姿势。若检测到用户手指与触控练字笔的接触位置不在预设位置上,或预设位置上检测到的压力值与预设的压力值偏差太大,则可以确定用户握笔姿势不是标准握笔姿势,则将自定义设置的标准握笔姿势画面通过虚拟现实交互端发送至虚拟现实眼镜中,以使用户能在当前虚拟场景中,看到标准握笔姿势画面并改正握笔姿势。

实施例二

图2为本发明实施例二提供的一种基于虚拟现实的练字方法的流程图,在前述实施例的基础上,可以对基于虚拟现实的练字方法中使用到的写字板以及运笔训练方法进行说明,其具体的实施方式可以参见本发明实施例的详细阐述,其中,与上述实施例相同或者相应的技术术语在此不再赘述。

如图2所示,该方法包括:

S210、获取用户选择的目标虚拟场景和目标虚拟练字贴。

S220、获取全景摄像仪实时采集到的当前用户画面,其中,当前用户画面中包括用户手握的触控练字笔和写字板。

其中,写字板为点阵云轨迹写字板,点阵云轨迹写字板上分布有米字型的写字格,每个写字格是以点云均匀排布在每个笔画上。

具体地,点阵云轨迹写字板上分布着米字型的写字格,同时米字格中包括目标虚拟字帖的背景,用户在进行练字时,通过点阵云轨迹写字板可监测到每一笔落下的位置以及笔端在点阵云轨迹写字板划过的轨迹。

S230、基于目标虚拟场景和目标虚拟练字贴,对当前用户画面进行处理,生成当前虚拟场景画面。

S240、将当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜,以使虚拟现实眼镜显示当前虚拟场景画面,并在当前虚拟画面中通过触控练字笔和点阵云轨迹写字板进行写字练习。

S250、获取点阵云轨迹写字板发送的当前笔画对应的当前运笔着力点信息。

其中,当前笔画是指用户在当前时刻在点阵云轨迹写字板上写下的笔画。运笔着力点信息是指落在点阵云轨迹写字板上的每一笔画中的每一点的位置信息以及每一笔画中每一点的力度信息。

具体地,通过点阵云轨迹写字板采集当前笔画中每一点的位置信息以及通过点阵云轨迹写字板中配置的压力传感器采集当前笔画中每一点对应的力度信息。

S260、检测当前运笔着力点信息是否满足当前笔画的标准运笔着力点信息。

其中,标准运笔着力点信息是指根据每个笔画预先设置的笔画位置信息以及笔画中每点接收到的压力信息。标准运笔着力点画面是用来向用户展示笔画每一点的理想位置以及需要加重力度的点所在位置的画面,可以是但不限于在点阵云轨迹写字板上对应的位置用红色填充当前笔画所在位置以及在需要加重力度的位置用特殊标记进行标注。

具体地,将点阵云轨迹写字板采集到的当前笔画对应的位置信息与点阵云轨迹写字板背景中相应笔画的位置进行对比,以及将点阵云轨迹写字板中的压力传感器采集到的当前笔画中每一个点的压力信息与预设的每个点的压力信息进行比较,根据比较结果判断当前运笔着力点信息是否满足当前笔画的标准运笔着力点信息。

S270、若否,则将当前笔画对应的标准运笔着力点画面发送至虚拟现实眼镜,以使虚拟现实眼镜将标准运笔着力点画面叠加到当前虚拟场景画面中进行显示。

具体地,若当前笔画的位置严重偏离点阵云轨迹写字板背景中相应笔画的位置或在当前笔画需要加重力度的点的位置上没有检测到比其他点更大的压力信息,则说明当前运笔着力点信息不满足当前笔画的标准运笔着力点信息,则通过虚拟现实交互端将当前笔画对应的标准运笔着力点画面发送至虚拟现实眼镜,将标准运笔着力点画面呈现在点阵云轨迹写字板上,来提醒用户进行改正。若当前运笔着力点信息满足当前笔画的标准运笔着力点信息,则可以在客户端上通过语音反馈或者其他方式,反馈用户运笔准确的信息,也可以默认不提醒。

本发明实施例技术方案,通过获取点阵云轨迹写字板发送的当前笔画对应的当前运笔着力点信息;检测当前运笔着力点信息是否满足当前笔画的标准运笔着力点信息;若否,则将当前笔画对应的标准运笔着力点画面发送至虚拟现实眼镜,以使虚拟现实眼镜将标准运笔着力点画面叠加到当前虚拟场景画面中进行显示,实时采集用户的运笔着力点信息,并通过客户端进行信息的反馈,判断用户运笔是否标准,并在用户运笔不标准时,在虚拟场景中进行及时反馈提示,增强用户练字趣味性和体验感,同时调动用户练字的积极性,进一步提高了练字效率。

实施例三

图3为本发明实施例三提供的一种基于虚拟现实的练字方法的流程图,在前述实施例的基础上,可以对基于虚拟现实的练字方法中的练字模式进行说明,其具体的实施方式可以参见本发明实施例的详细阐述,其中,与上述实施例相同或者相应的技术术语在此不再赘述。

如图3所示,该方法包括:

S310、获取用户选择的目标虚拟场景和目标虚拟练字贴。

S320、获取全景摄像仪实时采集到的当前用户画面,其中,当前用户画面中包括用户手握的触控练字笔和点阵云轨迹写字板。

S330、基于目标虚拟场景和目标虚拟练字贴,对当前用户画面进行处理,生成当前虚拟场景画面。

S340、将当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜,以使虚拟现实眼镜显示当前虚拟场景画面,并在当前虚拟画面中通过触控练字笔和点阵云轨迹写字板进行写字练习。

S350、获取用户选择的练字模式,若练字模式为书写教学模式,则执行S360;若练字教学模式为书写练习模式,则执行S370。

其中,练字模式是指用户进行练字时可以选择的模式,可以是但不限于书写教学模式和练字教学模式。

S360、将用户选择的目标教学视频发送至虚拟现实眼镜,以使虚拟现实眼镜将目标教学视频叠加到当前虚拟场景画面中进行显示。

其中,目标教学视频是用户在书写教学模式下进一步选择的教学视频。例如,教学视频可以是但不限于存储在服务器中的名师教学视频。

具体地,当用户选择的练字模式为书写教学模式时,用户可以通过在虚拟现实教学页面选择相应的教学视频作为目标教学视频,通过客户端将目标教学视频发送至虚拟现实眼镜中,通过虚拟现实眼镜将目标教学视频呈现在当前虚拟场景画面中,示例性地,用户可以调整目标教学视频在当前虚拟场景中的位置和窗口大小。

S370、基于触控练字笔上的扫描摄像头,采集用户书写的字形图像,并将对字形图像进行打分,将打分结果发送至虚拟现实眼镜,以使虚拟现实眼镜将打分结果叠加到当前虚拟场景画面中进行显示。

其中,扫描摄像头是安装在触控练字笔上的摄像装置,可以对用户当前的练字成果进行记录和保存。字形图像是用户练字时扫描摄像头采集到的字形图像。打分结果是通过客户端将标准字形与扫描摄像头采集到的字形图像进行对比,计算图像相似度得到的分数。

具体地,在用户选择的练字模式为书写练习模式时,通过扫描摄像头记录用户当前书写的字对应的字形图像,保存并发送至客户端,通过客户端对当前字对应的标准字形与采集到的字形图像进行相似度计算,得到当前字形图像的分数,并将该分数对应的数字或图像发送至虚拟现实眼镜,使用户通过虚拟现实眼镜可以看到当前字对应的分数。

本发明实施例的技术方案,通过获取用户选择的练字模式;若练字模式为书写教学模式,则将用户选择的目标教学视频发送至虚拟现实眼镜,以使虚拟现实眼镜将目标教学视频叠加到当前虚拟场景画面中进行显示;若练字教学模式为书写练习模式,则基于触控练字笔上的扫描摄像头,采集用户书写的字形图像,并将对字形图像进行打分,将打分结果发送至虚拟现实眼镜,以使虚拟现实眼镜将打分结果叠加到当前虚拟场景画面中进行显示,为用户提供书写教学模式和书写练习模式,以使用户在不同的模式下进行针对性的学习和训练,增强用户练字趣味性和体验感,同时调动用户练字的积极性,进一步地提高了练字效率。

实施例四

图4为本发明实施例四提供的一种基于虚拟现实的练字装置的结构示意图,该装置集成于客户端,所述客户端与虚拟现实交互端可集成在电脑、手机等终端设备上实现双方之间的数据传输,同时虚拟现实交互端可与虚拟现实眼镜、全景摄像仪、触控练字笔和写字板之间通过蓝牙、数据线等方式进行连接,进而通过虚拟现实交互端实现客户端与虚拟现实眼镜、全景摄像仪、触控练字笔和写字板之间的通信。

如图4所示,该装置包括:场景选择模块410、画面采集模块420、虚拟场景生成模块430以及场景呈现模块440,其中:

场景选择模块410,用于获取用户选择的目标虚拟场景和目标虚拟练字贴;画面采集模块420,用于获取全景摄像仪实时采集到的当前用户画面,其中,当前用户画面中包括用户手握的触控练字笔和写字板;虚拟场景生成模块430,用于基于目标虚拟场景和目标虚拟练字贴,对当前用户画面进行处理,生成当前虚拟场景画面;场景呈现模块440,用于将当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜,以使虚拟现实眼镜显示当前虚拟场景画面,并在当前虚拟画面中通过触控练字笔和写字板进行写字练习。

在上述各发明实施例的基础上,虚拟场景生成模块430具体包括:

背景区域获取单元,用于获取当前用户画面中的写字板区域和除触控练字笔和写字板之外的背景区域;

虚拟场景生成单元,用于将目标虚拟场景的画面渲染到背景区域,以及将目标虚拟练字贴渲染到写字板区域,生成当前虚拟场景画面。

在上述各发明实施例的基础上,基于虚拟现实的练字装置还包括:

坐姿训练模块,用于根据当前用户画面确定当前用户坐姿;若检测到当前用户坐姿不是标准坐姿,则将标准坐姿画面发送至虚拟现实眼镜,以使虚拟现实眼镜将标准坐姿画面叠加到当前虚拟场景画面中进行显示。

在上述各发明实施例的基础上,基于虚拟现实的练字装置还包括:

握笔训练模块,用于获取触控练字笔发送的当前握笔着力点信息;基于当前握笔着力点信息,检测用户握笔姿势是否为标准握笔姿势;若否,则将标准握笔姿势画面发送至虚拟现实眼镜,以使虚拟现实眼镜将标准握笔姿势画面叠加到当前虚拟场景画面中进行显示。

在上述各发明实施例的基础上,写字板为点阵云轨迹写字板,点阵云轨迹写字板上分布有米字型的写字格,每个写字格是以点云均匀排布在每个笔画上。

在上述各发明实施例的基础上,基于虚拟现实的练字装置还包括:

运笔训练模块,用于获取点阵云轨迹写字板发送的当前笔画对应的当前运笔着力点信息;检测当前运笔着力点信息是否满足当前笔画的标准运笔着力点信息;若否,则将当前笔画对应的标准运笔着力点画面发送至虚拟现实眼镜,以使虚拟现实眼镜将标准运笔着力点画面叠加到当前虚拟场景画面中进行显示。

在上述各发明实施例的基础上,基于虚拟现实的练字装置还包括:

练字模式选择模块,用于获取用户选择的练字模式;书写教学模块,用于若练字模式为书写教学模式,则将用户选择的目标教学视频发送至虚拟现实眼镜,以使虚拟现实眼镜将目标教学视频叠加到当前虚拟场景画面中进行显示;书写练习模块,用于若练字教学模式为书写练习模式,则基于触控练字笔上的扫描摄像头,采集用户书写的字形图像,并将对字形图像进行打分,将打分结果发送至虚拟现实眼镜,以使虚拟现实眼镜将打分结果叠加到当前虚拟场景画面中进行显示。

本发明实施例的技术方案,通过获取用户选择的目标虚拟场景和目标虚拟练字贴;获取全景摄像仪实时采集到的当前用户画面,其中,当前用户画面中包括用户手握的触控练字笔和写字板;基于目标虚拟场景和目标虚拟练字贴,对当前用户画面进行处理,生成当前虚拟场景画面;将当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜,以使虚拟现实眼镜显示当前虚拟场景画面,并在当前虚拟画面中通过触控练字笔和写字板进行写字练习,解决了传统练字方法过程枯燥,不能为用户提供良好的练字氛围,用户练字过程中得不到及时的反馈和指导进而导致练字效率低的问题。

本发明实施例所提供的基于虚拟现实的练字装置可执行本发明任意实施例所提供的基于虚拟现实的练字装置方法,具备执行方法相应的功能模块和有益效果。

实施例五

图5为本发明实施例五提供的一种基于虚拟现实的练字系统的结构示意图,本实施例可适用于基于虚拟现实技术搭建虚拟环境进行书写训练的应用场景中。

如图5所示,该系统具体包括:客户端510、虚拟现实眼镜520、全景摄像仪530、触控练字笔540和写字板550。

其中,客户端510与虚拟现实交互端可集成在电脑、手机等终端设备上实现双方之间的数据传输,同时虚拟现实交互端可与虚拟现实眼镜520、全景摄像仪530、触控练字笔540和写字板550之间通过蓝牙、数据线等方式进行连接,进而实现客户端510与虚拟现实眼镜520、全景摄像仪530、触控练字笔540和写字板550之间的通信。客户端510用于实现上述实施例所提供的基于虚拟现实的练字方法。

本发明实施例中的基于虚拟现实的练字系统,通过客户端获取用户选择的目标虚拟场景和目标虚拟练字贴;全景摄像仪实时采集到的当前用户画面,其中,当前用户画面中包括用户手握的触控练字笔和写字板;基于目标虚拟场景和目标虚拟练字贴,对当前用户画面进行处理,生成当前虚拟场景画面;将当前虚拟场景画面发送到用户佩戴的虚拟现实眼镜,以使虚拟现实眼镜显示当前虚拟场景画面,并在当前虚拟画面中通过触控练字笔和写字板进行写字练习,解决了传统练字方法过程枯燥,不能为用户提供良好的练字氛围,用户练字过程中得不到及时的反馈和指导进而导致练字效率低的问题。

实施例六

图6示出了可以用来实施本发明的实施例的电子设备10的结构示意图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本发明的实现。

如图6所示,电子设备10包括至少一个处理器11,以及与至少一个处理器11通信连接的存储器,如只读存储器(ROM)12、随机访问存储器(RAM)13等,其中,存储器存储有可被至少一个处理器执行的计算机程序,处理器11可以根据存储在只读存储器(ROM)12中的计算机程序或者从存储单元18加载到随机访问存储器(RAM)13中的计算机程序,来执行各种适当的动作和处理。在RAM 13中,还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM 12以及RAM 13通过总线14彼此相连。输入/输出(I/O)接口15也连接至总线14。

电子设备10中的多个部件连接至I/O接口15,包括:输入单元16,例如键盘、鼠标等;输出单元17,例如各种类型的显示器、扬声器等;存储单元18,例如磁盘、光盘等;以及通信单元19,例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。

处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理,例如基于虚拟现实的练字方法。

在一些实施例中,基于虚拟现实的练字方法可被实现为计算机程序,其被有形地包含于计算机可读存储介质,例如存储单元18。在一些实施例中,计算机程序的部分或者全部可以经由ROM 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM 13并由处理器11执行时,可以执行上文描述的基于虚拟现实的练字方法的一个或多个步骤。备选地,在其他实施例中,处理器11可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行基于虚拟现实的练字方法。

本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。

用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。

在本发明的上下文中,计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。备选地,计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。

为了提供与用户的交互,可以在电子设备上实施此处描述的系统和技术,该电子设备具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。

可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、区块链网络和互联网。

计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务中,存在的管理难度大,业务扩展性弱的缺陷。

应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本发明的技术方案所期望的结果,本文在此不进行限制。

上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

技术分类

06120115919628