掌桥专利:专业的专利平台
掌桥专利
首页

虚拟人的生成方法、装置、电子设备及存储介质

文献发布时间:2023-06-19 19:28:50


虚拟人的生成方法、装置、电子设备及存储介质

技术领域

本申请涉及虚拟人的生成技术领域,特别地涉及一种虚拟人的生成方法、装置、电子设备及存储介质。

背景技术

虚拟人是一种具有2D或3D的虚拟形象,包括不同姿态的真人、卡通、物体拟人形象等,可广泛应用于数字图像领域、智能媒体领域、教育、网课、文化宣传、直播互动、人机交互等。

现有的虚拟人合成技术大多是生成单个特定角色,并在在生成特定角色时,用户可以通过直接调节虚拟人物的参数、使用人物脸部图像或全身图像、或3D扫描仪所采集的数据来创建和设置个性化的虚拟人物,但是相关技术中的虚拟人物的外观、能力、背景等属性与用户的家中家用电器的没有相关性。

发明内容

针对上述问题,本申请提供一种虚拟人的生成方法、装置、电子设备及存储介质,能够将用户的头部特征与用户家电设备相融合来生成虚拟人,使得虚拟人物与家用电器存在关系。

本申请实施例提供一种虚拟人的生成方法,包括:

获取用户的头部图像和用户使用的家电设备的家电信息;

基于所述头部图像确定所述用户的头部特征;

基于所述头部特征生成虚拟人的头像;

基于所述家电信息确定目标家电设备,并基于所述目标家电设备生成所述虚拟人的躯干;

至少基于所述头像和所述躯干生成所述用户的虚拟人。

在一些实施例中,所述基于所述头部图像确定所述用户的头部特征,包括:

获取平均头部特征,其中,所述平均头部特征基于样本头部图像通过平均算法确定;

基于所述平均头部特征从所述头部图像中提取所述用户的头部特征。

在一些实施例中,所述基于所述头部特征生成虚拟人的头像,包括:

对所述头部特征进行放大处理,得到放大后的头部特征的头部图像;

基于所述放大后的头部特征的头部图像进行动漫化处理,生成虚拟人的头像。

在一些实施例中,所述基于所述家电信息确定目标家电设备,包括:

基于所述家电信息确定所述用户对应的家电的数量是否大于预设数量;

在所述数量大于预设数量的情况下,确定各个家电设备的使用频率;

基于使用频率从各个家电设备中确定目标家电设备。

在一些实施例中,所述基于使用频率从各个家电设备中确定目标家电设备,包括:

将使用频率最大的前N个家电设备确定为目标家电设备。

所述基于所述目标家电设备生成所述虚拟人的躯干,包括:

将所述目标家电设备对应的虚拟形象进行拼接,生成所述虚拟人的躯干

在一些实施例中,所述获取用户的头部图像,包括:

在所述用户触发创建虚拟人的情况下,输出引导信息,所述引导信息用于引导用户打开摄像头,并引导用户进行头部图像采集;

获取摄像头采集的所述用户的头部图像。

在一些实施例中,所述至少基于所述头像和所述躯干生成所述用户的虚拟人,包括:

获取预先存储的虚拟人的双臂和双腿;

基于所述头像、所述躯干、双臂和所述双腿进行拼接,得到所述用户的虚拟人。

本申请实施例提供一种虚拟人的生成装置,包括:

获取模块,用于获取用户的头部图像和用户使用的家电设备的家电信息;

第一确定模块,用于基于所述头部图像确定所述用户的头部特征;

第一生成模块,用于基于所述头部特征生成虚拟人的头像;

第二生成模块,用于基于所述家电信息确定目标家电设备,并基于所述目标家电设备生成所述虚拟人的躯干;

第三生成模块,用于至少基于所述头像和所述躯干生成所述用户的虚拟人。

本申请实施例提供一种电子设备,包括存储器和处理器,所述存储器上存储有计算机程序,该计算机程序被所述处理器执行时,执行上述任意一项所述虚拟人的生成方法。

本申请实施例提供一种计算机可读存储介质,该计算机可读存储介质存储的计算机程序,能够被一个或多个处理器执行,能够用来实现上述所述虚拟人的生成方法。

本申请提供的一种虚拟人的生成方法、装置、电子设备及存储介质,通过获取用户的头部图像和用户使用的家电设备的家电信息;基于所述头部图像确定所述用户的头部特征;基于所述头部特征生成虚拟人的头像;基于所述家电信息确定目标家电设备,并基于所述目标家电设备生成所述虚拟人的躯干;至少基于所述头像和所述躯干生成所述用户的虚拟人,能够将用户的头部特征与用户家电设备相融合来生成虚拟人,使得虚拟人物与家用电器存在关系。

附图说明

在下文中将基于实施例并参考附图来对本申请进行更详细的描述。

图1为本申请实施例提供的一种虚拟人的生成方法的实现流程示意图;

图2为本申请实施例提供的一种虚拟人的生成方法的实现流程示意图;

图3为本申请实施例提供的电子设备的组成结构示意图。

在附图中,相同的部件使用相同的附图标记,附图并未按照实际的比例绘制。

具体实施方式

为了使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请作进一步地详细描述,所描述的实施例不应视为对本申请的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。

在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。

如果申请文件中出现“第一第二第三”的类似描述则增加以下的说明,在以下的描述中,所涉及的术语“第一第二第三”仅仅是是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一第二第三”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。

除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的,不是旨在限制本申请。

基于相关技术中存在的问题,本申请实施例提供一种虚拟人的生成方法,所述方法应用于电子设备,例如计算机、移动终端等,所述移动终端可以包括手机、平板电脑等。本申请实施例提供的虚拟人的生成方法所实现的功能可以通过电子设备的处理器调用程序代码来实现,其中,程序代码可以保存在计算机存储介质中。

实施例一

本申请实施例提供一种虚拟人的生成方法,图1为本申请实施例提供的一种虚拟人的生成方法的实现流程示意图,如图1所示,包括:

步骤S101,获取用户的头部图像和用户使用的家电设备的家电信息。

本申请实施例中,用户可以登陆APP,然后点击创建虚拟人按钮,进入虚拟人创建,此时,电子设备可以在APP上输出引导信息,所述引导信息用于引导用户打开摄像头,并引导用户进行头部图像采集,然后用户基于引导信息来采集用户头部图像,从摄像头获取采集的所述用户的头部图像。

本申请实施例中,所述头部图像是3D图像。

本申请实施例中,用户登录APP后,电子设备可以基于登录信息来获取与该登录信息绑定的家电设备的家电信息。所述家电信息可以包括:使用频率。可以在APP中设置埋点,用户点击某个家电设备后即可以触发埋点,来记录用户的使用频率,用户使用一次,使用次数加一。

本申请实施例中,所述家电设备可以包括:洗衣机、冰箱、空调、热水器等家用电器。

步骤S102,基于所述头部图像确定所述用户的头部特征。

本申请实施例中,头部特征可以包括:眼睛特征、额头特征、鼻子特征、脸部特征等。

本申请实施例中,可以将头部图像输入至神经网络模型中,从而确定用户的头部特征。

在一些实施例中,步骤S102可以通过以下步骤实现:

步骤S1021,获取平均头部特征,其中,所述平均头部特征基于样本头部图像通过平均算法确定。

本申请实施例中,电子设备可以获取样本头部图像,然后通过样本头部图像来提取特征,将提取的特征采用平均算法来确定平均头部特征,本申请实施例中,样本头部图像的数据要多余预设数量阈值,示例性地,可以大于1000个样本,本申请实施例中,电子设备可以通过外部接口来获取成年人3D头部图像。

本申请实施例中,所述平均特征包括:平均眼睛特征、平均额头特征、平均鼻子特征、平均脸部特征等。

步骤S1022,基于所述平均头部特征从所述头部图像中提取所述用户的头部特征。

本申请实施例中,可以将平均头部特征与头部图像中的特征来进行相似度计算,将相似度大于相似度阈值的特征确定为对应的头部特征。示例性地,将与鼻子特征相似度大于相似度阈值的特征则确定为鼻子特征,将与平均额头特征相似度大于相似度阈值的特征确定为额头特征。

本申请实施例中,在提取到所述用户的头部特征后,可以对头部特征进行标记。

步骤S103,基于所述头部特征生成虚拟人的头像。

本申请实施例中,步骤S103可以通过以下步骤实现:

步骤S1031,对所述头部特征进行放大处理,得到放大后的头部特征的头部图像。

本申请实施例中,可以对标记的头部特征进行特化处理,即放大处理,放大倍数可以进行配置,示例性地,可以将头部特征放大百分之二十。

本申请实施例中,通过放大后,可以得到放大后的头部特征的头部图像。在该头部图像中,特征被放大。

步骤S1032,基于所述放大后的头部特征的头部图像进行动漫化处理,生成虚拟人的头像。

本申请实施例中,可以调用外部接口来对放大后的头部特征的头部图像进行动漫化处理从而生成虚拟人的头像。

本申请实施例中,虚拟人的头像呈漫画形式。

步骤S104,基于所述家电信息确定目标家电设备,并基于所述目标家电设备生成所述虚拟人的躯干。

本申请实施例中,所述基于所述家电信息确定目标家电设备,包括:基于所述家电信息确定所述用户对应的家电的数量是否大于预设数量;在所述数量大于预设数量的情况下,确定各个家电设备的使用频率;基于使用频率从各个家电设备中确定目标家电设备。

本申请实施例中,所述预设数量可以进行配置,示例性地,可以配置为3。可以通过家电信息的数量从而可以确定家电设备的数量,示例性地,如果家电信息的数量为5个,则家电设备的数量则为5个。

本申请实施例中,所述家电信息包括:使用频率,可以直接获取各个家电设备的使用频率。

本申请实施例中,可以设定使用频率阈值。将大于使用频率阈值的家电设备确定为目标家电设备,在一些实施例中,可以将使用频率进行排序,将使用频率最大的前N个家电设备确定为目标家电设备。前N个可以进行配置,示例性地,可以配置为前3个、前4个等。

在一些实施例中,在基于家电信息确定所述用户对应的家电的数量小于预设数量的情况下,可以获取家电销售数据,通过家电销售数据来进行填充,可以选择家电销售数据最高的多个设备来填补家电数量,以使填补后的家电的数量大于预设数量。

本申请实施例中,电子设备中预先存储有目标家电设备对应的虚拟形象,在获取到目标家电设备后,即可以确定对应的虚拟形象,然后将所述目标家电设备对应的虚拟形象进行拼接,生成所述虚拟人的躯干。

示例性地,目标家电设备包括:空调、洗衣机、热水器,虚拟形象和设备对应,将空调的虚拟形象、洗衣机的虚拟形象和热水器的虚拟形象进行拼接,则得到了虚拟人的躯干。

步骤S105,至少基于所述头像和所述躯干生成所述用户的虚拟人。

本申请实施例中,可以预先存储虚拟人的双臂和双腿,双臂和双腿可以认为是标准模块,所有创建虚拟人的双臂和双腿都一样。

本申请实施例中,获取预先存储的虚拟人的双臂和双腿;基于所述头像、所述躯干、双臂和所述双腿进行拼接,得到所述用户的虚拟人。

本申请提供的一种虚拟人的生成方法,通过获取用户的头部图像和用户使用的家电设备的家电信息;基于所述头部图像确定所述用户的头部特征;基于所述头部特征生成虚拟人的头像;基于所述家电信息确定目标家电设备,并基于所述目标家电设备生成所述虚拟人的躯干;至少基于所述头像和所述躯干生成所述用户的虚拟人,能够将用户的头部特征与用户家电设备相融合来生成虚拟人,使得虚拟人物与家用电器存在关系。

本申请实施例中,可以通过虚拟人物的外形就可以确定用户使用家电设备的频次,在虚拟人应用的时候,用户可以点击躯干上的家电设备,从而实现对家电设备的控制。

实施例二

基于前述的各个实施例,本申请实施例再提供一种虚拟人的生成方法,通过摄像机扫描获取人物的3D形象图,将目标人物的形象图与数据库中的人物平均头部数据进行比对。得出目标人物的特征信息,对特征信息进行放大特化,从而形成具有用户明显特征的人物头部形象,获取该用户下的设备信息,获取该用户经常使用的前三个设备,将前三个设备的虚拟形象进行堆砌组成用户的身体躯干部分,完成用户虚拟形象的个性化生成。虚拟形象的双腿与双手为统一形象,进行拼接即可。

本申请实施例中,用户可以登陆APP,设备信息与用户绑定。

本申请实施例中,用户在使用某个智能家居设备后,会触发埋点,在该设备的使用次数加一,存储在该用户设备下的数据库中,从而可以确定家电设备的使用频次。

本申请实施例中,人物平均头部数据是根据已录入的格力用户的头部3D形象通过平均算法生成。若已录入的隔离用户头部3D样本不足一千例,则对接外部接口,获取成年人平均长相3D头部形象。

图2为本申请实施例提供一种虚拟人的生成方法的实现流程示意图,如图2所示,包括:

用户APP上选择创建虚拟人物形象;

APP通过提示引导用户打开手机摄像头获取到用户的头部3D信息,获取完毕后将用户的3D头像信息上传至服务器;

服务器对比数据库中的平均头部信息,根据平均头部信息,捕捉到用户的头像特征并进行标记;

对已标记用户的头像特征部分进行特化(放大百分之二十),之后调用外部接口对用户的头像进行动漫画处理;

获取用户账户下的家电信息,若用户账户下的家电信息大于3,则选择用户表试用频率最高的前三个设备;若不足三个则根据电器官网的家电销售数据进行排行填充;将家电设备虚拟形象进行拼接组成虚拟人物形象的躯干;

用户的双臂和双腿为固定的形象,直接进行拼接即可,生成虚拟人。

实施例三

基于前述的实施例,本申请实施例提供一种虚拟人的生成装置,该装置包括的各模块、以及各模块包括的各单元,可以通过计算机设备中的处理器来实现;当然也可通过具体的逻辑电路实现;在实施的过程中,处理器可以为中央处理器(CPU,Central ProcessingUnit)、微处理器(MPU,Microprocessor Unit)、数字信号处理器(DSP,Digital SignalProcessing)或现场可编程门阵列(FPGA,Field Programmable Gate Array)等。

本申请实施例提供一种虚拟人的生成装置,虚拟人的生成装置包括:

获取模块,用于获取用户的头部图像和用户使用的家电设备的家电信息;

第一确定模块,用于基于所述头部图像确定所述用户的头部特征;

第一生成模块,用于基于所述头部特征生成虚拟人的头像;

第二生成模块,用于基于所述家电信息确定目标家电设备,并基于所述目标家电设备生成所述虚拟人的躯干;

第三生成模块,用于至少基于所述头像和所述躯干生成所述用户的虚拟人。

在一些实施例中,所述基于所述头部图像确定所述用户的头部特征,包括:

获取平均头部特征,其中,所述平均头部特征基于样本头部图像通过平均算法确定;

基于所述平均头部特征从所述头部图像中提取所述用户的头部特征。

在一些实施例中,所述基于所述头部特征生成虚拟人的头像,包括:

对所述头部特征进行放大处理,得到放大后的头部特征的头部图像;

基于所述放大后的头部特征的头部图像进行动漫化处理,生成虚拟人的头像。

在一些实施例中,所述基于所述家电信息确定目标家电设备,包括:

基于所述家电信息确定所述用户对应的家电的数量是否大于预设数量;

在所述数量大于预设数量的情况下,确定各个家电设备的使用频率;

基于使用频率从各个家电设备中确定目标家电设备。

在一些实施例中,所述基于使用频率从各个家电设备中确定目标家电设备,包括:

将使用频率最大的前N个家电设备确定为目标家电设备。

所述基于所述目标家电设备生成所述虚拟人的躯干,包括:

将所述目标家电设备对应的虚拟形象进行拼接,生成所述虚拟人的躯干

在一些实施例中,所述获取用户的头部图像,包括:

在所述用户触发创建虚拟人的情况下,输出引导信息,所述引导信息用于引导用户打开摄像头,并引导用户进行头部图像采集;

获取摄像头采集的所述用户的头部图像。

在一些实施例中,所述至少基于所述头像和所述躯干生成所述用户的虚拟人,包括:

获取预先存储的虚拟人的双臂和双腿;

基于所述头像、所述躯干、双臂和所述双腿进行拼接,得到所述用户的虚拟人。

需要说明的是,本申请实施例中,如果以软件功能模块的形式实现上述的虚拟人的生成方法,并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。这样,本申请实施例不限制于任何特定的硬件和软件结合。

相应地,本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现上述实施例中提供的虚拟人的生成方法中的步骤。

实施例三

本申请实施例提供一种电子设备;图3为本申请实施例提供的电子设备的组成结构示意图,如图3所示,所述电子设备500包括:一个处理器501、至少一个通信总线502、用户接口503、至少一个外部通信接口504、存储器505。其中,通信总线502配置为实现这些组件之间的连接通信。其中,用户接口503可以包括控制屏,外部通信接口504可以包括标准的有线接口和无线接口。所述处理器501配置为执行存储器中存储的虚拟人的生成方法的程序,以实现以上述实施例提供的虚拟人的生成方法中的步骤。

以上电子设备和存储介质实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本申请计算机设备和存储介质实施例中未披露的技术细节,请参照本申请方法实施例的描述而理解。

这里需要指出的是:以上存储介质和设备实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本申请存储介质和设备实施例中未披露的技术细节,请参照本申请方法实施例的描述而理解。

应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解,在本申请的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。

需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所控制或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。

上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元控制的部件可以是、或也可以不是物理单元;既可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。

另外,在本申请各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。

本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(ROM,Read Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

或者,本申请上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台控制器执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述,仅为本申请的实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

技术分类

06120115923069