掌桥专利:专业的专利平台
掌桥专利
首页

显示方法及装置、存储介质

文献发布时间:2023-06-19 11:02:01


显示方法及装置、存储介质

技术领域

本公开涉及物联网技术领域,尤其涉及一种显示方法及装置、存储介质。

背景技术

随着科技的发展,物联网(Internet of Things,IoT)能够实现设备的互联互通。

可穿戴式电子设备,如AR眼镜可以与人工智能物联网(ArtificialIntelligence&Internet of Thing,AIoT)设备进行交互。然而,在具有屏幕的AIoT设备与AR眼镜交互过程中,AR眼镜的显示控制常常需要用户手动控制,AR眼镜不能确定自身的显示逻辑,不够智能化。

因此,寻找一种能够实现可穿戴式电子设备与AIoT设备间的智能化互联互通方案成为当前研究的热点。

发明内容

本公开提供一种显示方法及装置、存储介质。

根据本公开实施例的第一方面,提供一种显示方法,应用于可穿戴式电子设备,显示方法包括:

获取被识别设备的屏幕状态;

基于所述被识别设备的屏幕状态,调整所述可穿戴式电子设备的显示。

在一些实施例中,所述基于所述被识别设备的屏幕状态,调整所述可穿戴式电子设备的显示,包括:

当所述被识别设备的屏幕状态为灭屏状态时,控制所述可穿戴式电子设备进行显示;

当所述被识别设备的屏幕状态为亮屏状态时,基于预设显示规则,调整所述可穿戴式电子设备的显示。

在一些实施例中,所述基于预设显示规则,调整所述可穿戴式电子设备的显示,包括:

当所述被识别设备的屏幕与所述可穿戴式电子设备不进行结合显示时,控制所述可穿戴式电子设备关闭显示;

当所述被识别设备的屏幕与所述可穿戴式电子设备结合显示时,将所述可穿戴式电子设备的至少一个显示内容显示在所述被识别设备的屏幕之外的区域,或者,将所述可穿戴式电子设备的至少一个显示内容叠加显示在所述被识别设备的显示内容上。

在一些实施例中,所述将所述可穿戴式电子设备的至少一个显示内容显示在所述被识别设备的屏幕之外的区域,包括:

根据所述显示内容的数量,确定至少一个所述显示内容的排列位置;

基于所述排列位置,将至少一个所述显示内容排列显示在所述被识别设备的屏幕之外的区域。

在一些实施例中,所述方法还包括:

当接收到强制提示消息时,在所述可穿戴式电子设备上显示所述强制提示消息。

在一些实施例中,所述获取所述被识别设备的屏幕状态,包括:

基于第一预定规则,确定所述被识别设备;

基于第二预定规则,获取所述被识别设备的屏幕状态。

在一些实施例中,所述基于第一预定规则,确定所述被识别设备,包括以下一种或多种:

基于所述可穿戴式电子设备的通信连接的关系,确定所述被识别设备;

基于所述可穿戴式电子设备的视觉识别,确定所述被识别设备;

基于所述可穿戴式电子设备的听觉识别,确定所述被识别设备。

在一些实施例中,所述基于所述可穿戴式电子设备的视觉识别,确定所述被识别设备,包括:

基于所述可穿戴式电子设备的计算机视觉识别模型进行识别,确定所述被识别设备;

或者,

基于所述可穿戴式电子设备对视觉二维码进行识别,确定所述被识别设备。

在一些实施例中,所述基于第二预定规则,获取所述被识别设备的屏幕状态,包括以下一种或多种:

基于所述被识别设备与所述可穿戴式电子设备之间通过通信协议建立的通信连接,接收所述被识别设备发送的所述被识别设备的屏幕状态;

基于所述可穿戴式电子设备的计算机视觉识别模型,获取所述被识别设备的屏幕状态;

基于连接所述可穿戴式电子设备和所述被识别设备的公共网,接收所述被识别设备发送给所述公共网的所述被识别设备的屏幕状态。

根据本公开实施例的第二方面,提供一种显示装置,应用于可穿戴式电子设备,所述装置包括:

获取模块,配置为获取被识别设备的屏幕状态;

第一调整模块,配置为基于所述被识别设备的屏幕状态,调整所述可穿戴式电子设备的显示。

在一些实施例中,所述第一调整模块,包括:

第一控制模块,配置为当所述被识别设备的屏幕状态为灭屏状态时,控制所述可穿戴式电子设备进行显示;

第二调整模块,配置为当所述被识别设备的屏幕状态为亮屏状态时,基于预设显示规则,调整所述可穿戴式电子设备的显示。

在一些实施例中,所述第二调整模块,包括:

第二控制模块,配置为当所述被识别设备的屏幕与所述可穿戴式电子设备不进行结合显示时,控制所述可穿戴式电子设备关闭显示;

第一显示模块,配置为当所述被识别设备的屏幕与所述可穿戴式电子设备结合显示时,将所述可穿戴式电子设备的至少一个显示内容显示在所述被识别设备的屏幕之外的区域,或者,将所述可穿戴式电子设备的至少一个显示内容叠加显示在所述被识别设备的显示内容上。

在一些实施例中,所述第一显示模块,还配置为根据所述显示内容的数量,确定至少一个所述显示内容的排列位置;基于所述排列位置,将至少一个所述显示内容排列显示在所述被识别设备的屏幕之外的区域。

在一些实施例中,所述装置还包括:

第二显示模块,配置为当接收到强制提示消息时,在所述可穿戴式电子设备上显示所述强制提示消息。

在一些实施例中,所述获取模块,包括:

第一获取子模块,配置为基于第一预定规则,确定所述被识别设备;

第二获取子模块,配置为基于第二预定规则,获取所述被识别设备的屏幕状态。

在一些实施例中,所述第一获取子模块,还配置为以下一种或多种:

第一确定模块,配置为基于所述可穿戴式电子设备的通信连接的关系,确定所述被识别设备;

第二确定模块,配置为基于所述可穿戴式电子设备的视觉识别,确定所述被识别设备;

第三确定模块,配置为基于所述可穿戴式电子设备的听觉识别,确定所述被识别设备。

在一些实施例中,所述第二确定模块,还配置为基于所述可穿戴式电子设备的计算机视觉识别模型进行识别,确定所述被识别设备;或者,基于所述可穿戴式电子设备对视觉二维码进行识别,确定所述被识别设备。

在一些实施例中,所述第二获取子模块,还配置为以下一种或多种:基于所述被识别设备与所述可穿戴式电子设备之间通过通信协议建立的通信连接,接收所述被识别设备发送的所述被识别设备的屏幕状态;基于所述可穿戴式电子设备的计算机视觉识别模型,获取所述被识别设备的屏幕状态;基于连接所述可穿戴式电子设备和所述被识别设备的公共网,接收所述被识别设备发送给所述公共网的所述被识别设备的屏幕状态。

根据本公开实施例的第三方面,提供一种装置,所述装置至少包括:处理器和用于存储能够在所述处理器上运行的可执行指令的存储器,其中:

处理器用于运行所述可执行指令时,所述可执行指令执行上述第一方面中提供的显示方法中的步骤。

根据本公开实施例的第四方面,提供一种非临时性计算机可读存储介质,所述计算机可读存储介质中存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现如上述第一方面中提供的显示方法。

本公开的实施例提供的技术方案可以包括以下有益效果:

本公开实施例中可穿戴式电子设备获取被识别设备的屏幕状态,基于被识别设备的屏幕状态,调整可穿戴式电子设备的显示。如此,本公开实施例的可穿戴式电子设备能够根据感知到的被识别设备的屏幕状态,自动调整自身的显示逻辑,使得可穿戴式电子设备的显示方式更加灵活和智能化。

应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。

图1是本公开实施例示出的一种显示方法流程图一。

图2是本公开实施例示出的一种显示方法流程图二。

图3是本公开实施例示出的被识别设备的屏幕显示示意图。

图4是本公开实施例示出的被识别设备和可穿戴式电子设备结合显示示意图。

图5是本公开实施例示出的确定被识别设备的示意图。

图6是本公开实施例示出的确定被识别设备的屏幕状态的示意图。

图7是本公开实施例输出的一种显示方法流程图三。

图8是本公开实施例输出的一种AR眼镜与手机的交互示意图。

图9是根据一示例性实施例示出的一种设备显示装置图一。

图10是根据一示例性实施例示出的一种设备显示装置图二。

具体实施方式

这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。

图1是本公开实施例示出的一种显示方法流程图一,如图1所示,应用于可穿戴式电子设备,可穿戴式电子设备执行该显示方法包括以下步骤:

S101、获取被识别设备的屏幕状态;

S102、基于所述被识别设备的屏幕状态,调整所述可穿戴式电子设备的显示。

本公开实施例中,显示方法适用于可穿戴式电子设备与具有屏幕的人工智能物联网(Artificial Intelligence&Internet of Thing,AIoT)设备之间的交互场景。该可穿戴式电子设备可包括头戴显示设备,例如AR设备、VR设备、MR设备等,还可包括可穿戴式运动设备,例如智能手表或者智能手环。该AIOT设备包括但不限于物联网中的终端设备、智能家电设备,该AIoT设备需要具有屏幕,例如手机、笔记本、显示器、电视、音箱或者电饭煲等设备。本公开对于该AIoT设备的屏幕类型和材质不作限定,例如:可以是LCD屏、LED屏、OLED等各种类型和材质的屏幕。

上述可穿戴式电子设备与具有屏幕的AIOT设备之间的交互场景可包括:AR眼镜可通过确定电视、手表或者手机的屏幕状态调整自身的显示。例如,AR眼镜可通过确定电视的屏幕状态为灭屏状态,控制可穿戴式电子设备进行显示;AR眼镜可通过确定手机的屏幕状态为亮屏状态,控制可穿戴式电子设备关闭显示。

在步骤S101中,被识别设备为可穿戴式电子设备在识别范围内识别得到的电子设备。该被识别设备可为AIOT设备中任一种具有屏幕的电子设备。例如,被识别设备可包括电视、手机、电脑或者手表,本公开实施例不作限制。

需要说明的是,上述识别范围可依据不同的被识别设备来确定。当被识别设备为头戴显示设备时,该识别范围可以为该头戴式显示设备的视场角范围或者视域范围;当被识别设备为智能手环或者智能手表时,该识别范围可以为以预定距离为半径划定的范围,还可为智能手表或者智能手环中识别传感器例如雷达传感器或者激光传感器的发射范围,本公开实施例不作限制。

本公开实施例中,被识别设备的屏幕状态包括但不限于亮屏状态或者灭屏状态。例如,被识别设备正在播放视频或者音频,此时被识别设备的屏幕状态可理解为亮屏状态。又例如,被识别设备处于非工作状态,此时被识别设备的屏幕状态可理解为灭屏状态。

上述获取被识别设备的屏幕状态可理解为:先识别得到被识别设备,再获取该被识别设备的屏幕状态。例如,AR眼镜先识别到被识别设备为电视,再识别到该电视的屏幕状态为亮屏状态。又例如,AR眼镜先识别到被识别设备为手机,再识别到该手机的屏幕状态为亮屏状态。

在步骤S102中,可穿戴式电子设备在获取被识别设备的屏幕状态之后,基于被识别设备的屏幕状态,调整可穿戴式电子设备的显示。该调整可穿戴式电子设备的显示包括:调整可穿戴式电子设备的显示状态或者调整可穿戴式电子设备的显示位置。

其中,上述调整可穿戴式电子设备的显示状态可以包括:控制可穿戴式电子设备进行显示,或者,控制可穿戴式电子设备关闭显示。其中,控制可穿戴式电子设备进行显示包括:控制可穿戴式电子设备进行虚拟显示,或者,控制可穿戴式电子设备具有的屏幕的至少部分区域进行显示。

上述调整可穿戴式电子设备的显示位置可以包括:将可穿戴式电子设备虚拟显示的内容排列显示在被识别设备的不同侧边或者排列显示在被识别设备的同一侧边。

例如,在被识别设备的屏幕为灭屏状态时,此时需要可穿戴式电子设备进行显示,进而控制可穿戴式电子设备进行显示。又例如,在被识别设备的屏幕为亮屏状态时,此时可使得被识别设备的屏幕直接进行显示,而不需要可穿戴式电子设备进行显示,进而可控制可穿戴式电子设备关闭显示,如此,能够减少可穿戴式电子设备的功耗。又例如,在被识别设备的屏幕为亮屏状态时,可使得可穿戴式电子设备和被识别设备进行结合显示,进而控制可穿戴式电子设备的显示内容显示在被识别设备的不同侧边或者同一侧边,以提高显示的多样性。

本公开实施例中,可穿戴式电子设备获取被识别设备的屏幕状态,基于被识别设备的屏幕状态,调整可穿戴式电子设备的显示。如此,本公开实施例的可穿戴式电子设备能够根据感知到的被识别设备的屏幕状态,自动调整自身的显示逻辑,使得可穿戴式电子设备的显示更加灵活和智能化。

在一些实施例中,如图2所示,所述基于所述被识别设备的屏幕状态,调整所述可穿戴式电子设备的显示,包括:

S102a、当所述被识别设备的屏幕状态为灭屏状态时,控制所述可穿戴式电子设备进行显示;

S102b、当所述被识别设备的屏幕状态为亮屏状态时,基于预设显示规则,调整所述可穿戴式电子设备的显示。

上述被识别设备的屏幕状态为灭屏状态,表明被识别设备处于非工作状态,不进行显示。当被识别设备的屏幕状态为灭屏状态时,控制可穿戴式电子设备进行显示。此时,在有待显示内容需要显示的前提下,需要控制可穿戴式电子设备进行显示。如此,能够在被识别设备不能显示待显示内容时,及时控制可穿戴式电子设备显示待显示内容,使得显示更加灵活,符合不同场景需求。

上述被识别设备的屏幕状态为亮屏状态,表明被识别设备能够进行显示。其中,该亮屏状态包括:锁屏状态和解锁状态;在解锁状态下被识别设备可在屏幕上自由切换显示不同画面;在锁屏状态下被识别设备的屏幕显示画面为锁定状态,不能切换显示画面;当屏幕状态从锁定状态切换为解锁状态时,被识别设备的屏幕显示画面的锁定状态解除,能够自由切换显示不同画面。

本公开实施例中,当被识别设备的屏幕状态为亮屏状态时,基于预设显示规则,调整可穿戴式电子设备的显示,包括:

当被识别设备的屏幕状态为锁屏状态时,先控制被识别设备的屏幕状态切换为解锁状态;再基于预设显示规则,调整可穿戴式电子设备的显示;

当被识别设备的屏幕状态为解锁状态时,直接基于预设显示规则,调整可穿戴式电子设备的显示。

需要说明的是,在被识别设备能够显示待显示内容的前提下,可基于预设显示规则,调整可穿戴式电子设备进行显示,还可基于预设显示规则,调整可穿戴式电子设备不进行显示。如此,可根据预设显示规则灵活调整可穿戴式电子设备的显示,提高可穿戴式电子设备显示的智能化。

上述预设显示规则为事先存储在可穿戴式电子设备中的,该预设显示规则可包括:被识别设备和可穿戴式电子设备结合显示的规则;还可包括:被识别设备和可穿戴式电子设备不结合显示的规则,本公开实施例不作限制。

本公开实施例中,基于被识别设备处于灭屏状态或者亮屏状态的不同屏幕状态,可调整可穿戴式电子设备的显示,使得可穿戴式电子设备的显示更加灵活和智能化,能够提高用户体验。

在一些实施例中,所述基于预设显示规则,调整所述可穿戴式电子设备的显示,包括:

当所述被识别设备的屏幕与所述可穿戴式电子设备不进行结合显示时,控制所述可穿戴式电子设备关闭显示;

当所述被识别设备的屏幕与所述可穿戴式电子设备结合显示时,将所述可穿戴式电子设备的至少一个显示内容显示在所述被识别设备的屏幕之外的区域,或者,将所述可穿戴式电子设备的至少一个显示内容叠加显示在所述被识别设备的显示内容上。

本公开实施例中,当被识别设备的屏幕状态为亮屏状态,且被识别设备的屏幕与可穿戴式电子设备不进行结合显示时,表明可使得被识别设备的屏幕进行显示,不需要可穿戴式电子设备进行显示,此时控制可穿戴式电子设备关闭显示,能够减少可穿戴式电子设备的显示能耗,延长可穿戴式电子设备的使用寿命。

上述可穿戴式电子设备关闭显示包括:将可穿戴式电子设备的屏幕状态从亮屏状态切换为灭屏状态。

示例性地,在被识别设备的屏幕进行显示的过程中,可在被识别设备的屏幕上显示至少一个待显示界面。如图3所示,在被识别设备的屏幕上显示三个待显示界面。

本公开实施例中,当被识别设备的屏幕与可穿戴式电子设备结合显示时,表明需要可穿戴式电子设备和被识别设备均显示,进而可将可穿戴式电子设备的至少一个显示内容显示在被识别设备的屏幕之外的区域,或者,将可穿戴式电子设备的至少一个显示内容叠加显示在被识别设备的显示内容上。

上述将可穿戴式电子设备的至少一个显示内容叠加在被识别设备的显示内容上,包括:合并被识别设备的显示内容和可穿戴式电子设备虚拟显示的至少一个显示内容,进而产生新的可视化展示内容。在新的可视化展示内容中,不同对象共存并能够实时互动。

上述将可穿戴式电子设备的至少一个显示内容显示在被识别设备的屏幕之外的区域,包括:将可穿戴式电子设备的至少一个显示内容间隔排列在被识别设备的屏幕之外的区域,还可基于显示内容的数量,将至少一个显示内容排列显示在被识别设备的屏幕以外的区域。

本公开实施例中,基于不同的显示规则,可控制可穿戴式电子设备关闭显示,还可调整可穿戴式电子设备的至少一个显示内容叠加显示或者区域外显示,使得可穿戴式电子设备不仅可调整自身的屏幕状态,还可调整自身的显示位置,进而提高了可穿戴式电子设备显示的灵活性和智能化,使得可穿戴式电子设备的显示方式更加丰富。

在一些实施例中,所述将所述可穿戴式电子设备的至少一个显示内容显示在所述被识别设备的屏幕的侧边上之外的区域,包括:

根据所述显示内容的数量,确定至少一个所述显示内容的排列位置;

基于所述排列位置,将至少一个所述显示内容排列显示在所述被识别设备的屏幕之外的区域。

本公开实施例中,可穿戴式电子设备可虚拟显示不同的内容,该显示内容的数量可根据实际显示需求进行设置。例如,该显示内容可设置2个或者3个,本公开实施例不作限制。

上述根据显示内容的数量,确定至少一个显示内容的排列位置,包括:当显示内容的数量小于数量阈值时,确定至少一个显示内容的排列位置在被识别设备屏幕的同一侧边上;当显示内容的数量大于或者等于数量阈值时,确定至少一个显示内容的排列位置在被识别设备屏幕的不同侧边上。

本公开实施例中,上述数量阈值可根据实际显示需求进行设置。例如,数量阈值可设置为一个或者两个,本公开实施例不作限制。

上述至少一个显示内容的排列位置在被识别设备屏幕的不同侧边上,包括:至少一个显示内容的排列位置在被识别设备屏幕的相邻侧边上;或者,至少一个显示内容的排列位置在被识别设备屏幕的相对侧边上,本公开实施例不作限制。

示例性地,被识别设备为笔记本或者手表,可穿戴式电子设备为AR眼镜。在手表显示场景中,可将AR眼镜虚拟显示的显示内容显示在手表的同一侧边上。如图4所示,在笔记本办公场景中,可将AR眼镜虚拟显示的两个显示内容显示在笔记本的相对两个侧边上。

本公开实施例中,基于显示内容的数量确定不同的排列位置,进而基于不同排列位置显示至少一个显示内容,能够使得显示内容更好的排列在被识别设备的屏幕之外的区域,能够提高观看体验感。

在一些实施例中,所述方法还包括:

当接收到强制提示消息时,在所述可穿戴式电子设备上显示所述强制提示消息。

本公开实施例中,上述强制提示消息为可穿戴式电子设备执行任务中优先级,高于基于被识别设备的屏幕状态调整可穿戴式电子设备的显示的任务。例如,强制提示消息可设置为可穿戴式电子设备中执行任务中优先级最高的任务。

需要说明的是,不同设备对应的需要可穿戴式电子设备执行的强制提示消息任务不同。例如,对于空调或者洗衣机,对应的强制提示消息任务为报警提示;对于手机,对应的强制提示消息任务为电话或者语音提示。

上述强制提示消息包括但不限于电话提示消息、语音提示消息、视频提示消息或者报警提示消息,本公开实施例不作限制。例如,当强制提示消息为报警提示消息时,能够通过可穿戴式电子设备直接显示报警提示消息,实现及时报警,提高用户体验感。又例如,当强制提示消息为电话提示消息时,能够通过可穿戴式电子设备直接显示来电提示消息,实现及时接听电话,提高用户体验感。

在一些实施例中,所述获取所述被识别设备的屏幕状态,包括:

基于第一预定规则,确定所述被识别设备;

基于第二预定规则,获取所述被识别设备的屏幕状态。

本公开实施例中,第一预定规则为可穿戴式电子设备识别被识别设备的规则。

在一些实施例中,所述基于第一预定规则,确定所述被识别设备,包括以下一种或多种:

基于所述可穿戴式电子设备的通信连接的关系,确定所述被识别设备;

基于所述可穿戴式电子设备的视觉识别,确定所述被识别设备;

基于所述可穿戴式电子设备的听觉识别,确定所述被识别设备。

本公开实施例中,可穿戴式电子设备的通信连接的关系,包括:可穿戴式电子设备与被识别设备建立的蓝牙通信;或者,可穿戴式电子设备与被识别设备建立的超带宽通信;或者,可穿戴式电子设备与被识别建立的近场通信,本公开实施例不作限制。

其中,可穿戴式电子设备可以具有超宽带(Ultra Wide Band,UWB)模块,也可以通过wifi模块、蓝牙模块、激光模块、红外模块、zigbee的方式进行通信。相应地,被识别设备也对应具有上述各类模块,以实现与可穿戴式电子设备建立不同的通信连接来确定被识别设备。

需要说明的是,在建立通信连接后,可穿戴式电子设备可直接通过被识别设备发送的身份信息确定被识别设备。该身份信息可以为设备序列号,也可以为设备的SN号、设备标识或者设备认证相关信息。

本公开实施例中,基于可穿戴式电子设备的听觉识别,确定被识别设备,包括:基于可穿戴式电子设备接收到的被识别设备输出的声波信号,确定被识别设备;或者,基于识别被识别设备上的听觉二维码,确定被识别设备。

其中,该声波信号可为包括人耳能够听到的声波信号,还包括人耳不能够听到的声波信号,例如,超声波或者次声波。

需要说明的是,可穿戴式电子设备可通过具有的毫米波模块、超声波模块或者雷达模块来实现确定被识别设备。

本公开实施例中,在视觉识别确定被识别设备的过程中,可通过图像采集或者识别二维码来确定被识别设备。在一些实施例中,所述基于所述可穿戴式电子设备的视觉识别,确定所述被识别设备,包括:基于所述可穿戴式电子设备的计算机视觉识别模型进行识别,确定所述被识别设备;或者,基于所述可穿戴式电子设备对视觉二维码进行识别,确定所述被识别设备。

需要说明的是,可穿戴式电子设备可通过摄像头、激光传感器或者雷达传感器获取被识别设备的设备信息,将设备信息输入到计算机视觉识别模型进行识别来确定该被识别设备;其中,可基于人工智能互联网中收集到的识别样本数据更新计算机视觉识别模型,以提高识别的准确率。

可穿戴式电子设备还可通过识别被识别设备上的视觉二维码,确定被识别设备。该视觉二维码为由背景图片的区域与二维码本体区域融合形成的。例如,该视觉二维码包括但不限于灯亮暗二维码。

本公开实施例中,在确定被识别设备过程中,可通过采用多种确定方式来确定被识别设备。如图5所示,被识别设备的确定方式包括:人工智能视觉、人工智能听觉、超带宽、蓝牙或者灯亮暗二维码。本公开实施例可从被识别设备的确定方式中选择一种或者两种以上方式来确定被识别设备。

例如,可基于可穿戴式电子设备的蓝牙连接的关系和人工智能视觉,共同确定被识别设备。又例如,可基于可穿戴式电子设备的人工智能视觉和灯亮暗二维码,共同确定被识别设备。如此,通过选择多种识别方式共同确定被识别设备可提高识别的准确率。

需要说明的是,在确定被识别设备过程中,还可通过制定识别优先级来确定被识别设备。例如,当可穿戴式电子设备与被识别设备建立通信连接时,可基于所述可穿戴式电子设备的通信连接的关系,确定所述被识别设备;当可穿戴式电子设备与被识别设备不能建立通信连接时,可基于可穿戴式电子设备的视觉识别或者听觉识别,确定被识别设备。如此,本公开实施例可优先采用通信连接的方式确定被识别设备,能够提高被识别设备的识别效率以及识别准确率。

在一些实施例中,所述基于第二预定规则,获取所述被识别设备的屏幕状态,包括以下一种或多种:

基于所述被识别设备与所述可穿戴式电子设备之间通过通信协议建立的通信连接,接收所述被识别设备发送的所述被识别设备的屏幕状态;

基于所述可穿戴式电子设备的计算机视觉识别模型,获取所述被识别设备的屏幕状态;

基于连接所述可穿戴式电子设备和所述被识别设备的公共网,接收所述被识别设备发送给所述公共网的所述被识别设备的屏幕状态。

本公开实施例中,通信协议包括蓝牙通信协议、超宽带通信协议或者近场通信协议,本公开实施例不作限制。在建立通信连接后,可穿戴式电子设备可直接接收被识别设备发送的被识别设备的屏幕状态。例如,当可穿戴式电子设备为智能手环或者智能手表时,可通过超宽带建立的通信连接确定被识别设备,并获取被识别设备通过该超宽带建立的通信连接传递的被识别设备的屏幕状态。

在采用计算机视觉识别模型获取当前任务过程中,可通过采用可穿戴式电子设备上的摄像头采集被识别设备的图像信息,并通过将图像信息输入到计算机视觉识别模型中,以得到被识别设备的屏幕状态。

在采用公共网获取被识别设备的屏幕状态过程中,该公共网均能够分别与可穿戴式电子设备和被识别设备建立通信连接,进而本公开实施例的可穿戴式电子设备可通过公共网间接获取被识别设备的屏幕状态。

本公开实施例中,在确定被识别设备的屏幕状态过程中,可通过采用多种确定方式共同确定被识别设备的屏幕状态。如图6所示,被识别设备的屏幕状态的确定方式包括:公共网、通信连接或者视觉识别模型。本公开实施例可从被识别设备的确定方式中选择一种或者两种以上方式来确定被识别设备的屏幕状态。

例如,可基于可穿戴式电子设备的通信连接的关系和计算机视觉识别模型,共同确定被识别设备的屏幕状态。如此,通过多种确定方式来获取被识别设备的屏幕状态能够提高识别的准确率。

需要说明的是,在确定被识别设备的屏幕状态过程中,还可通过制定优先级来确定被识别设备的屏幕状态。例如,当可穿戴式电子设备与被识别设备建立通信连接时,可基于被识别设备与可穿戴式电子设备之间通过通信协议建立的通信连接,接收被识别设备发送的被识别设备的屏幕状态;当可穿戴式电子设备与被识别设备不能建立通信连接时,可基于连接可穿戴式电子设备和被识别设备的公共网,确定被识别设备的屏幕状态。如此,本公开实施例可优先采用通信连接的方式确定被识别设备的屏幕状态,能够提高被识别设备的屏幕状态的识别效率以及准确率。

为了更好的理解上述实施例,本公开实施例示例如下:

可穿戴式电子设备先获取被识别设备的屏幕状态,再基于被识别设备的屏幕状态,调整可穿戴式电子设备的显示。其中,如图7所示,该可穿戴式电子设备基于被识别设备的屏幕状态,调整可穿戴式电子设备的显示包括以下步骤:

S201、判断被识别设备的屏幕状态是否为亮屏状态;若否,转步骤S202;若是,转步骤S203;

S202、控制可穿戴式电子设备进行显示;

S203、判断被识别设备的屏幕与可穿戴式电子设备是否进行结合显示;若是,转步骤S204、若否,转步骤S205;

S204、将所述可穿戴式电子设备的至少一个显示内容显示在所述被识别设备的屏幕之外的区域,或者,将所述可穿戴式电子设备的至少一个显示内容叠加显示在所述被识别设备的显示内容上;

S205、控制所述可穿戴式电子设备关闭显示。

本公开实施例中,可穿戴式电子设备能够根据感知到的被识别设备的屏幕状态,自动调整自身的显示逻辑,使得可穿戴式电子设备的显示更加灵活和智能化。

如图8所示,以可穿戴式电子设备为AR眼镜,被识别设备为手机为例,本公开实施例中AR眼镜与手机建立有蓝牙通信连接。在AR眼镜与手机建立通信连接后,手机可通过蓝牙通信连接向AR眼镜发送信息;AR眼镜接收手机发送的信息,并基于该信息确定被识别设备为手机以及手机的屏幕状态,进而AR眼镜可基于手机的屏幕状态,调整可AR眼镜自身的显示。如此,可穿戴式电子设备能够根据感知到的被识别设备的屏幕状态,自动调整自身的显示逻辑,使得可穿戴式电子设备的显示更加灵活和智能化。

图9是根据一示例性实施例示出的一种设备显示装置图一。参照图9,该设备交互装置包括获取模块1001和第一调整模块1002,其中,

获取模块1001,配置为获取被识别设备的屏幕状态;

第一调整模块1002,配置为基于所述被识别设备的屏幕状态,调整所述可穿戴式电子设备的显示。

在一些实施例中,所述第一调整模块,包括:

第一控制模块,配置为当所述被识别设备的屏幕状态为灭屏状态时,控制所述可穿戴式电子设备进行显示;

第二调整模块,配置为当所述被识别设备的屏幕状态为亮屏状态时,基于预设显示规则,调整所述可穿戴式电子设备的显示。

在一些实施例中,所述第二调整模块,包括:

第二控制模块,配置为当所述被识别设备的屏幕与所述可穿戴式电子设备不进行结合显示时,控制所述可穿戴式电子设备关闭显示;

第一显示模块,配置为当所述被识别设备的屏幕与所述可穿戴式电子设备结合显示时,将所述可穿戴式电子设备的至少一个显示内容显示在所述被识别设备的屏幕之外的区域,或者,将所述可穿戴式电子设备的至少一个显示内容叠加显示在所述被识别设备的显示内容上。

在一些实施例中,所述第一显示模块,还配置为根据所述显示内容的数量,确定至少一个所述显示内容的排列位置;基于所述排列位置,将至少一个所述显示内容排列显示在所述被识别设备的屏幕之外的区域。

在一些实施例中,所述装置还包括:

第二显示模块,配置为当接收到强制提示消息时,在所述可穿戴式电子设备上显示所述强制提示消息。

在一些实施例中,所述获取模块,包括:

第一获取子模块,配置为基于第一预定规则,确定所述被识别设备;

第二获取子模块,配置为基于第二预定规则,获取所述被识别设备的屏幕状态。

在一些实施例中,所述第一获取子模块,还配置为以下一种或多种:

第一确定模块,配置为基于所述可穿戴式电子设备的通信连接的关系,确定所述被识别设备;

第二确定模块,配置为基于所述可穿戴式电子设备的视觉识别,确定所述被识别设备;

第三确定模块,配置为基于所述可穿戴式电子设备的听觉识别,确定所述被识别设备。

在一些实施例中,所述第二确定模块,还配置为基于所述可穿戴式电子设备的计算机视觉识别模型进行识别,确定所述被识别设备;或者,基于所述可穿戴式电子设备对视觉二维码进行识别,确定所述被识别设备。

在一些实施例中,所述第二获取子模块,还配置为以下一种或多种:基于所述被识别设备与所述可穿戴式电子设备之间通过通信协议建立的通信连接,接收所述被识别设备发送的所述被识别设备的屏幕状态;基于所述可穿戴式电子设备的计算机视觉识别模型,获取所述被识别设备的屏幕状态;基于连接所述可穿戴式电子设备和所述被识别设备的公共网,接收所述被识别设备发送给所述公共网的所述被识别设备的屏幕状态。

关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。

图10是根据一示例性实施例示出的一种显示装置图二。例如,装置可以是可穿戴式设备,该可穿戴式设备包括:智能手表、智能手环或者AR眼镜。

参照图10,装置可以包括以下一个或多个组件:处理组件802,存储器804,电源组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。

处理组件802通常控制装置的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。

存储器804被配置为存储各种类型的数据以支持在设备的操作。这些数据的示例包括用于在装置上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。

电力组件806为装置的各种组件提供电力。电力组件806可以包括电源管理系统,一个或多个电源,及其他与为装置生成、管理和分配电力相关联的组件。

多媒体组件808包括在所述装置和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当设备处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当装置处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。

I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件814包括一个或多个传感器,用于为装置提供各个方面的状态评估。例如,传感器组件814可以检测到设备的打开/关闭状态,组件的相对定位,例如所述组件为装置的显示器和小键盘,传感器组件814还可以检测装置或装置一个组件的位置改变,用户与装置接触的存在或不存在,装置方位或加速/减速和装置的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。

通信组件816被配置为便于装置和其他设备之间有线或无线方式的通信。装置可以接入基于通信标准的无线网络,如Wi-Fi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。

在示例性实施例中,装置可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。

在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器804,上述指令可由装置的处理器820执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

一种非临时性计算机可读存储介质,当所述存储介质中的指令由可穿戴式电子设备的处理器执行时,使得可穿戴式电子设备能够执行显示方法,所述方法包括:

获取被识别设备的屏幕状态;

基于所述被识别设备的屏幕状态,调整所述可穿戴式电子设备的显示。

本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。

应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

相关技术
  • 打印装置及其显示方法、打印系统及其显示方法、程序及存储介质
  • 图像显示方法、装置、存储介质及电子装置
技术分类

06120112772075