掌桥专利:专业的专利平台
掌桥专利
首页

屏幕渲染方法、装置、电子设备、存储介质及芯片

文献发布时间:2023-06-19 18:37:28


屏幕渲染方法、装置、电子设备、存储介质及芯片

技术领域

本公开涉及图像处理领域,尤其涉及一种屏幕渲染方法、装置、电子设备、存储介质及芯片。

背景技术

随着移动终端的技术发展,电子设备和外接设备的互联互通的需求也逐渐增加;通过各类投屏技术,可以将电子设备的显示内容投射到其他设备的屏幕。或者在某些场景中,用户需要将电子设备的显示内容进行录屏给其他用户观看。随着投屏或录屏需求的普及,随之而来的还有信息安全的问题,由于当前的投屏技术通常是通过录屏技术将该电子设备的显示内容直接投射于其他设备,因此对于当前电子设备的显示内容中用户的隐私内容,可能会造成一定的泄露。而在录屏的过程中,通常是将电子设备上显示的所有内容都进行了录制,也可能将用户的隐私内容录制进去,可能会造成一定的隐私泄露

发明内容

为克服相关技术中存在的问题,本公开提供一种屏幕渲染方法、装置、电子设备、存储介质及芯片。

根据本公开实施例的第一方面,提供一种屏幕渲染方法,应用于电子设备,所述方法包括:

获取待处理屏幕对应的屏幕标识;

在根据所述屏幕标识确定所述待处理屏幕为需要模糊渲染的屏幕的情况下,获取所述电子设备当前显示的应用程序的应用标识;

在根据所述当前显示的应用程序的应用标识确定所述当前显示的应用程序为需要模糊渲染的应用程序的情况下,对所述待处理屏幕中与所述当前显示的应用程序对应的显示内容进行模糊渲染。

可选地,所述在根据所述当前显示的应用程序的应用标识确定所述当前显示的应用程序为需要模糊渲染的应用程序的情况下,对所述待处理屏幕的显示内容进行模糊渲染,包括:

将所述当前显示的应用程序的应用标识与所述电子设备中存储的预设标识进行对比,所述预设标识为所述电子设备中预先设置的需要模糊渲染的一个或多个应用程序的应用标识;

当所述当前显示的应用程序的应用标识为所述预设标识时,为所述当前显示的应用程序生成标签;其中,所述标签用于指示所述当前显示的应用程序为需要模糊渲染的应用程序;

根据标签对所述待处理屏幕中与所述当前显示的应用程序对应的显示内容进行模糊渲染。

可选地,所述根据标签对所述待处理屏幕中与所述当前显示的应用程序对应的显示内容进行模糊渲染,包括:

根据所述标签,获取所述当前显示的应用程序在所述待处理屏幕中的隐私显示区域及所述隐私显示区域中的显示内容;

利用图形处理引擎对所述显示内容进行模糊渲染,并将模糊渲染后得到的内容叠加在所述隐私显示区域上方,得到模糊渲染结果。

可选地,所述获取所述当前显示的应用程序在所述待处理屏幕中的隐私显示区域及所述隐私显示区域中的显示内容,包括:

确定所述当前显示的应用程序在所述待处理屏幕中的全部显示区域,作为所述隐私显示区域;

获取所述隐私显示区域中的显示内容。

可选地,所述获取所述当前显示的应用程序在所述待处理屏幕中的隐私显示区域及所述隐私显示区域中的显示内容,包括:

接收区域选择指令,所述区域选择指令中包含用户选择的目标区域;

在所述待处理屏幕中将所述目标区域作为所述隐私显示区域;

获取所述隐私显示区域中的显示内容。

可选地,所述根据标签对所述待处理屏幕中与所述当前显示的应用程序对应的显示内容进行模糊渲染,还包括:

对所述待处理屏幕中除所述隐私显示区域外的其他区域的显示内容进行正常渲染,得到正常渲染结果,所述正常渲染为不进行模糊处理的渲染;

根据所述模糊渲染结果和所述正常渲染结果,生成所述待处理屏幕的显示图像。

可选地,所述方法还包括:

在所述当前显示的应用程序的应用标识不是所述预设标识时,对所述待处理屏幕中与所述当前显示的应用程序对应的显示内容进行正常渲染。

可选地,在所述获取待处理屏幕对应的屏幕标识之前,所述方法还包括:

当检测到创建了用于投屏或录屏的虚拟屏幕时,获取所述虚拟屏幕的屏幕标识;

将所述虚拟屏幕的屏幕标识作为所述待处理屏幕对应的屏幕标识。

可选地,所述方法还包括:

在根据所述屏幕标识确定所述待处理屏幕为所述虚拟屏幕的情况下,确定所述待处理屏幕为需要模糊渲染的屏幕;

在根据所述屏幕标识确定所述待处理屏幕为所述电子设备的物理屏幕的情况下,确定所述待处理屏幕为不需要模糊渲染的屏幕。

根据本公开实施例的第二方面,提供一种屏幕渲染装置,应用于电子设备,所述装置包括:

屏幕标识获取模块,被配置为获取待处理屏幕对应的屏幕标识;

应用标识获取模块,被配置为在根据所述屏幕标识确定所述待处理屏幕为需要模糊渲染的屏幕的情况下,获取所述电子设备当前显示的当前显示的应用程序的应用标识;

渲染模块,被配置为在根据所述当前显示的应用程序的应用标识确定所述当前显示的应用程序为需要模糊渲染的应用程序的情况下,对所述待处理屏幕中与所述当前显示的应用程序对应的显示内容进行模糊渲染。

根据本公开实施例的第三方面,提供一种屏幕渲染装置,应用于电子设备,包括:处理器;用于存储处理器可执行指令的存储器;

其中,所述处理器被配置为:执行所述可执行指令以实现上述第一方面中的任一实施方式所述的屏幕渲染方法的步骤。

根据本公开实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,所述程序指令被处理器执行时实现本公开第一方面所述的屏幕渲染方法的步骤。

根据本公开实施例的第五方面,提供一种芯片,包括处理器和接口;所述处理器用于读取指令以执行本公开第一方面所述的屏幕渲染方法的步骤。

本公开的实施例提供的技术方案可以包括以下有益效果:

在上述技术方案中,获取待处理屏幕对应的屏幕标识,在根据该屏幕标识确定待处理屏幕为需要模糊渲染的屏幕的情况下,获取电子设备当前显示的应用程序的应用标识,在根据当前显示的应用程序的应用标识确定当前显示的应用程序为需要模糊渲染的应用程序的情况下,对待处理屏幕中与当前显示的应用程序对应的显示内容进行模糊渲染。通过上述技术方案,无论是电子设备在向其他屏幕进行投屏,还是在电子设备上进行录屏,均可以针对待处理屏幕进行识别,以确定该待处理屏幕是否为需要模糊渲染的屏幕,在确定该待处理屏幕是模糊渲染的屏幕的情况下,对待处理屏幕上当前显示的应用程序进行识别,并在确定该应用程序是需要模糊渲染的应用程序的情况下,对该应用程序的显示内容通过模糊渲染进行处理,从而对于投屏操作或录屏操作,均能够隐藏屏幕中与该应用程序对应的隐私信息,一定程度上能够避免用户的信息泄露。

应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。

图1是根据一示例性实施例示出的一种屏幕渲染方法的流程图。

图2是根据一示例性实施例示出的另一种屏幕渲染方法的流程图。

图3是根据一示例性实施例示出的另一种屏幕渲染方法的流程图。

图4是根据一示例性实施例示出的另一种屏幕渲染方法的流程图。

图5A为根据一示例性实施例示出的一种进行模糊渲染前的界面示意图。

图5B为根据一示例性实施例示出的一种进行模糊渲染后的界面示意图。

图5C为根据一示例性实施例示出的一种模糊渲染的流程示意图。

图6是根据一示例性实施例示出的又一种屏幕渲染方法的流程图。

图7是根据一示例性实施例示出的一种屏幕渲染装置的框图。

图8是根据一示例性实施例示出的一种用于屏幕渲染方法的装置的框图。

具体实施方式

这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

可以理解的是,本公开中“多个”是指两个或两个以上,其它量词与之类似。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。

进一步可以理解的是,术语“第一”、“第二”等用于描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开,并不表示特定的顺序或者重要程度。实际上,“第一”、“第二”等表述完全可以互换使用。

进一步可以理解的是,本公开实施例中尽管在附图中以特定的顺序描述操作,但是不应将其理解为要求按照所示的特定顺序或是串行顺序来执行这些操作,或是要求执行全部所示的操作以得到期望的结果。在特定环境中,多任务和并行处理可能是有利的。

需要说明的是,本申请中所有获取信号、信息或数据的动作都是在遵照所在地国家相应的数据保护法规政策的前提下,并获得由相应装置所有者给予授权的情况下进行的。

随着投屏技术的普及,目前市场上主流的无线投屏技术有:AirPlay、DLNA(Digital Living Network Alliance)和Miracast(WiFi-Display)等,其中,AirPlay具有屏幕镜像的功能;DLNA能够传输媒体资料数据,例如,音乐、照片、视频等;Miracast是由Wi-Fi联盟于2012年所制定,以Wi-Fi直连为基础的无线显示标准协议。支持该协议的设备可以通过无线方式分享视频画面,例如,电子设备可通过Miracast将影片或照片直接在电视或其他设备播放。另一方面,录屏功能也是用户经常使用的功能,用于记录设备当前显示的内容。但是,随着各种投屏和录屏技术的发展,给用户日常的使用带来了便利,随之而来,投屏和录屏技术也带来了隐私泄露的弊端,例如在录屏或投屏时,屏幕中显示的内容有些是可以公开展示的,有些是用户的隐私内容,不便于展示(例如弹出的消息等)。因此,本方案提出了一种屏幕渲染方法,用于解决该技术问题。

图1是根据一示例性实施例示出的一种屏幕渲染方法的流程图,如图1所示,该方法应用于电子设备中,包括以下步骤。

在步骤S101中,获取待处理屏幕对应的屏幕标识。

可以理解的是,在本公开实施例中的电子设备可以是手机、平板电脑、笔记本电脑等移动终端,也可以是电视、台式电脑、游戏主机等固定终端设备,在日常使用投屏技术时,可能会发生将该电子设备的显示内容投屏至一个或多个外接设备的情况,该外接设备可以是支持投屏功能的电子设备,例如手机、平板电脑、个人电脑(PC)、投影仪、电视等设备。在该电子设备与待进行投屏的一个或多个外接设备建立连接后,并发起投屏后,会创建用于投屏的虚拟屏幕,其中,投屏时创建的虚拟屏幕也可以理解为一种录屏,即通过对电子设备物理屏幕中显示的内容进行录屏来生成一个虚拟屏幕,该虚拟屏幕用于投射到外接设备进行显示。可以理解的是,需要在几个外接设备上投屏就对应的建立几个用于投屏的虚拟屏幕,每个虚拟屏幕与外接设备一一对应,每个虚拟屏幕具有唯一的屏幕标识,从而该电子设备可以获取到一个或多个待处理屏幕对应的屏幕标识,该电子设备的物理屏幕也具有自身的屏幕标识。另一方面,在进行录屏操作时,电子设备会也通过录屏的方式会生成一个虚拟屏幕并显示在该电子设备本地的屏幕,可以理解为生成一个浮在该电子设备的物理屏幕的原有显示内容之上的虚拟屏幕,因此,录屏操作实际上是对该虚拟屏幕进行录制。

因此,无论是投屏或者录屏,都会生成一个新的虚拟屏幕,上述的待处理屏幕包括该物理屏幕和虚拟屏幕,电子设备可以根据各个屏幕标识识别其中需要模糊渲染的屏幕。

在步骤S102中,在根据屏幕标识确定待处理屏幕为需要模糊渲染的屏幕的情况下,获取电子设备当前显示的应用程序的应用标识。

可以理解的是,电子设备当前可能运行多个应用程序,有些应用程序可能在后台运行,有些应用程序在前台显示,电子设备当前显示由于会随着投屏操作显示在其他设备的屏幕上,因此可以获取该当前显示的应用程序的应用标识。其中,电子设备当前显示的应用程序可以包括:在该电子设备的当前显示界面中展示了应用程序的完整界面,或者展示部分内容(例如悬浮窗、悬浮按钮或者小部件(Widgets)等内容)的应用程序。

在步骤S103中,在根据当前显示的应用程序的应用标识确定该当前显示的应用程序为需要模糊渲染的应用程序的情况下,对待处理屏幕中与该当前显示的应用程序对应的显示内容进行模糊渲染。

可以理解的是,可以将当前显示的应用程序的应用标识与该电子设备中预先存储的预设标识进行对比,该预设标识为预先设置的一个或多个需要模糊渲染的应用程序的应用标识,在当前显示的应用程序的应用标识为电子设备的内部存储的预设标识时,则确定需要对当前显示的应用程序进行模糊渲染。其中,模糊渲染是对于当前显示的应用程序对应的显示内容进行模糊渲染,当前显示的应用程序对应的显示内容可以为待处理屏幕的一部分屏幕,也可以为待处理屏幕的整个屏幕,可以依据当前显示的应用程序在当前界面上的显示内容所在的区域来确定。

在上述技术方案中,获取待处理屏幕对应的屏幕标识,在根据该屏幕标识确定待处理屏幕为需要模糊渲染的屏幕的情况下,获取电子设备当前显示的应用程序的应用标识,在根据当前显示的应用程序的应用标识确定当前显示的应用程序为需要模糊渲染的应用程序的情况下,对待处理屏幕中与当前显示的应用程序对应的显示内容进行模糊渲染。通过上述技术方案,无论是电子设备在向其他屏幕进行投屏,还是在电子设备上进行录屏,均可以针对待处理屏幕进行识别,以确定该待处理屏幕是否为需要模糊渲染的屏幕,在确定该待处理屏幕是模糊渲染的屏幕的情况下,对待处理屏幕上当前显示的应用程序进行识别,并在确定该应用程序是需要模糊渲染的应用程序的情况下,对该应用程序的显示内容通过模糊渲染进行处理,从而对于投屏操作或录屏操作,均能够隐藏屏幕中与该应用程序对应的隐私信息,一定程度上能够避免用户的信息泄露。

可选地,在步骤S101之前,该方法还可以包括。

(1)当检测到创建了用于投屏或录屏的虚拟屏幕时,获取该虚拟屏幕的屏幕标识。(2)将该虚拟屏幕的屏幕标识作为该待处理屏幕对应的屏幕标识。

由于电子设备可能与一个或多个待进行投屏的外接设备建立连接,在建立连接后并且电子设备发起投屏后,或电子设备开启录屏功能后,会创建用于投屏或录屏的虚拟屏幕,该虚拟屏幕用于该外接设备进行投屏显示或用于电子设备本身进行录屏操作,因此每个虚拟屏幕具有唯一的屏幕标识(displayId),从而该电子设备可以获取到一个或多个待处理屏幕对应的屏幕标识,该电子设备的物理屏幕也具有自身的屏幕标识。在一种实现方式中,由于物理屏幕是电子设备自身的屏幕,因此电子设备可以忽略物理屏幕的屏幕标识,电子设备可以通过MediaProjectionManagerService(媒体保护管理服务,可以理解为用于监听虚拟屏幕创建的监听模块)监听是否创建虚拟屏幕,在产生新的displayId后,电子设备可以通过DisplayManagerService(显示屏幕管理服务,可以理解用于管理虚拟屏幕的模块)管理创建的虚拟屏幕,判断需要进行模糊渲染的待处理屏幕以及获取对应的displayId。上述的MediaProjectionManagerService和DisplayManagerService可以由电子设备中应用层的管理程序提供,该管理程序可以是任意一种风险策略控制应用,例如手机管家。

可选地,图2是根据一示例性实施例示出的另一种屏幕渲染方法的流程图,如图2所示,该方法还可以包括以下步骤。

在步骤S104中,在根据屏幕标识确定待处理屏幕为虚拟屏幕的情况下,确定该待处理屏幕为需要模糊渲染的屏幕。

在步骤S105中,在根据屏幕标识确定待处理屏幕为电子设备的物理屏幕的情况下,确定该待处理屏幕为不需要模糊渲染的屏幕。

如前文所述,电子设备创建了一个虚拟屏幕后,会产生一个新的屏幕标识,由于屏幕标识具有唯一性,因此创建了一个虚拟屏幕后,该电子设备就具有了两个屏幕标识,可以对这些屏幕标识进行识别,根据屏幕标识电子设备可以判断该屏幕标识对应的屏幕是电子设备的物理屏幕,还是用于投屏的虚拟屏幕,并在判定其为虚拟屏幕时,可以根据上述的DisplayManagerService确定该屏幕标识对应的屏幕为需要模糊渲染的屏幕。或者,在另一种实现方式种,由于电子设备的物理屏幕的屏幕标识可以是固定的,因此可以忽略该电子设备的物理屏幕的屏幕标识,只要电子设备检测到一个新的屏幕标识且与物理屏幕的屏幕标识不同,即可将该屏幕标识对应的屏幕确定为虚拟屏幕,从而确定为需要模糊渲染的屏幕。

可选地,图3是根据一示例性实施例示出的另一种屏幕渲染方法的流程图,如图3所示,步骤S103可以包括以下步骤。

在步骤S1031中,将当前显示的应用程序的应用标识与电子设备中存储的预设标识进行对比,预设标识为电子设备中预先设置的需要模糊渲染的一个或多个应用程序的应用标识。

在步骤S1032中,当当前显示的应用程序的应用标识为预设标识时,为当前显示的应用程序生成标签;其中,该标签用于指示当前显示的应用程序为需要模糊渲染的应用程序。

在步骤S1033中,根据标签对待处理屏幕中与当前显示的应用程序对应的显示内容进行模糊渲染。

可选地,可以预先建立一个需要模糊渲染的应用名单,例如建立一个应用列表存储在该电子设备中,在该应用列表中可以包括需要模糊渲染的一个或多个应用程序的应用标识作为上述的预设标识,该应用列表中的应用程序可以由用户根据自身的需求进行设置,在执行步骤S1031时,可以将当前显示的应用程序的应用标识与该应用列表中的应用标识进行对比,以判断当前显示的应用程序的应用标识是否为预设标识,当获取到的当前显示的应用程序的标识为移动终端中多个应用标识中的预设标识时,则确定需要对当前显示的应用程序进行模糊渲染,并且可以为该应用程序生成标签,该标签用于标识当前显示的应用程序需要在待处理屏幕上进行模糊渲染,以在待处理屏幕上进行隐私保护处理。此外,每当待处理屏幕上打开新的应用程序时,均可以将新的应用程序的应用标识与电子设备中的预设标识进行对比。可以理解的是,电子设备可以对运行的应用程序进行监控,每当有一个新的应用程序打开时,该新打开的应用程序就属于当前显示的应用程序,因此可以对该新打开的应用程序执行上述步骤S1031至S1033。

例如,以手机等移动终端为例,该移动终端当前中运行有照片应用、音乐应用,例如显示有照片应用的应用界面,以及显示有音乐应用的悬浮窗,其中,经过上述方法对比可以确定上述应用列表中存在照片应用的应用标识,不存在音乐应用的应用标识,则可以将照片应用确定为要进行模糊渲染的,目标应用,而音乐应用不需要进行模糊渲染。此情况下,当进行投屏时,会对照片应用对应的显示内容进行模糊渲染,不会对音乐应用对应的显示内容进行模糊渲染。

可选地,图4是根据一示例性实施例示出的另一种屏幕渲染方法的流程图,如图4所示,步骤S1033可以包括以下步骤。

步骤S10331中,根据标签,获取当前显示的应用程序在待处理屏幕中的隐私显示区域及隐私显示区域中的显示内容。

步骤S10332中,利用图形处理引擎对显示内容进行模糊渲染,并将模糊渲染后得到的内容叠加在隐私显示区域上方,得到模糊渲染结果。

可以理解的是,当需要对当前显示的应用程序进行模糊渲染时,电子设备向自身的渲染合成模块传递当前显示的应用程序的标签(flag),如上文所述该标签用于指示需要对当前显示的应用程序进行模糊渲染,渲染合成模块(surfaceflinger)根据该标签对当前显示的应用程序进行渲染时,利用图形处理引擎(例如Skia)对该电子设备中运行的各个应用对应的层(layer)逐层进行渲染,在渲染到该当前显示的应用程序时,根据上述标签判断当前显示的应用程序需要进行模糊渲染,则会获取当前显示的应用程序对应的显示区域和显示内容,利用该图形处理引擎对该显示内容进行模糊处理,并将处理后的内容叠加在该隐私显示区域上方,示例地,上述的内容叠加可以理解为通过对该显示内容进行模糊处理后,得到了一个模糊化的新的图层,将该图层叠加在在该隐私显示区域上方。对于未被标签标识的应用,渲染合成模块则不会对该应用程序进行模糊渲染。

示例地,图5A为根据一示例性实施例示出的一种进行模糊渲染前的界面示意图,如图5A所示,当前界面显示的是照片应用的应用界面,应用界面中显示有若干照片(在5A中用矩形框50表示),在当前界面的顶部的显示有状态栏(包括时间、信号、电池等信息),以及在当前界面的底部的显示有若干应用图标。其中照片应用的应用界面所占据的区域为当前界面中间部分的区域。因此可以将照片应用的应用界面所占据的这部分中间区域确定为隐私显示区域,并对该隐私显示区域进行模糊化处理,模糊化处理后的效果可以如图5B所示,图5B为根据一示例性实施例示出的一种进行模糊渲染后的界面示意图,在5B中该照片应用的应用界面所占据的区域为模糊状态,无法看清楚照片应用的应用界面中的图片,从而实现对该照片应用的隐私保护。可选地,还可以在进行投屏或者录屏时,通过应用层的管理程序,监听到开启投屏或录屏时,通过广播方式通知电子设备的系统UI进行提示,例如弹窗提示(如胶囊提示),用户可以通过点击提示窗口中的按钮来选择是否要对当前显示的应用程序进行模糊渲染;在当前显示的应用程序切换,例如打开了一个新的应用程序时,该管理程序可以根据当前显示内容更新弹窗提示的状态,用户可以通过再次点击弹窗中的按钮选择是否要对当前显示的应用程序进行模糊渲染。

图5C为根据一示例性实施例示出的一种模糊渲染的流程示意图,适用于录屏或投屏操作,由于无论是录屏还是投屏,实际都是电子设备发起了录屏请求,通过录屏来创建一个虚拟屏幕,区别在于在进行投屏时该虚拟屏幕投射给外接设备,由外接设备来显示,而录屏时创建虚拟屏幕显示在电子设备本地,因此在一种实现方式中,可以通过对录屏请求进行监听,来检测是否要创建虚拟屏幕。如图5C中所示,可以通过电子设备中的MediaProjectionManagerService(媒体保护管理服务)来监听录屏请求,在监听到某一应用的录屏请求(可以理解的是,如前文所述,该录屏请求可能是投屏操作触发的,也可能是录屏操作触发的)时,通过DisplayManagerService(显示屏幕管理服务)获取到根据该录屏请求创建的待处理的虚拟屏幕的displayid,确定该待处理的虚拟屏幕为需要模糊渲染的虚拟屏幕的情况下,获取该应用的应用标识,当该应用的应用标识为需要进行模糊渲染的应用程序的应用标识时,利用WindowManagerService(窗口管理服务,可以理解为是用于标记高敏感Window的标记模块,Window可以理解为需要模糊化处理的区域)标记该应用的显示内容,并向渲染合成模块发送标签,以使图形处理引擎对该应用的显示内容进行模糊渲染后,渲染合成模块将处理后的内容叠加在原显示内容之上,并展示于该待处理的虚拟屏幕上,从而可以实现在录屏或者投屏时,对敏感应用的内容进行模糊化,避免隐私泄露。

可选地,在一种实现方式中,步骤S10331还可以包括以下步骤。

A、确定当前显示的应用程序在待处理屏幕中的全部显示区域,作为隐私显示区域。

B、获取隐私显示区域中的显示内容。

可选地,在另一种实现方式中,步骤S10331还可以包括以下步骤。

C、接收区域选择指令,区域选择指令中包含用户选择的目标区域。

D、在待处理屏幕中将目标区域作为隐私显示区域。

E、获取隐私显示区域中的显示内容。

即当当前显示的应用程序在电子设备当前界面显示时,该隐私显示区域可以是当前界面的所有区域,也可以是部分区域。该部分区域可以基于图像识别技术自动识别出该隐私显示区域,例如以上述的照片应用为例,通过图像识别技术可以自动识别出当前显示界面中哪些地方显示的是图片,则可以将相关的区域确定为需要模糊化处理的区域;或者,该部分区域可以由用户来自行设置,例如可以由用户进行框选一个区域。如果当前显示的应用程序当前显示的内容占据了当前界面的所有区域,那么该隐私显示区域为当前界面的所有区域;如果当前显示的应用程序当前显示的内容占据了当前界面的一部分,或者用户希望只展示其中的一部分,隐藏另一部分,则该隐私显示区域为当前界面的部分区域,还可以在进行投屏或者录屏时,通过应用层的管理程序,监听到开启投屏或录屏时,通过广播方式通知电子设备的系统UI进行窗口提示,用户可以通过点击窗口选择是否要对当前显示的应用程序进行模糊渲染;当当前显示的应用程序切换时,该管理程序根据当前显示内容更新窗口状态,用户可以通过再次点击窗口选择是否要对当前显示的应用程序进行模糊渲染。

可以理解的是,步骤A和步骤B是将当前显示的应用程序的在待处理屏幕的全部显示内容进行模糊处理,例如,可以将照片应用的全部显示内容进行模糊渲染。步骤C、步骤D和步骤E是可以由用户在自行对需要进行渲染模糊的区域进行选择,例如,在进行投屏时,在移动终端或待处理屏幕中增加自定义选项,用户在选择后,在自定义选项中的操作界面中选择需要进行模糊渲染的区域,然后获取用户选择的目标区域,渲染合成模块利用图形处理引擎对该目标区域进行模糊渲染;或者,在向待处理屏幕进行投屏时,输出提示,询问用户是否要自行选择需要进行模糊渲染的区域,当用户选择需要时,弹出操作界面,然后在用户选择需要模糊处理的显示区域后,生成标签,并发送至渲染合成模块,利用图形处理引擎对该显示区域进行模糊渲染。

可选地,该屏幕渲染方法还可以包括以下步骤:

在当前显示的应用程序的应用标识不是预设标识时,对待处理屏幕中与该当前显示的应用程序对应的显示内容进行正常渲染,正常渲染为不进行模糊处理的渲染。

可选地,图6是根据一示例性实施例示出的又一种屏幕渲染方法的流程图,如图6所示,步骤S1033还可以包括以下步骤。

在步骤S10333中,对待处理屏幕中除隐私显示区域外的其他区域的显示内容进行正常渲染,得到正常渲染结果。

在步骤S10334中,根据模糊渲染结果和正常渲染结果,生成待处理屏幕的显示图像。

其中,对于不需要进行隐私处理保护的显示内容,会对其显示内容进行正常渲染,并将正常渲染结果叠加于模糊渲染结果上方,以保证正常渲染的显示内容未被模糊渲染的显示内容覆盖,生成待处理屏幕上的显示图像。

在上述技术方案中,对于需要进行模糊渲染的当前显示的应用程序,通过生成标签,利用渲染合成模块和图形处理引擎对当前显示的应用程序在显示区域的显示内容进行模糊渲染,将正常渲染结果叠加于模糊渲染结果上方,以保证正常渲染结果未被模糊渲染结果遮挡,并且能够根据用户指令对需要模糊渲染的区域进行自定义,在保护用户隐私信息的同时,提高了模糊渲染功能的便利性和灵活性。

图7是根据一示例性实施例示出的一种屏幕渲染装置的框图。该装置用于电子设备中,参照图7,该屏幕渲染装置700可以包括:

屏幕标识获取模块701,被配置为获取待处理屏幕对应的屏幕标识。

应用标识获取模块702,被配置为在根据屏幕标识确定待处理屏幕为需要模糊渲染的屏幕的情况下,获取电子设备当前显示的当前显示的应用程序的应用标识。

渲染模块703,被配置为在根据当前显示的应用程序的应用标识确定该当前显示的应用程序为需要模糊渲染的应用程序的情况下,对待处理屏幕中与该当前显示的应用程序对应的显示内容进行模糊渲染。

可选地,该屏幕渲染装置700可以包括:检测模块,被配置为:当检测到创建了用于投屏或录屏的虚拟屏幕时,获取该虚拟屏幕的屏幕标识;将该虚拟屏幕的屏幕标识作为所述待处理屏幕对应的屏幕标识。

可选地,该屏幕渲染装置700还可以包括:屏幕识别模块,被配置为:

在根据屏幕标识确定待处理屏幕为虚拟屏幕的情况下,确定该待处理屏幕为需要模糊渲染的屏幕。

在根据屏幕标识确定待处理屏幕为电子设备的物理屏幕的情况下,确定该待处理屏幕为不需要模糊渲染的屏幕。

可选地,渲染模块703,可以被配置为:

将当前显示的应用程序的应用标识与电子设备中存储的预设标识进行对比,预设标识为电子设备中预先设置的需要模糊渲染的一个或多个应用程序的应用标识。

当当前显示的应用程序的应用标识为预设标识时,为该当前显示的应用程序生成标签;其中,该标签用于指示当前显示的应用程序为需要模糊渲染的应用程序。

根据标签对待处理屏幕中与当前显示的应用程序对应的显示内容进行模糊渲染。

可选地,渲染模块703,可以被配置为:

根据该标签,获取当前显示的应用程序在待处理屏幕中的隐私显示区域及隐私显示区域中的显示内容。

利用图形处理引擎对显示内容进行模糊渲染,并将模糊渲染后得到的内容叠加在隐私显示区域上方,得到模糊渲染结果。

可选地,渲染模块703,可以被配置为:

确定当前显示的应用程序在待处理屏幕中的全部显示区域,作为隐私显示区域。

获取隐私显示区域中的显示内容。

可选地,渲染模块703,可以被配置为:

接收区域选择指令,区域选择指令中包含用户选择的目标区域。

在待处理屏幕中将目标区域作为隐私显示区域。

获取隐私显示区域中的显示内容。

可选地,渲染模块703,可以被配置为:

对待处理屏幕中除隐私显示区域外的其他区域的显示内容进行正常渲染,得到正常渲染结果。

根据模糊渲染结果和正常渲染结果,生成待处理屏幕的显示图像。

可选地,渲染模块703,还可以被配置为:

在当前显示的应用程序的应用标识不是该预设标识时,对该待处理屏幕中与当前显示的应用程序对应的显示内容进行正常渲染。

在上述技术方案中,对于需要进行模糊渲染的当前显示的应用程序,通过生成标签,利用渲染合成模块和图形处理引擎对当前显示的应用程序在显示区域的显示内容进行模糊渲染,将正常渲染结果叠加于模糊渲染结果上方,以保证正常渲染结果未被模糊渲染结果遮挡,并且能够根据用户指令对需要模糊渲染的区域进行自定义,在保护用户隐私信息的同时,提高了模糊渲染功能的便利性和灵活性。

关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。

本公开还提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开提供的屏幕渲染方法的步骤。

图8是根据一示例性实施例示出的一种用于屏幕渲染方法的装置800的框图。例如,装置800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。

参照图8,装置800可以包括以下一个或多个组件:处理组件802,存储器804,电源组件806,多媒体组件808,音频组件810,输入/输出接口812,传感器组件814,以及通信组件816。

处理组件802通常控制装置800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。

存储器804被配置为存储各种类型的数据以支持在装置800的操作。这些数据的示例包括用于在装置800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。

电源组件806为装置800的各种组件提供电力。电源组件806可以包括电源管理系统,一个或多个电源,及其他与为装置800生成、管理和分配电力相关联的组件。

多媒体组件808包括在所述装置800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当装置800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当装置800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。

输入/输出接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件814包括一个或多个传感器,用于为装置800提供各个方面的状态评估。例如,传感器组件814可以检测到装置800的打开/关闭状态,组件的相对定位,例如所述组件为装置800的显示器和小键盘,传感器组件814还可以检测装置800或装置800一个组件的位置改变,用户与装置800接触的存在或不存在,装置800方位或加速/减速和装置800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。

通信组件816被配置为便于装置800和其他设备之间有线或无线方式的通信。装置800可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。

在示例性实施例中,装置800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。

在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器804,上述指令可由装置800的处理器820执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

上述装置除了可以是独立的电子设备外,也可是独立电子设备的一部分,例如在一种实施例中,该装置可以是集成电路(Integrated Circuit,IC)或芯片,其中该集成电路可以是一个IC,也可以是多个IC的集合;该芯片可以包括但不限于以下种类:GPU(GraphicsProcessing Unit,图形处理器)、CPU(Central Processing Unit,中央处理器)、FPGA(Field Programmable Gate Array,可编程逻辑阵列)、DSP(Digital Signal Processor,数字信号处理器)、ASIC(Application Specific Integrated Circuit,专用集成电路)、SOC(System on Chip,SoC,片上系统或系统级芯片)等。上述的集成电路或芯片中可以用于执行可执行指令(或代码),以实现上述的屏幕渲染方法。其中该可执行指令可以存储在该集成电路或芯片中,也可以从其他的装置或设备获取,例如该集成电路或芯片中包括处理器、芯片存储器,以及用于与其他的装置通信的接口。该可执行指令可以存储于该芯片存储器中,当该可执行指令被处理器执行时实现上述的屏幕渲染方法;或者,该集成电路或芯片可以通过该接口接收可执行指令并传输给该处理器执行,以实现上述的屏幕渲染方法。

在另一示例性实施例中,还提供一种计算机程序产品,该计算机程序产品包含能够由可编程的装置执行的计算机程序,该计算机程序具有当由该可编程的装置执行时用于执行上述的屏幕渲染方法的代码部分。

本领域技术人员在考虑说明书及实践本公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。

应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

技术分类

06120115631074