掌桥专利:专业的专利平台
掌桥专利
首页

人机接口的能量和/或资源管理的方法和系统

文献发布时间:2023-06-19 10:24:22


人机接口的能量和/或资源管理的方法和系统

技术领域

本公开涉及能量和/或资源管理,例如涉及(例如交通工具或销售点或视频设备或家庭自动化设备的)人机接口的能量和/或资源管理。

背景技术

各种设备(例如交通工具)中的电力是有限的资源,与化石燃料相比,再次充满电力更加麻烦。例如,虽然可以在几秒钟内给汽车加汽油或柴油,但电动交通工具的充电花费约数小时。此外,尽管几乎可以在任何地方找到汽油或柴油的加油站,但电动交通工具的充电可能需要尚未广泛使用的特定充电基础设施。

此外,当前的缺点不但与能量使用相关,而且总体系统(折旧)成本可以被硬件资源成本至少推动到相似的量。高分辨率显示器越来越多,并且始终以最高图形能力来驱动该高分辨率显示器可能消耗大量能量,并且可能利用大量硬件资源(例如,CPU(中央处理单元)、GPU(图形处理单元)的存储器带宽)以及RAM(随机存取存储器)数据吞吐量),这是计算系统的合理成本因素。总而言之,可以理解CPU、GPU、连接带宽和系统能耗的成本正不断增加。

因此,需要减少电能消耗和/或计算和图形处理的方法和系统。

发明内容

本公开提供了计算机实现方法、计算机系统和非暂时性计算机可读介质。在说明书和附图中给出了实施方式。

在一个方面,本公开涉及一种人机接口的能量和/或资源管理的计算机实现方法,该计算机实现方法包括由人机接口的计算机硬件组件执行(换句话说:实施)的以下步骤:确定人机接口的用户对该人机接口的注意力水平;以及基于确定的注意力水平,对人机接口的能量和/或资源利用相关设置进行设置。

换句话说,如果确定了用户(例如,交通工具(例如汽车、卡车、飞机或使用电力为人机接口供电的任何其它交通工具)的驾驶员或乘客)对人机接口(例如,图形显示器)的特定注意力水平(例如低注意力或者例如低于预定阈值的注意力),则可以对人机接口的设置进行设置(例如,设置成降低能耗或减少资源(例如,硬件资源)利用的设置)。

能量和/或资源利用相关设置可以是与人机接口的能量使用和/或资源利用相关的设置。

人机接口可以是交通工具或销售点或视频设备或家庭自动化设备的人机接口。

例如,在人机接口是交通工具的人机接口的情况下,用户可以是交通工具的乘员(例如,乘客或驾驶员)。

例如,较低的注意力水平可以导致较低能耗或较低资源利用的能量和/或资源利用相关设置,而较高的注意力水平可以导致较高能耗或较高资源利用的能量和/或资源利用相关设置。换句话说,设置可以使得能耗随着注意力水平的降低而降低。因此,可以减少总体系统(折旧)成本和硬件资源成本。例如,可以降低CPU和/或GPU的(例如,与硬件利用相关的)成本和/或连接带宽以及系统的功耗。另外,可以减少物理硬件。

注意力水平可以表示为概率或比例(例如,0至1之间(或0%至100%之间)的实数)。在另一示例中,注意力水平可以由模糊表示(例如,该模糊表示具有“最不可能是”、“可能不是”、“可能是”、“最可能是”的概率水平)或适合于指示概率的任何其它表示来表示。在另一示例中,注意力水平可以是二元的(例如“注意”或“不注意”)。将理解,能量和/或资源利用相关设置也可以是二元的(例如“开”或“关”)或非二元的(例如,将特定设置设置成特定百分比,例如,对于不注意的用户,亮度可以设置成最大亮度的30%,对于注意的用户,亮度可以设置成最大亮度的100%)。

交通工具可以是汽车、卡车、飞机或利用电能为人机接口供电的任何其它交通工具。乘员可以是交通工具的操作员(例如,汽车的驾驶员)或者乘客(换句话说:与操作员不同的另一乘员)。人机接口可以是图形显示器、扬声器、触觉输出设备或触觉输入设备,或者可以用于从计算系统接收信息或者用于向计算系统提供信息的任何其它设备或单元。人机接口可以与对交通工具进行控制(例如,驾驶交通工具(例如,当前速度或导航指令的显示))或者例如对自主驾驶交通工具进行控制(例如,自主驾驶交通工具的(例如,针对自主驾驶交通工具的减震系统的期望舒适水平的)设置的显示)相关。人机接口还可以与除了驾驶相关内容以外的其它内容相关,例如,人机接口可以是对空调进行控制的接口、向交通工具的乘员显示电影的接口。

根据另一方面,该计算机实现方法还包括由计算机硬件组件实施的以下步骤:确定用户的聚焦点;其中,注意力水平是基于该聚焦点确定的。例如,注意力水平可以基于聚焦点距人机接口(例如,图形显示器)的中心的距离、或者基于聚焦点在人机接口上停留的时间和/或基于聚焦点在人机接口内是否存在变化而确定。

根据另一方面,聚焦点是基于以下项中的至少一项确定的:用户的头部的姿势;以及用户的眼睛中的至少一只眼睛的姿势。

姿势可以包括位置(作为平面中的二维位置或空间中的三维位置)和/或方向(作为一维方向、二维方向或者三维方向)。基于头部或眼睛的姿势,可以估计用户的注视被引导到的位置,因此可以基于该估计来确定注意力水平。

根据另一方面,该计算机实现方法还包括由计算机硬件组件实施的以下步骤:确定用户的困倦水平。例如,困倦水平可以是基于以下项中的至少一项确定的:用户的移动;用户的眼睛移动;以及用户的反应时间。注意力水平是基于困倦水平确定的。例如,如果确定用户是困倦的或疲倦的,则图形显示器(图形显示器可能是人机接口或者图形显示器可以被包括在人机接口中)可能会渐隐(fade out)(例如,可能会在预定时间段内持续降低亮度),并且然后可能会完全关闭。另选地,可以提示用户进行输入,以避免图形显示器关闭。如果用户未提供输入,则显示器可能会渐隐,并且然后可能会完全关闭。

根据另一方面,能量和/或资源利用相关设置包括图形显示器(图形显示器可以是人机接口或者图形显示器可以被包括在人机接口中)的帧速率。通过降低帧速率(换句话说:时间分辨率),可以降低图形显示器本身的能耗,此外,因为提供将被显示的内容的单元可以以较低频率(换句话说:不太经常)确定内容,所以可以降低这些单元的能耗。

根据另一方面,能量和/或资源利用相关设置包括像素分辨率,图形处理单元按照该像素分辨率提供将在图形显示器(图形显示器可以是人机接口或者图形显示器可以被包括在人机接口中)上显示的帧。通过降低像素分辨率(换句话说:空间分辨率),可以降低图形显示器本身的性能或能耗,此外,因为提供将被显示的内容的单元可以确定较低分辨率的内容,所以可以降低这些单元的能耗。

根据另一方面,能量和/或资源利用相关设置包括图形显示器(图形显示器可以是人机接口或者图形显示器可以被包括在人机接口中)的背光照明强度。降低背光照明强度可以降低图形显示器的能耗。可选地,提高视频信号(例如,图片或电影)的亮度,以补偿显示器中的较低光功率,并向观看者生成来自屏幕的但具有降低的对比度的相同亮度感知。

根据另一方面,能量和/或资源利用相关设置与将在图形显示器(图形显示器可以是人机接口或者图形显示器可以被包括在人机接口中)上显示的数据的预处理相关。例如,可以利用计算上成本较低(因此能耗较少)的方法对将被显示的数据进行预处理。例如,可以按照较小的能耗水平完成将被显示的内容的图形动画,例如,以在导航系统上例示转弯指令。

根据另一方面,能量和/或资源利用相关设置与获取将在图形显示器(图形显示器可以是人机接口或者图形显示器可以被包括在人机接口中)上显示的数据相关。例如,如果用户对图形显示器的注意力低于预定阈值,则可以以降低的速率(换句话说:不太经常或者以较低分辨率或者以自身重复的较短的视频剪辑的形式(即,对于滚动电影)获取将被显示的数据,或者可能根本不获取一些数据并且可能将图形显示器的(例如,在用户注意图形显示器的情况下)通常显示数据的部分留作空白。这可以降低针对获取数据的能耗。

根据另一方面,能量和/或资源利用相关设置包括关闭状态。例如,在注意力水平低于预定阈值的情况下,可以关闭图形显示器(图形显示器可以是人机接口或者图形显示器可以被包括在人机接口中)。一旦关闭图形显示器,则还可以关闭与图形设备相关的图形处理单元或者可以将该图形处理单元设置成睡眠模式或减少活动模式。此外,一旦关闭图形显示器,则还可以关闭计算系统的获取将在图形显示器上显示的数据的组件(换句话说:单元)(例如,传感器或通信单元)或者将该组件设置成睡眠模式或减少活动模式。

根据另一方面,能量和/或资源利用相关设置是基于人机接口的电池状态设置的。例如,如果电动交通工具的人机接口处于低电量状态(例如,因为设有人机接口的电动交通工具处于低电量状态),则只要注意力水平低于第一预定阈值,能量和/或资源利用相关设置就可以被设置成低功耗设置,而如果电动交通工具的电池充电到超过预定量的量,则仅在注意力水平下降到低于第一阈值的第二阈值以下的情况下,能量和/或资源利用相关设置才可以被设置成低功耗设置。

根据另一方面,能量和/或资源利用相关设置包括音频系统的音频设置。音频设置可以包括响度、均衡器设置或可能影响音频系统能耗的任何其它设置。音频设置可以是针对交通工具中的所有扬声器的音频设置,或者仅针对汽车的扬声器的选定子集(例如,最接近(或在另一示例中最远离)交通工具的乘员的扬声器)的音频设置,或者针对与人机接口相关(例如,是人机接口的一部分)的扬声器的音频设置。

根据另一方面,能量和/或资源利用相关设置包括对空间上是大的显示器(例如,广告视频墙)的处理,其中,接近显示器的用户通常仅感知显示器的特定区域部分,而不是全部的显示器区域。利用所有上述设置则也可以应用于显示器表面的特定区域,以对亮度和图形处理以及内容计算进行控制。

根据另一方面,能量和/或资源利用相关设置包括多用户场景的处理。通过识别多个用户聚焦(例如还具有不同用户注意力)的所有区域,可以利用所有上述方法,确定所有区域和显示器的平衡设置并将该平衡设置应用于HMI系统。

根据另一方面,菊花链视频链路可以用于利用较少线束(但利用有限的带宽)来连接多个显示器。根据各种实施方式的方法可以用于在菊花链系统中在给定的带宽-显示器约束下实现最佳的感知结果。

在另一方面,本公开涉及计算机系统,所述计算机系统包括多个计算机硬件组件,所述多个计算机硬件组件被配置成实施本文所描述的计算机实现方法的多个或全部步骤。

所述计算机系统可以包括多个计算机硬件组件(例如,处理单元、至少一个存储器单元和至少一个非易失性数据存储部)。将理解,可以提供另外的计算机硬件组件并将其用于在计算机系统中实施计算机实现方法的步骤。所述非暂时性数据存储部和/或存储器单元可以包括计算机程序,所述计算机程序用于指示计算机例如使用处理单元和至少一个存储器单元来执行本文所描述的计算机实现方法的多个或全部步骤或方面。

所述计算机系统可以包括与机器学习结合的神经元网络处理架构。该神经元网络则可以使用可用的传感器数据以及HMI系统状态和能力的知识以及当前策略来在该神经元网络的神经元节点内计算用户的聚焦点和注意力情况,并生成所需的与能量和/或资源利用相关的设置作为输出。

在另一方面,本公开涉及一种非暂时性计算机可读介质,该非暂时性计算机可读介质包括用于实施本文所描述的计算机实现方法的多个或全部步骤或方面的指令。计算机可读介质可以被配置成:诸如光盘(CD)或数字通用盘(DVD)的光学介质;诸如硬盘驱动器(HDD)的磁性介质;固态驱动器(SSD);诸如闪速存储器的只读存储器(ROM)等。此外,计算机可读介质可以被配置成经由诸如互联网连接的数据连接能够访问的数据存储部。计算机可读介质可以例如是在线数据储存库或云存储部。

本公开还涉及一种计算机程序,该计算机程序用于指示计算机执行本文所描述的计算机实现方法的多个或全部步骤或方面。

附图说明

本文结合以下附图描述了本公开的示例性实施方式和功能,附图示意性地示出了:

图1是根据各种实施方式的计算系统;

图2是眼睛视觉(eye visus)/聚焦点的图表;

图3是例示了根据各种实施方式的用于人机接口的能量和/或资源管理的计算机实现方法的流程图;以及

图4是例示了根据实施方式的方法的流程图。

具体实施方式

根据各种实施方式,可以提供如下方法和系统,该方法和系统减少例如交通工具或销售点设备或视频设备或家庭自动化设备中的总体计算资源和/或数据业务/传输和/或电能消耗。例如,可以提供聚焦并减少基于HMI(人机接口)的计算系统上的计算功率的方法和设备。

对于HMI,可以使用大量图形屏幕,并且可以使用高的图形性能来创建最佳可能用户体验。例如,可以使用大量像素、快速图形引擎、快速应用和快速应用响应时间以及像显示器对比度的高质量光学参数。例如,用于机械和交通工具(例如,驾驶舱和舱室信息娱乐系统)的HMI可以同时驱动多个屏幕(例如,四个到八个屏幕),或者可以使用非常大的屏幕和增强现实映射。

创建HMI的优质用户体验可能需要大量电力资源。为了确保所有屏幕上的最小帧速率(例如,高于预定阈值的FPS(每秒帧数))和反应时间,所使用的像GPU(图形处理单元)和CPU(中央处理单元)的计算元件可能是昂贵的并且消耗大量电力。随着越来越多的内容、动画和广告托管在云中并实时流传输到本地HMI系统,背景数据带宽消耗也随之增加。这可能导致CPU、GPU、连接带宽和系统功耗的成本增加,并且尤其可能影响纯电动交通工具。

根据各种实施方式,关于人类感知的知识可以与人类的当前聚焦点相结合,以识别HMI的哪些区域当前正处于感知聚焦点中并因此需要表现出最高性能,以及哪些区域当前仅处于外围感知或根本未被感知到并因此可以以降低的性能工作。例如,关于当前用户(例如,乘客或驾驶员)状态的信息可以通过使用例如舱室摄像头或舱室雷达而确定,该信息也可以用于提高功能安全性和用户便利性。该信息可以用于为用户当前需求和聚焦点指派或平衡计算功率。这可以适用于单个用户,但也可以适用于计算系统的多个同时用户(例如,用于汽车的驾驶员和其他乘员)。

图1示出了根据各种实施方式的计算系统100。计算系统100可以包括计算单元102、一个或更多个图形显示器122(例如,多个TFT(薄膜晶体管)显示器)、驾驶员/面部摄像头118(其可以指向驾驶员,例如,指向驾驶员的头部或驾驶员的面部)以及一个或更多个舱室/人员摄像头120(其可以指向其他乘员,例如,指向其他成员的头部或其他成员的面部)。图形处理单元(GPU)112可以驱动一个或更多个图形显示器122。将理解,尽管参照图形显示器描述了图1,但是可以利用计算系统100来控制任何其它HMI(例如,扬声器或触觉输出设备或触觉输入设备)。基于聚焦点的计算单元104可以实施根据各种实施方式的方法,以基于注意力水平来确定能量和/或资源利用相关设置,并且可以从眼睛注视和用户监测单元114(其也可以称为用户监测单元114)接收输入。眼睛注视和用户监测单元114可以基于从驾驶员/面部摄像头118和/或一个或更多个舱室/人员摄像头120接收到的输入来确定驾驶员的和/或其他乘员的眼睛定位。基于聚焦点的计算单元104可以对GPU 112的、HMI管理器控制单元110的、应用处理单元108的和云/在线控制单元106的能量和/或资源利用相关设置进行控制。云/在线控制单元106可以经由无线接口116(例如,通过互联网,例如,与其它交通工具或者与中央交通工具控制站)进行通信。

基于聚焦点的计算单元104可以执行根据各种实施方式的如下方法:该方法例如通过使用基于摄像头和雷达的眼睛注视(例如,由用户监测单元114获取)识别用户当前正查看HMI的哪个部分(例如,哪个特定屏幕),来向一个或更多个用户(例如,交通工具的乘员)的聚焦区域动态地指派计算功率,并降低当前未处于直接聚焦点的所有其它HMI元件(例如,所有其它显示器屏幕)的性能。该方法可以作为计算系统100内(例如,基于聚焦点的计算单元104中)的附加软件模块而提供。

可以通过降低GPU传送最终计算的帧的帧速率(以FPS为单位)来降低HMI性能。可以通过降低GPU传送最终计算的帧的像素分辨率来降低HMI性能。可以应用最终图形滤波器或GPU着色器,以完成平滑放大(up-scale),从而再次回到原本的TFT分辨率,以使得对于用户而言,显示看起来仍然令人满意。可以通过与(例如,应用处理单元108中的)软件应用进行通信来降低HMI性能,以使得可以更少地执行内容更新、动画和广告,这可以降低软件应用的能耗。可以通过使用简化的GPU着色器进行图片改善和抗混叠来降低HMI能耗(以及HMI性能)。

可以通过减少显示器背光并增加视频信号的亮度以从屏幕获得相同的亮度感知(但对比度/细节有所降低(这在未聚焦时不会被感知到))来降低HMI性能。

基于一个或更多个用户眼睛注视投影,可以确定梯度聚焦点,并且可以根据各个显示器或图形表面的总体聚焦水平来为该各个显示器或图形表面指派计算功率(或最大能耗水平)。例如,接收多个乘员的部分注意力的显示器可以按照高能量设置工作,而仅接收一个乘员的部分注意力的显示器可以被设置成降低的功耗的设置。

一个或更多个另外的传感器124可以向用户监测单元114提供输入。

根据实施方式,另外的传感器124可以是距离传感器(例如,雷达传感器、激光雷达传感器、超声传感器或红外传感器),并且可以确定用户距显示器的距离以确定所需的像素分辨率。

根据实施方式,另外的传感器124可以确定用户相比于房间中的显示器和对象的空间位置,以确定是否看得见HMI的一个或更多个显示器。

根据实施方式,另外的传感器124可以确定用户的个人视力(例如,通过来自用户的输入),以关于分辨率和外围感知能力调整聚焦水平。

根据实施方式,另外的传感器124可以是雷达传感器,该雷达传感器用于勘测车厢或周围区域,以在空间上对用户进行定位。

根据实施方式,另外的传感器124可以例如经由智能手机或智能标签(SmartTag)确定像行人位置服务的其它定位或位置输入。

根据实施方式,另外的传感器124可以是光敏传感器(例如,光电二极管或光电池),并且可以确定外部光情况,以使得例如可以将太阳光影响作为附加输入因素提供给能量和/或资源利用相关设置。

根据实施方式,另外的传感器124可以是麦克风并且可以提供语音分析。例如,可以基于用户询问的像“现在几点了?”或“我们什么时候到家?”的问题来确定用户(例如,乘客)的需求,并且该信息可以用于预测在接下来的几秒钟内将被聚焦的特定显示内容(像针对两个示例性问题则是交通工具时间或具有行程时间的导航)。

将理解,即使关于交通工具描述了图1的各个方面,但是根据各种实施方式的设备和方法可以被提供给任何种类的人机接口,并且该人机接口的用户可以是任何用户,而不必一定是交通工具的乘员。

图2示出了眼睛视觉/聚焦点的图表200。横轴204表示注视方向(其中,朝向右侧的角度指示内侧方向,并且朝向左侧的角度指示外侧方向)。纵轴206例示了视觉。图表200以视角相对于中央凹视觉的度数为单位例示了人类眼睛在水平子午线上的相对敏锐度202。盲区208在外部方向上(例如在左眼的左视场中)约18°处。该图表取决于用户和年龄,并且可以被个性化。

根据实施方式,用户可以提供与该用户的个人视力相关的信息(例如,通过来自用户的输入),以关于分辨率和外围感知能力来调整聚焦水平。

根据各种实施方式,基于用户的头部移动或估计的头部移动(估计的头部移动可以是空间估计或物理估计),计算功率或能耗的指派可以是更精确的或者以更有效的时间利用相关设置工作或者以较低的质量/安全裕度工作。

基于用户的困倦水平,可以调整指派,因为困倦的用户即使在聚焦时也可能无法感知到完整性能的HMI(这是因为困倦的用户的聚焦通常会降低)。基于用户陷入睡眠的检测,可以调整计算功率和/或能耗的指派。

基于太阳光的影响,可以指派背光/对比度,因为在太阳光直接照在屏幕上的情况下,可能无论如何都无法达到高对比度视图,并且显示屏更亮可能更为重要。

还可以通过考虑交通工具的电池电力状态来降低HMI性能或HMI能耗,以扩展整体系统的工作范围。

基于用户的聚焦点(或头部位置),一些视觉系统(例如,平视显示器(HUD))可以完全置于电力安全状态(或关闭状态)。

基于用户的聚焦点(或头部位置),可以调整舱室音频系统,以提高单个或多个用户的感知到的声音的质量和/或突出显示用户正聚焦的该区域的声音信息(例如,当驾驶员正查看里程表时,系统可以经由语音词语输出里程数据;例如,当驾驶员正查看导航系统时,系统可以利用语音来提示交通和行进情况;例如,当用户正聚焦电影时,该用户可能听到电影声音)。

根据各种实施方式,对于多用户多显示器HMI场景,各种输入数据可以被接收并用于确定当前感知和聚焦情况。可以对各种输出设备的特性(例如,工作参数)进行设置,以优化总体系统资源利用与感知。可以提供输入设备和设置选项的灵活组合以及可选的使用。

根据各种实施方式,可以确定(例如,AMOD(Autonomous Mobility on Demand:按需自主移动性)的,例如,eAMOD(电动AMOD)的)用户的数量,并且可以与所有用户(例如,交通工具中的所有人员)实际可以看到的一个或更多个显示器相关地确定用户被定位在的位置。该信息可以用于反馈给应用,以调整被显示的内容(例如,以提供单独的广告和/或确保所有人员都看到了重要信息和/或在已知只有一个人或一个单独小组聚焦该显示器时,通过仅显示私人内容来保护隐私)。

图3示出了根据各种实施方式的用于人机接口的能量和/或资源管理的计算机实现方法的流程图300。在302,可以确定人机接口的用户对该人机接口的注意力水平。在304,可以基于确定的注意力水平来设置人机接口的能量和/或资源利用相关设置。

根据各种实施方式,该计算机实现方法还可以包括由计算机硬件组件实施的以下步骤:确定用户的聚焦点。注意力水平可以是基于聚焦点确定的。

根据各种实施方式,聚焦点可以是基于以下项中的至少一项确定的:用户的头部的姿势;以及用户的眼睛中的至少一只眼睛的姿势。

根据各种实施方式,该计算机实现方法还可以包括由计算机硬件组件实施的以下步骤:确定用户的困倦水平。注意力水平可以是基于困倦水平确定的。

根据各种实施方式,困倦水平可以是基于以下项中的至少一项确定的:用户的移动;用户的眼睛移动;以及用户的反应时间。

根据各种实施方式,能量和/或资源利用相关设置可以包括或者可以是人机接口的图形显示器的帧速率。

根据各种实施方式,能量和/或资源利用相关设置可以包括或者可以是像素分辨率,图形处理单元按照该像素分辨率提供将在人机接口的图形显示器上显示的帧。可以通过降低GPU需要传送最终计算的帧的像素分辨率来降低HMI性能。可以应用最终图形滤波器或GPU着色器,以另外完成平滑放大,从而再次回到原本的显示器分辨率。

根据各种实施方式,能量和/或资源利用相关设置可以包括或者可以是人机接口的图形显示器的背光照明强度。为了补偿减少的背光照明,可以增大将在图形显示器上显示的图形数据的亮度(例如,可以使用较浅的颜色或灰色阴影)。

根据各种实施方式,能量和/或资源利用相关设置可以与将在人机接口的图形显示器上显示的数据的预处理相关。

根据各种实施方式,能量和/或资源利用相关设置可以与获取将在人机接口的图形显示器上显示的数据相关。

根据各种实施方式,能量和/或资源利用相关设置可以包括或者可以是关闭状态。

根据各种实施方式,可以基于人机接口的电池状态设置能量和/或资源利用相关设置。

根据各种实施方式,能量和/或资源利用相关设置可以包括或者可以是音频系统的音频设置。

图4示出了例示了根据实施方式的方法的流程图400。在402,可以通过可用传感器或辅助数据源(例如,智能手机标签、社交数据库等)来识别用户及其位置。在404,可以确定所有用户的聚焦点(例如,通过姿势和眼睛注视以及移动估计)以及所有用户对HMI(例如,显示器和声音输出设备)的注意力水平。在406,可以考虑并应用用户的特定感知能力(例如,身体状况和困倦水平、太阳光/照明影响)。在408,可以保持在场景内识别到的所有聚焦事件的列表,并且可以在步骤414使用该信息。在410,可以考虑不同物理硬件元件(CPU、网络、GPU、显示器、声音播放器)的HMI系统能力和设置的可用选项(帧速率、像素分辨率、背光功率、内容控制、单元禁用等),并且可以在步骤414使用该信息。在412,可以考虑能量状态、限制和/或能量策略,并且可以在步骤414使用该信息。在414,可以根据HMI感知策略来确定平衡的设置。在416,可以在不同物理硬件元件(像CPU、网络、GPU、显示器和/或声音播放器)上执行该设置(或者将该设置应用于该不同物理硬件元件)。

上述步骤302、步骤304、步骤402、步骤404、步骤406、步骤408、步骤410、步骤412、步骤414、步骤416和另外的步骤中的各个步骤都可以由计算机硬件组件执行。

如上所述,可以提供人类用户的当前聚焦点上的计算功率的功率效率以及动态指派的设备和方法,这可以允许减少优质计算系统的图形HMI所需的资源(或增强图形HMI的用户体验,而无需增加所需的资源)。所述设备和方法可以实现用户聚焦的资源的指派,并且可以仅在用户看到或识别出HMI的那些区域处分别执行(换句话说:驱动或实现)HMI。与常用技术相比,所述设备和方法可以提供更好的资源利用并且可以节省成本和电力,并因此可以按照给定的系统设定传送更好的或优化的性能。根据各种实施方式,关于HMI的驾驶员感知聚焦点可以用于确定计算处理集中。

将理解,即使对于各种实施方式都参考了“阈值”,操作也可以不必是二元的(二元即是如下含义:在输入低于阈值的第一工作模式工作,以及在输入高于阈值的第二工作模式工作),操作可以是逐步的(例如,当输入改变时,第一工作模式与第二工作模式之间的平滑过渡)。

100 计算系统

102 计算单元

104 基于聚焦点的计算单元

106 云/在线控制单元

108 应用处理单元

110 HMI管理器控制单元

112 图形处理单元

114 用户监测单元

116 无线接口

118 驾驶员/面部摄像头

120 舱室/人员摄像头

122 图形显示器

124 另外的传感器

200 图表

202 相对敏锐度

204 横轴

206 纵轴

208 盲区

300 流程图

302 方法步骤

304 方法步骤

400 流程图

402 方法步骤

404 方法步骤

406 方法步骤

408 方法步骤

410 方法步骤

412 方法步骤

414 方法步骤

416 方法步骤

相关技术
  • 人机接口的能量和/或资源管理的方法和系统
  • 人机接口开发支持装置、人机接口开发支持方法以及人机接口开发支持程序
技术分类

06120112534070