掌桥专利:专业的专利平台
掌桥专利
首页

视野范围的确定方法、装置、电子设备和存储介质

文献发布时间:2023-06-19 19:21:53


视野范围的确定方法、装置、电子设备和存储介质

技术领域

本公开涉及人工智能技术领域,具体涉及增强现实、虚拟现实、计算机视觉、深度学习等技术领域,可应用于元宇宙、虚拟数字人等场景,尤其涉及视野范围的确定方法、装置、电子设备和存储介质。

背景技术

眼球的视网膜的健康状态与人的视觉健康情况直接相关,许多视觉疾病表现为视网膜的损坏或功能衰退,而视野范围检测,是诊断视网膜的健康状态的有效手段。如何以更加便携和低成本的方式,确定视网膜的视野范围,是亟待解决的问题。

发明内容

本公开提供了一种视野范围的确定方法、装置、电子设备和存储介质。

根据本公开的一方面,提供了一种视野范围的确定方法,所述方法应用于虚拟现实VR设备,所述方法包括:获取第一测试视频及眼球追踪数据,其中,所述眼球追踪数据通过在VR环境显示所述第一测试视频的过程中,追踪聚焦到所述第一测试视频的眼球的移动得到;基于所述第一测试视频以及所述眼球追踪数据,确定所述眼球的目标视野范围。

根据本公开的另一方面,提供了一种视野范围的确定装置,该装置应用于虚拟现实VR设备,所述装置包括:第一获取模块,用于获取第一测试视频及眼球追踪数据,其中,所述眼球追踪数据通过在VR环境显示所述第一测试视频的过程中,追踪聚焦到所述第一测试视频的眼球的移动得到;第一确定模块,用于基于所述第一测试视频以及所述眼球追踪数据,确定所述眼球的目标视野范围。

根据本公开的另一方面,提供了一种电子设备,包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行本公开的视野范围的确定方法。

根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行本公开实施例公开的视野范围的确定方法。

根据本公开的另一方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现本公开的视野范围的确定方法的步骤。

应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

附图说明

附图用于更好地理解本方案,不构成对本公开的限定。其中:

图1是根据本公开第一实施例的视野范围的确定方法的流程示意图;

图2是根据本公开第二实施例的视野范围的确定方法的流程示意图;

图3是根据本公开第二实施例的第一视频帧的示例图;

图4是根据本公开第三实施例的视野范围的确定方法的流程示意图;

图5是根据本公开第三实施例的第二视频帧的示例图;

图6是根据本公开第四实施例的视野范围的确定装置的结构示意图;

图7是根据本公开第五实施例的视野范围的确定装置的结构示意图;

图8是用来实现本公开实施例的视野范围的确定方法的电子设备的框图。

具体实施方式

以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。

相关技术,通常利用多焦视网膜电测试的方式,直接从眼球采样出电信号,来判定视网膜不同区域的活性,从而确定眼球的视网膜的视野范围,以诊断视网膜的健康状态,然而用于多焦视网膜电测试的设备往往价格高昂,笨重,且难以维护。

针对上述技术问题,本公开实施例提供一种视野范围的确定方法、装置、电子设备、非瞬时计算机可读存储介质以及计算机程序产品。其中视野范围的确定方法应用于VR(Virtual Reality,虚拟现实)设备,该方法包括:获取第一测试视频及眼球追踪数据,其中,眼球追踪数据通过在VR环境显示第一测试视频的过程中,追踪聚焦到第一测试视频的眼球的移动得到;基于第一测试视频以及眼球追踪数据,确定眼球的目标视野范围。由此,实现了利用VR设备确定眼球的目标视野范围,由于VR设备可以便携使用、成本低,从而能够便捷、低成本的确定视野范围。

其中,本公开提供的视野范围的确定方法、装置、电子设备、非瞬时计算机可读存储介质以及计算机程序产品,涉及人工智能技术领域,具体涉及增强现实、虚拟现实、计算机视觉、深度学习等技术领域,可应用于元宇宙、虚拟数字人等场景。

其中,人工智能是研究使计算机来模拟人的某些思维过程和智能行为(如学习、推理、思考、规划等)的学科,既有硬件层面的技术也有软件层面的技术。人工智能硬件技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理等技术;人工智能软件技术主要包括计算机视觉、语音识别技术、自然语言处理技术以及机器学习/深度学习、大数据处理技术、知识图谱技术等几大方向。

下面参考附图描述本公开实施例的视野范围的确定方法、装置、电子设备、非瞬时计算机可读存储介质以及计算机程序产品。

首先对本公开实施例提供的视野范围的确定方法进行说明。

图1是根据本公开第一实施例的视野范围的确定方法的流程示意图。

其中,需要说明的是,本实施的视野范围的确定方法,应用于VR设备,执行主体为视野范围的确定装置,该视野范围的确定装置可以由软件和/或硬件实现,该视野范围的确定装置可以配置在电子设备中,该电子设备可以包括但不限于终端设备、服务器等,该实施例对电子设备不作具体限定。其中电子设备比如可以为VR设备,或者VR设备的后台服务器。

如图1所示,该视野范围的确定方法可以包括:

步骤101,获取第一测试视频及眼球追踪数据,其中,眼球追踪数据通过在VR环境显示第一测试视频的过程中,追踪聚焦到第一测试视频的眼球的移动得到。

其中,第一测试视频,用于进行视野范围的检测,可以在VR环境中显示。其中,第一测试视频为无损视频,或者存在一定的损耗比的视频,本公开对此不作限制。

第一测试视频可以根据应用场景的需要预先生成。其中,第一测试视频,可以通过任意具有绘图、图像处理、视频生成等功能的工具生成,本公开对此不作限制。

在本公开的实施例中,被检测眼球的视网膜的视野范围的用户,即被测者,可以佩戴VR设备进行视野范围的检测。在检测过程中,VR设备可以在VR环境显示第一测试视频,且在显示第一测试视频时,被测者被要求眼球聚焦在第一测试视频上,同时,VR设备中设置的眼球追踪器,可以追踪聚焦到第一测试视频的眼球的移动,得到眼球追踪数据。相应的,视野范围的确定装置,可以获取眼球追踪器通过追踪眼球的移动得到的眼球追踪数据。

其中,眼球追踪数据中可以包括眼球的偏转角度,注视位置、注视时长等信息。

步骤102,基于第一测试视频以及眼球追踪数据,确定眼球的目标视野范围。

在本公开的实施例中,可以结合第一测试视频以及眼球追踪数据,确定眼球的目标视野范围。

其中,目标视野范围,可以包括眼球在多个方向的视野范围,视野范围可以通过视野角度表示,比如目标视野范围可以包括眼球在多个方向的视野角度。

综上,本公开实施例提供的视野范围的确定方法,获取第一测试视频及眼球追踪数据,其中,眼球追踪数据通过在VR环境显示第一测试视频的过程中,追踪聚焦到第一测试视频的眼球的移动得到,基于第一测试视频以及眼球追踪数据,确定眼球的目标视野范围。由此,实现了利用VR设备确定眼球的目标视野范围,由于VR设备可以便携使用、成本低,从而能够便捷、低成本的确定视野范围。

下面结合图2,对本公开实施例提供的视野范围的确定方法中,基于第一测试视频以及眼球追踪数据,确定眼球的目标视野范围的过程进行详细说明。

图2是根据本公开第二实施例的视野范围的确定方法的流程示意图。

如图2所示,视野范围的确定方法,可以包括以下步骤:

步骤201,获取第一测试视频,其中,第一测试视频包括多个第一视频帧,各第一视频帧中包括位于中心位置的第一显示元素和位于第一显示元素的预设方位的第二显示元素,第二显示元素与第一显示元素在各第一视频帧中的距离不同。

其中,多个第一视频帧的数量可以根据需要设置。

其中,第一显示元素和第二显示元素的形状、尺寸以及颜色等属性,可以根据应用场景的需要设置,且第一显示元素和第二显示元素的形状、尺寸以及颜色等属性可以相同或不同,本公开对此不作限制。比如可以设置第一显示元素和第二显示元素均为十字架形状,并设置第一显示元素为白色,第二显示元素为淡红色。其中,为了避免人眼长时间注视引起视觉疲劳,可以设置各显示元素的颜色为饱和度比较低的颜色。

其中,为了在每个第一视频帧显示时,便于人眼将视线聚焦到该第一视频帧中的第二显示元素上,每个第一视频帧中可以包括一个第二显示元素。

其中,第一显示元素位于各第一视频帧的中心位置,对应人眼的视野中心,各第一视频帧中的第二显示元素位于第一显示元素的预设方位,且该预设方位可以根据需要设置。其中,该预设方位,为第二显示元素在正对眼球的平面上相对第一显示元素的方位。

其中,多个第一视频帧,可以通过任意具有绘图、图像处理、视频生成等功能的工具生成。

步骤202,获取眼球追踪数据,其中,眼球追踪数据通过在VR环境显示多个第一视频帧的过程中,追踪聚焦到各第一视频帧中的第二显示元素的眼球的移动得到。

在本公开的实施例中,被测者可以佩戴VR设备进行视野范围的检测。在检测过程中,VR设备可以在VR环境显示多个第一视频帧,且在每显示一个第一视频帧时,被测者被要求眼球聚焦在该第一视频帧中的第二显示元素上。由于各第一视频帧中第二显示元素与第一显示元素的距离不同,则眼球的聚焦位置会随着不同第一视频帧的显示而变化。同时,VR设备中设置的眼球追踪器,可以追踪聚焦到各第一视频帧中的第二显示元素的眼球的移动,得到眼球追踪数据。相应的,视野范围的确定装置,可以获取眼球追踪器通过追踪眼球的移动得到的眼球追踪数据。

其中,眼球追踪数据中可以包括眼球的偏转角度,注视位置、注视时长等信息。

步骤203,基于各第一视频帧以及眼球追踪数据,确定眼球在预设方位上的视野范围。

在本公开的实施例中,假设第一测试视频中包括M个第一视频帧,M为大于1的整数。则各第一视频帧顺序排列时,第二显示元素与第一显示元素在第m个第一视频帧中的距离,可以大于在第m-1个第一视频帧中的距离,m为大于1且小于等于M的整数。其中,各第一视频帧可以按照显示时间从先到后的顺序排列。

即,随着第一测试视频的显示,第一显示元素始终位于视频帧的中心位置,第二显示元素则沿预设方位逐渐远离第一显示元素。

相应的,步骤203可以通过以下方式实现:确定在VR环境顺序显示M个第一视频帧的过程中,接收到第一指令时显示的第一目标视频帧,第一指令,是被测者在眼球聚焦到第二显示元素且眼球的视野内不包括第一显示元素时触发的;从眼球追踪数据中,获取眼球聚焦到第一目标视频帧中的第二显示元素时眼球的偏转角度;根据眼球的偏转角度,确定眼球在预设方位上的视野范围。

其中,第一指令,可以通过被测者手持的能与视野范围的确定装置通信的客户端触发。客户端上配置有按钮,被测者可以通过触控按钮,触发第一指令,相应的,视野范围的确定装置可以接收到被测者触发的第一指令。

或者,第一指令可以通过被测者语音触发。相应的,视野范围的确定装置可以对被测者的语音进行识别,从而接收被测者触发的第一指令。其中,视野范围的确定装置可以采用通过深度学习方式训练得到的语音识别模型,对被测者的语音进行识别。

本公开实施例中,可以按照M个第一视频帧的排列顺序,在VR环境显示M个第一视频帧,随着M个第一视频帧的显示,第一显示元素始终位于视频帧的中心位置,第二显示元素则沿预设方位逐渐远离第一显示元素,在该M个第一视频帧的显示过程中,被测者被要求眼球聚焦到第二显示元素上,直到被测者感知在眼球的视野内不包括第一显示元素,即第一显示元素从眼球的视野内消失时,被测者可以触发第一指令。相应的,视野范围的确定装置可以接收到第一指令,进而可以根据该第一指令,确定M个第一视频帧中的第一目标视频帧,其中,第一目标视频帧是接收到第一指令时正在显示的第一视频帧。

进而,可以从眼球追踪数据中,获取眼球聚焦到第一目标视频帧中的第二显示元素时眼球的偏转角度,再根据眼球的偏转角度,确定眼球在预设方位上的视野范围。比如通过视野角度表示视野范围时,可以将眼球的偏转角度确定为眼球在预设方位上的视野角度。

可以理解的是,上述根据眼球聚焦到第一目标视频帧中的第二显示元素上时眼球的偏转角度,确定眼球在预设方位上的视野范围的方式,简单易实现,无需依赖价格高昂、笨重的大型器械,能够便携、低成本的确定眼球在预设方位上的视野范围。该方式适用于视力范围较差的被测者,对于该类被测者,可以准确的确定被测者的视网膜的视野范围。

举例来说,假设第一测试视频中包括的部分第一视频帧如图3所示,其中,参考图3,各第一视频帧中第一显示元素31位于中心位置,各第二显示元素32位于第一显示元素31的右上方,如虚线所示,且第二显示元素32与第一显示元素31在各第一视频帧中的距离不同。

被测者佩戴VR设备进行视野范围的检测时,VR设备可以在VR环境显示包括图3所示视频帧在内的多个第一视频帧,且在每显示一个第一视频帧时,被测者被要求眼球聚焦在该第一视频帧中的第二显示元素上。由于各第一视频帧中第二显示元素与第一显示元素的距离不同,则被测者的眼球的聚焦位置会随着不同第一视频帧的显示而变化。同时,VR设备中设置的眼球追踪器,可以追踪聚焦到各第一视频帧中的第二显示元素的眼球的移动,得到眼球追踪数据。进而视野范围的确定装置,可以根据各第一视频帧以及眼球追踪数据,确定眼球在虚线所示方位上的视野范围。

需要说明的是,上述确定眼球在预设方位上的视野范围的方式,仅是示例性说明,本公开实施例中,还可以采用其它方式,确定眼球在预设方位上的视野范围,本公开对此不作限制。

比如,各第一视频帧可以以任意顺序显示,每显示一个第一视频帧,被测者可以观察视野中是否包括第二显示元素,在确定包括第二显示元时,被测者可以将眼球聚焦到该第一视频帧中的第二显示元素上,并观察在眼球聚焦到第二显示元素时,视野内是否包括第一显示元素,若未包括,则可以触发指令。由此,视野范围的确定装置可以接收到至少一个指令,并可以根据该至少一个指令,从多个第一视频帧中确定至少一个候选视频帧,其中,候选视频帧为接收到指令时正在显示的第一视频帧。进而,视野范围的确定装置可以从各候选视频帧中确定第三目标视频帧,其中,第三目标视频帧为候选视频帧中,第二显示元素与第一显示元素的距离最短的视频帧。进而,视野范围的确定装置可以从眼球追踪数据中,获取眼球聚焦到第三目标视频帧中的第二显示元素时眼球的偏转角度,再根据眼球的该偏转角度,确定眼球在预设方位上的视野范围。

在一种可能的实现形式中,被测者佩戴VR设备进行视野范围的检测时,可以允许被测者进行头部旋转,在该情况下,VR设备也会在头部旋转的带动下进行旋转。那么,本公开实施例中,还可以结合VR设备的旋转角度,确定眼球在预设方位上的视野范围。

即,在根据眼球的偏转角度,确定眼球在预设方位上的视野范围之前,还可以包括:获取眼球聚焦到第一目标视频帧中的第二显示元素时,VR设备的旋转角度。

相应的,根据眼球的偏转角度,确定眼球在预设方位上的视野范围,可以包括:

根据眼球的偏转角度和VR设备的旋转角度,确定眼球在预设方位上的视野范围。

其中,VR设备的旋转角度,可以通过VR设备中的陀螺仪等传感器进行检测得到。

比如,以眼球的视野角度表示视野范围时,可以将眼球的偏转角度与VR设备的旋转角度进行加权求和,得到眼球在预设方位上的视野角度。

由此,相比仅根据眼球的偏转角度确定眼球在预设方位上的视野范围,根据眼球的偏转角度和VR设备的旋转角度,可以确定眼球在预设方位上的更大的视野范围。

需要说明的是,在被测者允许进行头部旋转时,可以要求被测者尽可能的避免头部的大范围旋转,从而以眼球旋转为主,确定眼球在预设方位上的视野范围,由此可以在一定程度上避免误差。

步骤204,根据眼球在预设方位上的视野范围,确定目标视野范围。

在本公开的实施例中,可以预先设置预设方位为多个,相应的,第一测试视频中可以包括多组第一视频帧,每组第一视频帧包括多个第一视频帧,每组第一视频帧中包括位于中心位置的第一显示元素和位于第一显示元素的一个相同的预设方位的第二显示元素,第二显示元素与第一显示元素在各第一视频帧中的距离不同,进而对于每个预设方位,可以采用上述步骤201-204的方式,确定眼球在该预设方位上的视野范围,从而将眼球在多个预设方位上的视野范围组合,得到眼球的目标视野范围。

综上,本公开实施例提供的视野范围的确定方法,获取第一测试视频,其中,第一测试视频包括多个第一视频帧,各第一视频帧中包括位于中心位置的第一显示元素和位于第一显示元素的预设方位的第二显示元素,第二显示元素与第一显示元素在各第一视频帧中的距离不同,获取眼球追踪数据,其中,眼球追踪数据通过在VR环境显示多个第一视频帧的过程中,追踪聚焦到各第一视频帧中的第二显示元素的眼球的移动得到,基于各第一视频帧以及眼球追踪数据,确定眼球在预设方位上的视野范围,根据眼球在预设方位上的视野范围,确定目标视野范围。由此,实现了利用VR设备确定眼球在指定方位上的视野范围,进而根据眼球在各方位上的视野方位,确定眼球的目标视野范围,由于VR设备可以便携使用、成本低,从而能够便捷、低成本的确定视野范围。

在一种可能的实现方式中,视野范围的确定装置还可以确定眼球的整体视野范围,进而根据眼球的整体视野范围,以及眼球在预设方位上的视野范围,确定眼球的目标视野范围。下面结合图4,对本公开提供的视野范围的确定方法中,基于第一测试视频以及眼球追踪数据,确定眼球的目标视野范围的过程进行进一步说明。

图4是根据本公开第三实施例的视野范围的确定方法的流程示意图。

如图4所示,视野范围的确定方法,可以包括以下步骤:

步骤401,获取第二测试视频。

其中,第二测试视频,用于进行视野范围的检测,可以在VR环境中显示。其中,第二测试视频为无损视频,或者存在一定的损耗比的视频,本公开对此不作限制。

第二测试视频可以根据应用场景的需要预先生成。其中,第二测试视频,可以通过任意具有绘图、图像处理、视频生成等功能的工具生成,本公开对此不作限制。

步骤402,根据第二测试视频以及在VR环境显示第二测试视频的过程中被测者触发的第二指令,确定眼球的整体视野范围。

其中,整体视野范围,可以包括眼球在所有方向的视野范围,该整体视野范围可以通过视野角度表示,比如整体视野范围可以包括眼球在所有方向的视野角度。

在本公开的实施例中,被测者可以佩戴VR设备进行视野范围的检测。其中,检测过程可以包括多种测试模式,不同的测试模式对应不同的测试视频,在启动整体视野范围测试模式时,VR设备可以在VR环境显示第二测试视频,且在显示第二测试视频时,被测者被要求眼球聚焦在第二测试视频上,并根据整体视野范围测试模式的要求,在显示第二测试视频的过程中,通过手持的能与视野范围的确定装置通信的客户端,触发第二指令。相应的,视野范围的确定装置,可以根据第二测试视频以及被测者触发的第二指令,确定眼球的整体视野范围。

在一种可能的实现形式中,第二测试视频可以包括N个第二视频帧,N为大于1的整数,各第二视频帧顺序排列,各视频帧中包括位于中心位置的第三显示元素和第四显示元素,且第四显示元素在第n个第二视频帧中的尺寸大于在第n-1个第二视频帧中的尺寸,n为大于1且小于等于N的整数。

其中,第三显示元素和第四显示元素的形状以及颜色等属性,可以根据应用场景的需要设置,且第三显示元素和第四显示元素的形状以及颜色等属性可以相同或不同,本公开对此不作限制。

比如,参考图5所示的N个第二视频帧中的部分第二视频帧,可以设置第三显示元素51为十字架形状,并设置第三显示元素51为灰色,而第四显示元素52为圆形,并设置第四显示元素52为白色。且各第二视频帧顺序排列,第四显示元素52在第n个第二视频帧中的尺寸大于在第n-1个第二视频帧中的尺寸。

其中,第三显示元素位于各视频帧的中心位置,对应眼球的视野中心,用于在显示各第二视频帧的过程中,使被测者的眼球聚焦在第三显示元素所在的视野中心。

第四显示元素位于各视频帧的中心位置,在第n个第二视频帧中的尺寸可以大于在第n-1个第二视频帧中的尺寸。即,随着第二测试视频的显示,第三显示元素和第四显示元素始终位于视频的中心位置,且第四显示元素的尺寸逐渐变大。

相应的,步骤402可以通过以下方式实现:

确定在VR环境顺序显示N个第二视频帧的过程中,接收到第二指令时显示的第二目标视频帧,第二指令,是被测者在眼球聚焦到第三显示元素且眼球的视野被第四显示元素占满时触发的;根据第二目标视频帧中第四显示元素的尺寸,确定眼球的整体视野范围。

其中,第二指令,可以通过被测者手持的能与视野范围的确定装置通信的客户端触发。客户端上配置有按钮,被测者可以通过触控按钮,触发第二指令,相应的,视野范围的确定装置可以接收到被测者触发的第二指令。

或者,第二指令可以通过被测者语音触发。相应的,视野范围的确定装置可以对被测者的语音进行识别,从而接收被测者触发的第二指令。其中,视野范围的确定装置可以采用通过深度学习方式训练得到的语音识别模型,对被测者的语音进行识别。

本公开实施例中,可以按照N个第二视频帧的排列顺序,在VR环境显示N个第二视频帧,随着N个第二视频帧的显示,第三显示元素和第四显示元素始终位于视频的中心位置,且第四显示元素的尺寸逐渐变大,在该N个第二视频帧的显示过程中,被测者被要求眼球聚焦到第三显示元素上,直到被测者感知视野被第四显示元素占满时,被测者可以触发第二指令。相应的,视野范围的确定装置可以接收到第二指令,进而可以根据该第二指令,确定N个第二视频帧中的第二目标视频帧,其中,第二目标视频帧是接收到第二指令时正在显示的第二视频帧。进而,可以根据第二目标视频帧中第四显示元素的尺寸,确定眼球的整体视野范围。

其中,在第四显示元素为圆形时,在多个第二视频帧的显示过程中,第四显示元素的圆心始终位于视频帧的中心位置,可以根据第二目标视频帧中的圆形的半径,确定眼球的整体视野范围。在第四显示元素不为圆形时,可以根据第二目标视频帧中,第四显示元素中位于视频帧的中心位置的中心点与距离该中心点最近的顶点之间的距离,确定眼球的整体视野范围。通过该方式确定的整体视野范围中,眼球在所有方向的视野范围相同。

由此,实现了以一种更贴合被测者的主观感受的方式,确定眼球的整体视野范围,且上述根据第二目标视频帧中的第四显示元素的尺寸,确定眼球的整体视野范围的方式,简单易实现,无需依赖价格高昂、笨重的大型器械,能够便携、低成本的确定眼球的整体视野范围。

在一种可能的实现形式中,可以通过以下方式,根据第二目标视频帧中第四显示元素的尺寸,确定眼球的整体视野范围:获取VR环境中眼球与第四显示元素之间的距离;根据第二目标视频帧中第四显示元素的尺寸,以及眼球与第四显示元素之间的距离,确定眼球的整体视野范围。

具体的,以第四显示元素为圆形为例,可以根据圆形的半径,以及VR环境中眼球与圆形之间的距离,确定眼球在所有方向的视野角度,进而根据该视野角度,确定眼球的整体视野范围。其中,在通过视野角度表示视野范围时,可以将该视野角度确定为眼球的整体视野范围。

上述根据第二目标视频帧中的第四显示元素的尺寸和VR环境中眼球与第四显示元素之间的距离,确定眼球的整体视野范围的方式,简单易实现,无需依赖价格高昂、笨重的大型器械,能够便携、低成本的确定眼球的整体视野范围。

步骤403,获取第一测试视频,其中,第一测试视频包括多个第一视频帧,各第一视频帧中包括位于中心位置的第一显示元素和位于第一显示元素的预设方位的第二显示元素,第二显示元素与第一显示元素在各第一视频帧中的距离不同。

步骤404,获取眼球追踪数据,其中,眼球追踪数据,通过在VR环境显示多个第一视频帧的过程中,追踪聚焦到各第一视频帧中的第二显示元素的眼球的移动得到。

步骤405,基于各第一视频帧以及眼球追踪数据,确定眼球在预设方位上的视野范围。

其中,步骤403-405的具体实现过程及原理,可以参考其它实施例的描述,此处不再赘述。

其中,步骤401-402可以在步骤403-405之前执行,也可以在步骤403-405之后执行,也可以与步骤403-405同时执行,本公开对此不作限制。在进行视野范围的检测时,可以先根据第二测试视频进行检测,再根据第一测试视频进行检测,也可以先根据第一测试视频进行检测,再根据第二测试视频进行检测,本公开对此不作限制。

步骤406,根据眼球的整体视野范围,以及眼球在预设方位上的视野范围,确定眼球的目标视野范围。

在本公开的实施例中,可以对眼球的整体视野范围以及眼球在预设方位上的视野范围进行加权计算,得到眼球的目标视野范围。

比如,对于每个预设方位,可以将眼球在该预设方位上的视野范围,与眼球的整体视野范围中在该预设方位的视野范围进行加权计算,得到眼球在该预设方位上的视野范围,进而可以根据眼球在各预设方位上的视野范围,确定眼球的目标视野范围。

综上,本公开实施例提供的视野范围的确定方法,获取第二测试视频,根据第二测试视频以及在VR环境显示第二测试视频的过程中被测者触发的第二指令,确定眼球的整体视野范围,获取第一测试视频,其中,第一测试视频包括多个第一视频帧,各第一视频帧中包括位于中心位置的第一显示元素和位于第一显示元素的预设方位的第二显示元素,第二显示元素与第一显示元素在各第一视频帧中的距离不同,获取眼球追踪数据,其中,眼球追踪数据,通过在VR环境显示多个第一视频帧的过程中,追踪聚焦到各第一视频帧中的第二显示元素的眼球的移动得到,基于各第一视频帧以及眼球追踪数据,确定眼球在预设方位上的视野范围,根据眼球的整体视野范围,以及眼球在预设方位上的视野范围,确定眼球的目标视野范围。由此,实现了利用VR设备,采用多种测试模式结合,确定眼球的目标视野范围,由于VR设备可以便携使用、成本低,从而能够便捷、低成本的确定视野范围。

下面结合图6,对本公开提供的视野范围的确定装置进行说明。

图6是根据本公开第四实施例的视野范围的确定装置的结构示意图。

如图6所示,本公开提供的视野范围的确定装置600,包括:第一获取模块601和第一确定模块602。

其中,第一获取模块601,用于获取第一测试视频及眼球追踪数据,其中,眼球追踪数据通过在VR环境显示第一测试视频的过程中,追踪聚焦到第一测试视频的眼球的移动得到;

第一确定模块602,用于基于第一测试视频以及眼球追踪数据,确定眼球的目标视野范围。

需要说明的是,本实施例提供的视野范围的确定装置600,应用于VR设备,可以执行前述实施例的视野范围的确定方法。其中,视野范围的确定装置600可以由软件和/或硬件实现,该视野范围的确定装置600可以配置在电子设备中,该电子设备可以包括但不限于终端设备、服务器等,该实施例对电子设备不作具体限定。其中电子设备比如可以为VR设备,或者VR设备的后台服务器。

需要说明的是,前述对于视野范围的确定方法的实施例的说明,也适用于本公开提供的视野范围的确定装置,此处不再赘述。

本公开实施例提供的视野范围的确定装置,获取第一测试视频及眼球追踪数据,其中,眼球追踪数据通过在VR环境显示第一测试视频的过程中,追踪聚焦到第一测试视频的眼球的移动得到,基于第一测试视频以及眼球追踪数据,确定眼球的目标视野范围。由此,实现了利用VR设备确定眼球的目标视野范围,由于VR设备可以便携使用、成本低,从而能够便捷、低成本的确定视野范围。

下面结合图7,对本公开提供的视野范围的确定装置进行进一步说明。

图7是根据本公开第五实施例的视野范围的确定装置的结构示意图。

如图7所示,本公开提供的视野范围的确定装置700,包括:第一获取模块701和第一确定模块702。其中,图7中第一获取模块701和第一确定模块702与图6中第一获取模块601和第一确定模块602具有相同功能和结构。

其中,需要说明的是,关于第一获取模块701和第一确定模块702的详细描述可参见上述图6中的第一获取模块601和第一确定模块602的说明,此处不再进行描述。

在本公开的实施中,第一测试视频包括多个第一视频帧,各第一视频帧中包括位于中心位置的第一显示元素和位于第一显示元素的预设方位的第二显示元素,第二显示元素与第一显示元素在各第一视频帧中的距离不同;眼球追踪数据,通过在VR环境显示多个第一视频帧的过程中,追踪聚焦到各第一视频帧中的第二显示元素的眼球的移动得到。

在本公开的实施中,第一确定模块702,包括:

第一确定子模块7021,用于基于各第一视频帧以及眼球追踪数据,确定眼球在预设方位上的视野范围;

第二确定子模块7022,用于根据眼球在预设方位上的视野范围,确定目标视野范围。

在本公开的实施中,第一视频帧的数量为M,M为大于1的整数,各第一视频帧顺序排列,且第二显示元素与第一显示元素在第m个第一视频帧中的距离大于在第m-1个第一视频帧中的距离,m为大于1且小于等于M的整数;

第一确定子模块7021,包括:

第一确定单元,用于确定在VR环境顺序显示M个第一视频帧的过程中,接收到第一指令时显示的第一目标视频帧,第一指令,是被测者在眼球聚焦到第二显示元素且眼球的视野内不包括第一显示元素时触发的;

第一获取单元,用于从眼球追踪数据中,获取眼球聚焦到第一目标视频帧中的第二显示元素时眼球的偏转角度;

第二确定单元,用于根据眼球的偏转角度,确定眼球在预设方位上的视野范围。

在本公开的实施中,第一确定子模块7021,还包括:

第二获取单元,用于获取眼球聚焦到第一目标视频帧中的第二显示元素时,VR设备的旋转角度;

第二确定单元,包括:

确定子单元,用于根据眼球的偏转角度和VR设备的旋转角度,确定眼球在预设方位上的视野范围。

在本公开的实施中,视野范围的确定装置700还包括:

第二获取模块703,用于获取第二测试视频;

第二确定模块704,用于根据第二测试视频以及在VR环境显示第二测试视频的过程中被测者触发的第二指令,确定眼球的整体视野范围;

第二确定子模块7022,包括:

第三确定单元,用于基于眼球的整体视野范围,以及眼球在预设方位上的视野范围,确定眼球的目标视野范围。

在本公开的实施中,第二测试视频包括N个第二视频帧,N为大于1的整数,各第二视频帧顺序排列,各视频帧中包括位于中心位置的第三显示元素和第四显示元素,且第四显示元素在第n个第二视频帧中的尺寸大于在第n-1个第二视频帧中的尺寸,n为大于1且小于等于N的整数;

第二确定模块704,包括:

第三确定子模块,用于确定在VR环境顺序显示N个第二视频帧的过程中,接收到第二指令时显示的第二目标视频帧,第二指令,是被测者在眼球聚焦到第三显示元素且眼球的视野被第四显示元素占满时触发的;

第四确定子模块,用于根据第二目标视频帧中第四显示元素的尺寸,确定眼球的整体视野范围。

在本公开的实施中,第四确定子模块,包括:

第三获取单元,用于获取VR环境中眼球与第四显示元素之间的距离;

第四确定单元,用于根据第二目标视频帧中第四显示元素的尺寸,以及眼球与第四显示元素之间的距离,确定眼球的整体视野范围。

需要说明的是,前述对于视野范围的确定方法的实施例的说明,也适用于本公开提供的视野范围的确定装置,此处不再赘述。

本公开实施例提供的视野范围的确定装置,获取第一测试视频及眼球追踪数据,其中,眼球追踪数据通过在VR环境显示第一测试视频的过程中,追踪聚焦到第一测试视频的眼球的移动得到,基于第一测试视频以及眼球追踪数据,确定眼球的目标视野范围。由此,实现了利用VR设备确定眼球的目标视野范围,由于VR设备可以便携使用、成本低,从而能够便捷、低成本的确定视野范围。

基于上述实施例,本公开还提供一种电子设备,包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行本公开的视野范围的确定方法。

基于上述实施例,本公开还提供一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行本公开实施例公开的视野范围的确定方法。

基于上述实施例,本公开还提供一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现本公开的视野范围的确定方法的步骤。

根据本公开的实施例,本公开还提供了一种电子设备和一种可读存储介质和一种计算机程序产品。

图8示出了可以用来实施本公开的实施例的示例电子设备800的示意性框图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本公开的实现。

如图8所示,该电子设备800可以包括计算单元801,其可以根据存储在只读存储器(ROM)802中的计算机程序或者从存储单元808加载到随机访问存储器(RAM)803中的计算机程序,来执行各种适当的动作和处理。在RAM 803中,还可存储设备800操作所需的各种程序和数据。计算单元801、ROM 802以及RAM 803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。

设备800中的多个部件连接至I/O接口805,包括:输入单元806,例如键盘、鼠标等;输出单元807,例如各种类型的显示器、扬声器等;存储单元808,例如磁盘、光盘等;以及通信单元809,例如网卡、调制解调器、无线通信收发机等。通信单元809允许设备800通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。

计算单元801可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元801的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元801执行上文所描述的各个方法和处理,例如视野范围的确定方法。例如,在一些实施例中,视野范围的确定方法可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元808。在一些实施例中,计算机程序的部分或者全部可以经由ROM 802和/或通信单元809而被载入和/或安装到设备800上。当计算机程序加载到RAM 803并由计算单元801执行时,可以执行上文描述的视野范围的确定方法的一个或多个步骤。备选地,在其他实施例中,计算单元801可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行视野范围的确定方法。

本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、复杂可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。

用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。

在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。

为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。

可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、互联网和区块链网络。

计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务("Virtual Private Server",或简称"VPS")中,存在的管理难度大,业务扩展性弱的缺陷。服务器可以是云服务器,也可以为分布式系统的服务器,或者是结合了区块链的服务器。

应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本公开公开的技术方案所期望的结果,本文在此不进行限制。

上述具体实施方式,并不构成对本公开保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等,均应包含在本公开保护范围之内。

技术分类

06120115887090