掌桥专利:专业的专利平台
掌桥专利
首页

时序重建方法、装置、电子设备及存储介质

文献发布时间:2024-04-18 19:58:30


时序重建方法、装置、电子设备及存储介质

技术领域

本申请涉及穿戴设备技术领域,尤其涉及一种时序重建方法、装置、电子设备及存储介质。

背景技术

随着现代社会科技的发展,VR(Virtual Reality,虚拟现实)设备、AR(AugmentedReality,增强现实)设备和MR(Mediated Reality,混合现实)设备等头戴显示设备的应用越来越广泛,功能也越来越丰富,实现多种多样的功能往往需要扩展多种不同功能的功能组件,如多个相机、显示屏、Wi-Fi器件、多个麦克风、扬声器、电池等,功能组件与AP(Application Processor,应用处理器)主芯片之间通过数据线和控制线直接相连。在AP主芯片和功能组件设置于不同的结构件上的情况下,AP主芯片和功能组件之间超过100条的数据线和控制线都需要从AP所在的PCB(印制电路板)引出,通过物理连线穿过铰链(Hinge)与功能组件相连,承载这些信号线还需要的多层FPC(Flexible Printed Circuit,柔性电路板),难以满足头戴显示设备小型化的实际需求。为了减少线路的数量,可以将多条信号聚合后进行传输。

然而,采用信号聚合的方式,会导致信号从信号发送端发送至信号接收端之后,丢失部分时序信息,时序信息有缺失的信号发送到外设芯片之后,可能导致外设芯片因信号的时序信息异常而无法正常工作。

发明内容

本申请的主要目的在于提供一种时序重建方法、装置、电子设备及存储介质,旨在解决相关技术中信号聚合导致故障率较高的技术问题。

为实现上述目的,本申请提供一种时序重建方法,所述时序重建方法应用于头戴显示设备中的信号发送端,包括以下步骤:

接收至少一条携带时钟的第一信号,其中,所述第一信号包括第一时钟信号和第一数据信号;

检测各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值;

将各所述第一信号聚合成携带时钟的第二信号;

将所述第二信号和各所述相对时序值发送至信号接收端,以供所述信号接收端将所述第二信号解析得到至少一条携带时钟的第三信号,并根据所述相对时序值对各所述第三信号中的第二数据信号和/或第二时钟信号的跳变时间进行重建。

本申请还提供一种时序重建方法,所述时序重建方法应用于头戴显示设备中的信号接收端,包括以下步骤:

接收信号发送端发送的携带时钟的第四信号和相对时序值,将所述第四信号解析得到至少一条携带时钟的第五信号,其中,所述第五信号包括第三时钟信号和第三数据信号;

根据所述相对时序值对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建。

本申请还提供一种时序重建系统,所述时序重建系统应用于头戴显示设备,包括:

信号发送端,用于接收至少一条携带时钟的第一信号,其中,所述第一信号包括第一时钟信号和第一数据信号;检测各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值;将各所述第一信号聚合成携带时钟的第二信号;将所述第二信号和各所述相对时序值发送至信号接收端;

信号接收端,用于接收信号发送端发送的携带时钟的第四信号和相对时序值,将所述第四信号解析得到至少一条携带时钟的第五信号,所述第五信号包括第三时钟信号和第三数据信号;根据所述相对时序值对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建。

本申请还提供一种电子设备,所述电子设备为实体设备,所述电子设备包括:存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的所述的时序重建方法的程序,所述的时序重建方法的程序被处理器执行时可实现如上述的时序重建方法的步骤。

本申请还提供一种存储介质,所述存储介质为计算机可读存储介质,所述计算机可读存储介质上存储有实现时序重建方法的程序,所述的时序重建方法的程序被处理器执行时实现如上述的时序重建方法的步骤。

本申请提供了一种时序重建方法、装置、电子设备及存储介质,所述时序重建方法应用于头戴显示设备中的信号发送端,通过接收至少一条携带时钟的第一信号,其中,所述第一信号包括第一时钟信号和第一数据信号,检测各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值,实现了在信号聚合之前对信号跳变时间信息的提取;进而通过将各所述第一信号聚合成携带时钟的第二信号,将所述第二信号和各所述相对时序值发送至信号接收端,以供所述信号接收端将所述第二信号解析得到至少一条携带时钟的第三信号,并根据所述相对时序值对各所述第三信号中的第二数据信号和/或第二时钟信号的跳变时间进行重建,实现了对信号的跳变时间信息和信号分别进行处理和发送。这样,可以避免信号聚合过程中由于采样精度的问题,导致信号聚合和解析后,信号的跳变时间信息发生了变化,与原本第一信号中的跳变时间不同,而可能引发异常的情况,克服了采用信号聚合的方式,会导致信号从信号发送端发送至信号接收端之后,丢失部分时序信息,时序信息有缺失的信号发送到外设芯片之后,可能导致外设芯片因信号的时序信息异常而无法正常工作的技术缺陷,保证了信号在聚合、传输和解析之后,跳变时间的准确性,降低了信号聚合的故障率。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。

为了更清楚地说明本申请实施例或相关技术中的技术方案,下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图得到其他的附图。

图1为本申请实施例中涉及的头戴显示设备的一种可实施方式的结构示意图;

图2为本申请实施例中涉及的采样过程的信号示意图

图3为本申请中时序重建方法的第一实施例的流程示意图;

图4为本申请中实施例中涉及的时序重建的一种可实施方式的场景示意图;

图5为本申请中时序重建方法的第二实施例的流程示意图;

图6为本申请中时序重建系统的一实施例的结构示意图;

图7为本申请实施例中时序重建方法涉及的硬件运行环境的设备结构示意图。

本申请目的实现、功能特点及优点将结合实施例,参照附图做进一步说明。

具体实施方式

为使本发明的上述目的、特征和优点能够更加明显易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所得到的所有其它实施例,均属于本发明保护的范围。

随着现代社会科技的发展,VR(Virtual Reality,虚拟现实)设备、AR(AugmentedReality,增强现实)设备和MR(Mediated Reality,混合现实)设备等头戴显示设备的应用越来越广泛,功能也越来越丰富,实现多种多样的功能往往需要扩展多种不同功能的功能组件,如多个相机、显示屏、Wi-Fi器件、多个麦克风、扬声器、电池等,功能组件与AP主芯片之间通过数据线和控制线直接相连。在AP主芯片和功能组件设置于不同的结构件上的情况下,AP主芯片和功能组件之间超过100条的数据线和控制线都需要从AP所在的PCB(印制电路板)引出,通过物理连线穿过Hinge与功能组件相连,承载这些信号线还需要的多层FPC,这导致FPC设计复杂度高、良率低、成本高,增加了产品的设计成本,且过多的线路所需占用的空间也越多,难以满足头戴显示设备小型化的实际需求。例如,参照图1,显示设备、相机(camera)等功能组件设置于AR眼镜的前框,AP主芯片设置于镜腿,这些功能组件与AP主芯片之间的信号线均需要穿过Hinge,在镜腿较细的情况下,预留的穿线空间较少,限制了穿过Hinge的排线、同轴线的数量或者FPC线的宽度和厚度;并且,较多的排线、同轴线或者较厚的FPC线增加了转轴自由旋转的难度;同时Hinge两侧的PCB引出大量的数据线,需要的对应的连接器的Pin数较多,占用了较多的PCB空间,增加了设计的难度。

为了减少线路的数量,可以在主芯片一侧使用FPGA(Field Programmable GateArray,现场可编程逻辑门阵列)1收聚慢速信号,提升到高速信号进行传输,在AR眼镜的另一区域使用FPGA2做反向处理,从高速信号恢复出原先的低速信号,即可大大减少数据线的数量,满足头戴显示设备小型化的实际需求。然而,采用汇聚芯片聚合信号时,受到汇聚芯片采样时间间隔的影响,采集到的信号的跳变时间可能产生错误。例如,参照图2,图2中,clk表示时钟信号,EN表示使能信号,IN表示输入信号,若FPGA采样和传输的间隔为3ns,在极限状况下,若上一次采样结束的时刻为0,在0.1ns时刻,图2中的EN信号从低电平变为高电平,在2.9ns时刻,clk信号从低电平变为高电平,这样,在正常时序中,从EN信号跳变到clk信号跳变中间间隔了2.8ns,而FPGA1在0ns时刻采样时,EN信号和clk信号都为低电平状态,而3ns时刻采样时,EN信号和clk信号都为高电平状态,此结果在3ns时刻发送给FPGA2。FPGA2解码高速通道传输的信号,直接输出给外设芯片,在外设芯片输入端,EN和clk两个信号同时跳变,外设芯片使用clk信号的上升沿采样EN信号,会出现EN信号建立时间不足的问题,导致外设芯片工作异常。

因此,本申请提供了一种时序重建方法、装置、电子设备及存储介质,所述时序重建方法应用于头戴显示设备中的信号发送端,通过接收至少一条携带时钟的第一信号,其中,所述第一信号包括第一时钟信号和第一数据信号,检测各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值,实现了在信号聚合之前对信号跳变时间信息的提取;进而通过将各所述第一信号聚合成携带时钟的第二信号,将所述第二信号和各所述相对时序值发送至信号接收端,以供所述信号接收端将所述第二信号解析得到至少一条携带时钟的第三信号,并根据所述相对时序值对各所述第三信号中的第二数据信号和/或第二时钟信号的跳变时间进行重建,实现了对信号的跳变时间信息和信号分别进行处理和发送。这样,可以避免信号聚合过程中由于采样精度的问题,导致信号聚合和解析后,信号的跳变时间信息发生了变化,与原本第一信号中的跳变时间不同,而可能引发异常的情况,克服了采用信号聚合的方式,会导致信号从信号发送端发送至信号接收端之后,丢失部分时序信息,时序信息有缺失的信号发送到外设芯片之后,可能导致外设芯片因信号的时序信息异常而无法正常工作的技术缺陷,保证了信号在聚合、传输和解析之后,跳变时间的准确性,降低了信号聚合的故障率。

实施例一

本申请实施例一提供一种时序重建方法,参照图3,所述时序重建方法应用于头戴显示设备中的信号发送端,包括以下步骤:

步骤S10,接收至少一条携带时钟的第一信号,其中,所述第一信号包括第一时钟信号和第一数据信号;

本实施例方法的执行主体可以是一种时序重建装置,也可以是一种时序重建终端设备或服务器,本实施例以时序重建装置进行举例,该时序重建装置可以集成在具有数据处理功能的头戴显示设备上。示例性地,所述头戴显示设备可以为AR眼镜、VR头盔等。

在本实施例中,需要说明的是,所述信号发送端设置于所述头戴显示设备的第一结构件上,所述信号接收端设置于所述头戴显示设备的第二结构件上,所述第一结构件和所述第二结构件之间可以通过连接件转动连接。在一种可实施的方式中,参照图4,所述信号发送端可以包括AP芯片和第一通信处理器,所述第一通信处理器中设置有MUX(multiplexers,多路选择器)1,所述AP芯片和所述第一通信处理器之间通过多条慢速线缆通信连接,其中,所述慢速线缆包括如GPIO(General-purpose input/output,通用输入/输出口)线缆、I2C(Inter-Integrated Circuit,一种两线式串行总线)线缆、UART(UniversalAsynchronous Receiver/Transmitter,通用异步收发传输器)线缆、I2S(Inter—ICSound,集成电路内置音频总线)、SPI(Serial Peripheral Interface,串行外部设备接口)线缆等;所述信号接收端可以包括第二通信处理器和多个功能组件,所述第二通信处理器中设置有MUX2,所述第二通信处理器与各所述功能组件之间通过慢速线缆通信连接。其中,所述第一通信处理器和第二通信处理器可以为MCU(单片机)、DSP(数字信号处理器)或FPGA(现场可编程逻辑门阵列)等器件,所述第一通信处理器与所述第二通信处理器可以为相同类型的器件,也可以为不同类型的器件。所述信号发送端与所述信号接收端之间通过高速线缆通信连接,如USB(通用串行总线)线缆或PCI-e线缆,也可以设计私有的连接线缆,所述第一通信处理器将慢速线缆传输的多条慢速信号汇聚成高速信号,通过高速线缆发送至第二通信处理器,第二通信处理器将接收到的高速信号解析后,获得多条慢速信号,发送至各个端口。例如,高速线缆采用USB2.0线缆时,只需要2条线就能实现第一通信处理器和第二通信处理器之间的双向互联;高速线缆采用USB3.0线缆时,4条线可以实现第一通信处理器和第二通信处理器之间的双向互联;这样,不管AP芯片需要与功能组件之间互联多少条慢速线缆,最终只需要2条或者4条线的高速线缆就能实现慢速线缆的扩展和传输;而慢速线缆数量的减少,有效减少了PCB上连接器的数量,减少了占用的PCB面积,减少了Hinge穿线的数量。需要说明的是,由于信号的传输通常是双向的,因此上述可实施方式中的信号发送端和信号接收端可以互换,也即,AP芯片可以位于信号接收端,功能组件可以位于信号发送端,本实施例对此不加以限制。

所述第一信号是携带时钟的信号,也即,可以从所述第一信号中提取出第一时钟信号和第一数据信号。

示例性地,所述步骤S10包括:通过第一通信处理器采集通过多条慢速线缆传输的多条携带时钟的第一信号。

步骤S20,检测各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值;

在本实施例中,需要说明的是,所述相对时序值是指两个信号的跳变时间之间的跳变时间差。例如,参照图2,图2中clk信号从在2.9ns从低电平跳变为高电平,EN信号在0.1ns从低电平跳变为高电平,因此,从低电平跳变为高电平的clk信号与从低电平跳变为高电平的EN信号之间的相对时序值为2.8ns。

示例性地,所述步骤S20包括:通过预设的training(训练)程序,采样各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值,其中,所述预设的training程序是用于采样输入信号中有相对时序差异的信号,例如,I2S、SPI、SDIO(Secure DigitalInput and Output,安全数字输入输出)信号等。

在一种可实施的方式中,可以通过预设的training程序提升第一通信处理器的工作频率和信号采样频率,提升相对时序的采集精度。在training程序下,针对输入的第一信号,通过AP发起大量的读写操作,通过第一通信处理器高速采样至少一个周期数据,分别计量每条第一信号中的第一数据信号与第一时钟信号之间的相对时序值。

可选地,所述相对时序值包括第一相对时序值、第二相对时序值、第三相对时序值和第四相对时序值;

所述检测各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值的步骤包括:

步骤A10,对于每一条第一信号,在检测到所述第一数据信号从高电平跳变为低电平时,开始计时,在检测到所述第一时钟信号从高电平跳变为低电平时,停止计时,得到第一相对时序值;

步骤A20,和/或,对于每一条第一信号,在检测到所述第一数据信号从高电平跳变为低电平时,开始计时,在检测到所述第一时钟信号从低电平跳变为高电平时,停止计时,得到第二相对时序值;

步骤A30,和/或,对于每一条第一信号,在检测到所述第一数据信号从低电平跳变为高电平时,开始计时,在检测到所述第一时钟信号从高电平跳变为低电平时,停止计时,得到第三相对时序值;

步骤A40,和/或,对于每一条第一信号,在检测到所述第一数据信号从低电平跳变为高电平时,开始计时,在检测到所述第一时钟信号从低电平跳变为高电平时,停止计时,得到第四相对时序值。

在本实施例中,需要说明的是,时钟信号的跳变可以为从高电平跳变为低电平,也可以为从低电平跳变为高电平;数据信号的跳变可以为从高电平跳变为低电平,也可以为从低电平跳变为高电平。因此,相对时序值可以包括数据信号从高电平跳变为低电平的时间与时钟信号从高电平跳变为低电平的时间之间的时间差、数据信号从高电平跳变为低电平的时间与时钟信号从低电平跳变为高电平的时间之间的时间差、数据信号从低电平跳变为高电平的时间与时钟信号从高电平跳变为低电平的时间之间的时间差以及数据信号从低电平跳变为高电平的时间与时钟信号从低电平跳变为高电平的时间之间的时间差四种类型。每条信号中相同类型的相对时序值相同或存在较小的偏差,因此确定每条信号的每种类型的相对时序值,即可确定整条信号中每次跳变的准确时间。

示例性地,所述步骤A10-A40包括:通过预设的training(训练)程序,分别对每一条所述第一信号中第一数据信号的跳变时间和第一时钟信号的跳变时间进行采样。对于每一条第一信号,在所述第一信号输入之后,就基于预设的采样频率,对所述第一信号进行采样,在检测到所述第一数据信号发生跳变时,确定所述第一数据信号的信号跳变类型,并开始计时或统计采样次数,其中,所述第一数据信号的信号跳变类型包括从高电平跳变为低电平以及从低电平跳变为高电平;在此之后,若检测到所述第一时钟信号发生跳变,停止计时或采样次数的统计,并确定所述第一时钟信号的信号跳变类型,其中,所述第一时钟信号的信号跳变类型包括从高电平跳变为低电平以及从低电平跳变为高电平,根据当前的计时或当前统计的采样次数,即可确定所述第一数据信号跳变至第一时钟信号跳变之间的第一跳变时间差。进而,根据所述第一数据信号的信号跳变类型以及所述第一时钟信号的信号跳变类型,即可确定所述第一跳变时间差对应的相对时序值的类型。在所述第一数据信号从高电平跳变为低电平且所述第一时钟信号从高电平跳变为低电平的情况下,将所述第一跳变时间差确定为第一相对时序值;在所述第一数据信号从高电平跳变为低电平且所述第一时钟信号从低电平跳变为高电平的情况下,将所述第一跳变时间差确定为第二相对时序值;在所述第一数据信号从低电平跳变为高电平且所述第一时钟信号从高电平跳变为低电平的情况下,将所述第一跳变时间差确定为第三相对时序值;在所述第一数据信号从低电平跳变为高电平且所述第一时钟信号从低电平跳变为高电平的情况下,将所述第一跳变时间差确定为第四相对时序值。

可选地,所述检测各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值的步骤包括:

步骤B10,检测预设时间范围内各所述第一信号中的第一数据信号与第一时钟信号之间的至少一个初始时间差;

步骤B20,将各所述第一信号各自对应的各所述初始时间差的平均值确定为各所述第一信号各自对应的相对时序值。

在本实施例中,需要说明的是,同一条信号的同一种类型的相对时序值通常较为稳定,但也可能会出现一定的偏差,为了避免信号不稳定的情况,可以在一段时间内采样多个相对时序值,通过求平均值的方式提高数据的准确性。

示例性地,所述步骤B10-B20包括:通过预设的training程序对每一条信号分别进行采样,检测预设时间范围内每条所述第一信号中,第一数据信号发生跳变的时间与第一时钟信号发生跳变的时间之间的至少一个初始时间差。进而计算每条第一信号对应的各所述初始时间差的平均值,将各所述平均值分别确定为各所述第一信号各自对应的相对时序值。

在一种可实施的方式中,接收到第一信号N1和第一信号N2,通过预设的training程序对N1进行采样,得到x个初始时间差{t

在一种可实施的方式中,所述相对时序值可以包括第一相对时序值、第二相对时序值、第三相对时序值和第四相对时序值四种类型,分别与四种信号跳变组合类型一一对应,其中,所述第一相对时序值对应于数据信号从高电平跳变为低电平与时钟信号从高电平跳变为低电平;所述第二相对时序值对应于数据信号从高电平跳变为低电平与时钟信号从低电平跳变为高电平;所述第三相对时序值对应于数据信号从低电平跳变为高电平与时钟信号从高电平跳变为低电平;所述第四相对时序值对应于数据信号从低电平跳变为高电平与时钟信号从低电平跳变为高电平。同一条信号中不同类型的相对时序值也可能不同,因此对所述第一信号中包含的全部类型的相对时序值要分别进行采样和计算。例如,通过预设的training程序对任意一条第一信号进行采样,得到a个数据信号从高电平跳变为低电平的时间与时钟信号从高电平跳变为低电平的时间之间的初始时间差{t

步骤S30,将各所述第一信号聚合成携带时钟的第二信号;

示例性地,所述步骤S30包括:将采集到的各所述第一信号按照一定的传输时间顺序排列,并将排列好的各所述第一信号编码成符合高速线缆传输要求的携带时钟的第二信号。其中,各所述第一信号的传输时间顺序可以与各所述第一信号的采集时间顺序相同,也可以重新进行排序,具体排序方式可以根据实际情况进行确定,本实施例对此不加以限制。

可选地,所述将各所述第一信号聚合成携带时钟的第二信号的步骤包括:

步骤S31,确定各所述第一信号各自对应的传输时间片;

步骤S32,根据各所述第一信号各自对应的传输时间片,从各所述第一信号中提取待传输数据;

步骤S33,基于所述传输时间片将各所述待传输数据封装成待传输数据帧;

步骤S34,将所述待传输数据帧转换成第二信号。

在本实施例中,需要说明的是,在对各所述第一信号进行聚合时,若仅基于采集时间依次顺序传输至信号接收端,对于时效性要求较高的信号,若时延较长,可能对其传输和识别产生负面影响,但若重新调整信号传输的时间顺序,又可能进一步导致信号跳变时间的准确性降低。因此,本实施例通过在各所述第一信号聚合之前提取出准确的相对时序值,并将准确的相对时序值单独发送至信号接收端,可以避免信号聚合过程对信号跳变时间的影响,在此基础上,通过分配传输时间片的方式,可以实现对信号发送端和信号接收端之间传输的不同第一信号的时延进行适应其实际时延需求的调控,从而可以使得有更短时延需求的信号的时延缩短,减小这些信号识别的时间偏差,使得每种信号的变化都能够被及时识别和传输,信号传输效果更好。

可以预先将所述信号发送端与所述信号接收端之间的高速线缆的传输信道划分为多个传输时间片,根据第一信号的实际需求为各所述第一信号分配对应的传输时间片,对各所述第一信号的传输时间、顺序和频次进行调控,使得受时延影响较大的第一信号的顺序更靠前且传输频次更高,时延更小,而对于受时延影响较小的第一信号的顺序即使更靠后,占用资源更少,会导致时延略微延长,但其时延仍然仅仅为其比特时间的几百分之一,远小于其比特时间,也即,时延的影响微不足道,从而可以使得每种信号的变化都能够被及时识别和传输,信号传输效果更好。其中,传输时间片的具体分配方式可以根据实际情况进行确定,本实施例对此不加以限制。

示例性地,所述步骤S31-S34包括:确定预先为各条第一信号分配的传输时间片,根据预设的第一信号与传输时间片之间的对应关系,从各所述第一信号中提取每个传输时间片各自对应的待传输数据,并将各所述待传输数据按照对应的传输时间片封装成待传输数据帧,将所述待传输数据帧编码成符合高速线缆传输要求的第二信号。

步骤S40,将所述第二信号和各所述相对时序值发送至信号接收端,以供所述信号接收端将所述第二信号解析得到至少一条携带时钟的第三信号,并根据所述相对时序值对各所述第三信号中的第二数据信号和/或第二时钟信号的跳变时间进行重建。

示例性地,所述步骤S40包括:可以先将各所述相对时序值组合成相对时序值数据集、拼接成相对时序值向量或拼接成相对时序值矩阵等,进而将所述第二信号以及各所述相对时序值通过所述高速线缆发送至信号接收端,以供所述信号接收端将所述第二信号解析得到至少一条携带时钟的第三信号,并根据所述相对时序值对各所述第三信号中的第二数据信号和/或第二时钟信号的跳变时间进行重建。

在本实施例中,通过接收至少一条携带时钟的第一信号,其中,所述第一信号包括第一时钟信号和第一数据信号,检测各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值,实现了在信号聚合之前对信号跳变时间信息的提取;进而通过将各所述第一信号聚合成携带时钟的第二信号,将所述第二信号和各所述相对时序值发送至信号接收端,以供所述信号接收端将所述第二信号解析得到至少一条携带时钟的第三信号,并根据所述相对时序值对各所述第三信号中的第二数据信号和/或第二时钟信号的跳变时间进行重建,实现了对信号的跳变时间信息和信号分别进行处理和发送。这样,可以避免信号聚合过程中由于采样精度的问题,导致信号聚合和解析后,信号的跳变时间信息发生了变化,与原本第一信号中的跳变时间不同,而可能引发异常的情况,克服了采用信号聚合的方式,会导致信号从信号发送端发送至信号接收端之后,丢失部分时序信息,时序信息有缺失的信号发送到外设芯片之后,可能导致外设芯片因信号的时序信息异常而无法正常工作的技术缺陷,保证了信号在聚合、传输和解析之后,跳变时间的准确性,降低了信号聚合的故障率。

实施例二

进一步地,本申请实施例一提供一种时序重建方法,参照图5,所述时序重建方法应用于头戴显示设备中的信号接收端,包括以下步骤:

步骤C10,接收信号发送端发送的携带时钟的第四信号和相对时序值,将所述第四信号解析得到至少一条携带时钟的第五信号,其中,所述第五信号包括第三时钟信号和第三数据信号;

本实施例方法的执行主体可以是一种时序重建装置,也可以是一种时序重建终端设备或服务器,本实施例以时序重建装置进行举例,该时序重建装置可以集成在具有数据处理功能的头戴显示设备上。示例性地,所述头戴显示设备可以为AR眼镜、VR头盔等。

在本实施例中,需要说明的是,应用于所述信号发送端的时序重建方法是将从聚合前的慢速信号中直接提取相对时序值,并发送至信号接收端,而应用于所述信号接收端的时序重建方法,是基于接收到的相对时序值,对经过采样、聚合、解析后得到的慢速信号进行时序重建,恢复因采样、聚合、解析等过程而丢失的时序信息。因此,信息发送端的部分可以参照上述实施例,与上述实施例相同或相似的内容,可以参考上文介绍,后续不再赘述。

所述第五信号是携带时钟的信号,也即,可以从所述第五信号中提取出第三时钟信号和第三数据信号。

示例性地,所述步骤C10包括:接收信号发送端通过高速线缆发送的携带时钟的第四信号,对所述第四信号进行解析,得到多个符合慢速线缆传输要求的携带时钟的第五信号。其中,所述第四信号由所述头戴显示设备中的信号发送端,接收至少一条携带时钟的第六信号,其中,所述第六信号包括第四时钟信号和第四数据信号;检测各所述第六信号中的第四数据信号与第四时钟信号之间的相对时序值;将各所述第六信号聚合成携带时钟的第四信号;将所述第四信号和各所述相对时序值发送至信号接收端。

在一种可实施的方式中,所述第三信号可以为如上述实施例一和实施例二中所述的第二信号。

步骤C20,根据所述相对时序值对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建。

示例性地,所述步骤C20包括:从各所述第五信号中提取第三时钟信号和第三数据信号。可以根据信号标识或信道分配情况确定各所述第五信号各自对应的相对时序值,基于每一条第五信号各自对应的相对时序值分别对每一条第五信号中的第三数据信号和/或第三时钟信号的进行时序重建。对于每一条第五信号,可以在检测到第三数据信号发生跳变之后,延迟所述相对时序值对应的时间,使得所述第三时钟信号发生跳变,实现对第五信号中的第三数据信号和/或第三时钟信号的时序重建;也可以直接根据所述相对时序值设置第三数据信号的跳变时间和/或第三时钟信号的跳变时间,以使得所述第三数据信号跳变之后经过所述相对时序值对应的时间,所述第三时钟信号发生跳变,具体方式可以根据实际情况进行确定,本实施例对此不加以限制。

可选地,所述根据所述相对时序值对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建的步骤包括:

步骤D10,确定各所述第五信号中第三数据信号对应的至少一个第一跳变时间以及第三时钟信号对应的至少一个第二跳变时间;

步骤D20,将所述第二跳变时间延迟至与所述第一跳变时间之间相隔所述相对时序值的第三跳变时间。

在本实施例中,所述步骤D10-D20包括:基于每一条第五信号各自对应的相对时序值分别对每一条第五信号中的第三数据信号和/或第三时钟信号的进行时序重建。对于每一条第五信号,可以识别出第三数据信号对应的至少一个第一跳变时间以及第三时钟信号对应的至少一个第二跳变时间,将每一个第一跳变时间与在所述第一跳变时间之后相邻的第二跳变时间分为一组跳变时间组,判断每个跳变时间组中的第一跳变时间与第二跳变时间之间的时间差是否与所述相对时序值相匹配。将不相匹配的跳变时间组中的第二跳变时间延迟至与所述第一跳变时间之间相隔所述相对时序值的第三跳变时间。其中,所述与所述相对时序值相匹配可以是与所述相对时序值相等,或相差小于预设偏差范围。

可选地,所述根据所述相对时序值对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建的步骤包括:

步骤E10,确定各所述第五信号中第三数据信号发生跳变的第一信号跳变类型以及第三时钟信号发生跳变的第二信号跳变类型;

步骤E20,根据所述第一信号跳变类型和所述第二信号跳变类型,从各所述相对时序值中确定目标相对时序值;

步骤E30,根据所述目标相对时序值对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建。

在本实施例中,需要说明的是,数据信号的跳变类型包括从高电平跳变为低电平以及从低电平跳变为高电平两种,时钟信号的跳变类型包括从高电平跳变为低电平以及从低电平跳变为高电平两种,因此二者的组合包括四种,每种组合在同一条信号中的相对时序值也可能不同,因此在信号发送端对每种信号跳变组合类型的相对时序值均进行采样并发送至信号接收端的情况下,可以识别出各所述第五信号中第三数据信号发生跳变的第一信号跳变类型以及第三时钟信号发生跳变的第二信号跳变类型,根据所述第一信号跳变类型和所述第二信号跳变类型,查询预设的信号跳变组合类型与相对时序值之间的对应关系,确定对应的目标相对时序值,进而,根据所述目标相对时序值对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建。例如,接收到的所述相对时序值为包括m个第五信号给对应的相对时序值数据集Sm的总集S{S1,S2,……,Sm},其中,Sm包括{t

在一种可实施的方式中,在对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建之后,还可以包括:对时序重建之后的第五信号进行编码后通过各自对应的慢速线缆发送至各自对应的信号接口,从而可以实现AP芯片与功能组件之间的双向互联。在一种可实施的方式中,所述信号接口可以为各个功能组件的管脚。

本发明实施例提供的时序重建方法应用于头戴显示设备中的信号接收端,解决了相关技术中信号聚合导致故障率较高的技术问题。与相关技术相比,本发明实施例提供的应用于头戴显示设备中的信号接收端的时序重建方法的有益效果与上述实施例提供的应用于头戴显示设备中的信号发送端的时序重建方法的有益效果相同,且该时序重建方法中的其他技术特征与上述实施例方法公开的特征相同,在此不做赘述。

实施例三

进一步地,本申请实施例还提供一种时序重建系统,参照图6,所述时序重建系统应用于头戴显示设备,包括:

信号发送端10,用于接收至少一条携带时钟的第一信号,其中,所述第一信号包括第一时钟信号和第一数据信号;检测各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值;将各所述第一信号聚合成携带时钟的第二信号;将所述第二信号和各所述相对时序值发送至信号接收端;

信号接收端20,用于接收信号发送端发送的携带时钟的第四信号和相对时序值,将所述第四信号解析得到至少一条携带时钟的第五信号,其中,所述第五信号包括第三时钟信号和第三数据信号;根据所述相对时序值对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建。

可选地,所述相对时序值包括第一相对时序值、第二相对时序值、第三相对时序值和第四相对时序值,所述信号发送端10还用于:

对于每一条第一信号,在检测到所述第一数据信号从高电平跳变为低电平时,开始计时,在检测到所述第一时钟信号从高电平跳变为低电平时,停止计时,得到第一相对时序值;

和/或,对于每一条第一信号,在检测到所述第一数据信号从高电平跳变为低电平时,开始计时,在检测到所述第一时钟信号从低电平跳变为高电平时,停止计时,得到第二相对时序值;

和/或,对于每一条第一信号,在检测到所述第一数据信号从低电平跳变为高电平时,开始计时,在检测到所述第一时钟信号从高电平跳变为低电平时,停止计时,得到第三相对时序值;

和/或,对于每一条第一信号,在检测到所述第一数据信号从低电平跳变为高电平时,开始计时,在检测到所述第一时钟信号从低电平跳变为高电平时,停止计时,得到第四相对时序值。

可选地,所述信号发送端10还用于:

检测预设时间范围内各所述第一信号中的第一数据信号与第一时钟信号之间的至少一个初始时间差;

将各所述第一信号各自对应的各所述初始时间差的平均值确定为各所述第一信号各自对应的相对时序值。

可选地,所述信号发送端10还用于:

确定各所述第一信号各自对应的传输时间片;

根据各所述第一信号各自对应的传输时间片,从各所述第一信号中提取待传输数据;

基于所述传输时间片将各所述待传输数据封装成待传输数据帧;

将所述待传输数据帧转换成第二信号。

可选地,所述信号接收端20还用于:

确定各所述第五信号中第三数据信号对应的至少一个第一跳变时间以及第三时钟信号对应的至少一个第二跳变时间;

将所述第二跳变时间延迟至与所述第一跳变时间之间相隔所述相对时序值的第三跳变时间。

可选地,所述信号接收端20还用于:

确定各所述第五信号中第三数据信号发生跳变的第一信号跳变类型以及第三时钟信号发生跳变的第二信号跳变类型;

根据所述第一信号跳变类型和所述第二信号跳变类型,从各所述相对时序值中确定目标相对时序值;

根据所述目标相对时序值对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建。

本发明提供的时序重建装置,采用上述实施例中的时序重建方法,解决了相关技术中信号聚合导致故障率较高的技术问题。与相关技术相比,本发明实施例提供的时序重建装置的有益效果与上述实施例提供的时序重建方法的有益效果相同,且该时序重建装置中的其他技术特征与上述实施例方法公开的特征相同,在此不做赘述。

实施例四

进一步地,本发明实施例提供一种电子设备,电子设备包括:至少一条处理器;以及,与至少一条处理器通信连接的存储器;其中,存储器存储有可被至少一条处理器执行的指令,指令被至少一条处理器执行,以使至少一条处理器能够执行上述实施例中的时序重建方法。

下面参考图7,其示出了适于用来实现本公开实施例的电子设备的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如蓝牙耳机、移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图7示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。

如图7所示,电子设备可以包括处理装置(例如中央处理器、图形处理器等),其可以根据存储在只读存储器(ROM)中的程序或者从存储装置加载到随机访问存储器(RAM)中的程序而执行各种适当的动作和处理。在RAM中,还存储有电子设备操作所需的各种程序和数组。处理装置、ROM以及RAM通过总线彼此相连。输入/输出(I/O)接口也连接至总线。

通常,以下系统可以连接至I/O接口:包括例如触摸屏、触摸板、键盘、鼠标、图像传感器、麦克风、加速度计、陀螺仪等的输入装置;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置;包括例如磁带、硬盘等的存储装置;以及通信装置。通信装置可以允许电子设备与其他设备进行无线或有线通信以交换数组。虽然图中示出了具有各种系统的电子设备,但是应理解的是,并不要求实施或具备所有示出的系统。可以替代地实施或具备更多或更少的系统。

特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置从网络上被下载和安装,或者从存储装置被安装,或者从ROM被安装。在该计算机程序被处理装置执行时,执行本公开实施例的方法中限定的上述功能。

本发明提供的电子设备,采用上述实施例中的时序重建方法,解决了相关技术中信号聚合导致故障率较高的技术问题。与相关技术相比,本发明实施例提供的电子设备的有益效果与上述实施例提供的时序重建方法的有益效果相同,且该电子设备中的其他技术特征与上述实施例方法公开的特征相同,在此不做赘述。

应当理解,本公开的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式的描述中,具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

实施例五

进一步地,本实施例提供一种计算机可读存储介质,具有存储在其上的计算机可读程序指令,计算机可读程序指令用于执行上述实施例中的时序重建方法。

本发明实施例提供的计算机可读存储介质例如可以是U盘,但不限于电、磁、光、电磁、红外线、或半导体的系统、系统或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、系统或者器件使用或者与其结合使用。计算机可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。

上述计算机可读存储介质可以是电子设备中所包含的;也可以是单独存在,而未装配入电子设备中。

上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被电子设备执行时,使得电子设备:接收至少一条携带时钟的第一信号,其中,所述第一信号包括第一时钟信号和第一数据信号;检测各所述第一信号中的第一数据信号与第一时钟信号之间的相对时序值;将各所述第一信号聚合成携带时钟的第二信号;将所述第二信号和各所述相对时序值发送至信号接收端,以供所述信号接收端将所述第二信号解析得到至少一条携带时钟的第三信号,并根据所述相对时序值对各所述第三信号中的第二数据信号和/或第二时钟信号的跳变时间进行重建。

或者,上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被电子设备执行时,使得电子设备:接收信号发送端发送的携带时钟的第四信号和相对时序值,将所述第四信号解析得到至少一条携带时钟的第五信号,其中,所述第五信号包括第三时钟信号和第三数据信号;根据所述相对时序值对各所述第五信号中的第三数据信号和/或第三时钟信号的进行时序重建。

可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以表示一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。

描述于本公开实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,模块的名称在某种情况下并不构成对该单元本身的限定。

本发明提供的计算机可读存储介质,存储有用于执行上述时序重建方法的计算机可读程序指令,解决了相关技术中信号聚合导致故障率较高的技术问题。与相关技术相比,本发明实施例提供的计算机可读存储介质的有益效果与上述实施例提供的时序重建方法的有益效果相同,在此不做赘述。

实施例六

进一步地,本申请还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述的时序重建方法的步骤。

本申请提供的计算机程序产品解决了相关技术中信号聚合导致故障率较高的技术问题。与相关技术相比,本发明实施例提供的计算机程序产品的有益效果与上述实施例提供的时序重建方法的有益效果相同,在此不做赘述。

以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利处理范围内。

相关技术
  • 超分辨率图像重建方法及装置、电子设备及存储介质
  • 电子设备的显示控制方法、装置、电子设备和存储介质
  • 电子设备控制方法及装置、电子设备及存储介质
  • 数据分布存储方法、装置、存储介质及电子设备
  • 存储清理方法、装置、电子设备及存储介质
  • 人脸重建模型的训练方法及装置、人脸重建方法及装置、电子设备和可读存储介质
  • 人体重建方法、人体重建装置、存储介质与电子设备
技术分类

06120116496937