掌桥专利:专业的专利平台
掌桥专利
首页

一种基于云手机的视频数据传输方法

文献发布时间:2023-06-19 09:55:50



技术领域

本发明涉及云手机领域,具体涉及一种基于云手机的视频数据传输方法。

背景技术

目前,云手机领域中主要使用的编码方案为H264,传输协议为TCP协议。但由于云手机的用户会在不同硬件和网络环境下使用服务,同时对云手机会有不同的可视化需求如清晰度、延迟、流量带宽等,但目前市面上的方案,很难兼顾这些要求,导致用户体验不好。

现有的音视频数据传输方案主要采用本地编码的模式。这种模式的优点是高效、时延低,但是也存在着弊端,本地编码需要耗费较高的CPU或者GPU资源,意味着一台服务器能够承载的手机路数就会大大减少了,设备的成本相对较高。

发明内容

为解决现有技术的不足,本发明实施例提供了一种基于云手机的视频数据传输方法,该方法包括以下步骤:

云手机通过其内部组件virtualdisplay进行视频数据的采集;

云手机对采集到的视频数据进行压缩并通过内网,将所述视频数据传输到指定的编码服务器;

根据云手机当前的网络环境,动态控制所述编码服务器调整码率并对所述视频数据进行编码;

所述编码服务器将编码后的视频数据传输给客户端。

优选地,编码服务器将编码后的视频数据传输给客户端包括:

分别判断所述视频数据中的各帧图像是否为I帧图像,若是,则将所述视频数据分割为多段数据并分别为各段数据设置标记。

优选地,所述编码服务器根据云手机当前的网络环境,动态调整码率包括:

判断云手机当前的网络环境的ping值是否小于设定的阈值,若是,则提高当前的码率,若否,则降低当前的码率。

优选地,云手机对采集到的视频数据进行压缩包括:

采用YUA格式,将所述视频数据压缩为RGB格式24位的数据。

本发明实施例提供的基于云手机的视频数据传输方法,具有以下有益效果:

(1)基于H264或H265的编码方案及可靠性UDP传输协议,提升了云手机的可视化效果和用户的体验;

(2)采用分离编码的原则,以一定的时延损耗来提升设备的性能,同时通过编码服务器的复用,降低了设备的成本。

具体实施方式

以下结合具体实施例对本发明作具体的介绍。

本发明提供的实施例提供的基于云手机的视频数据传输方法,包括以下步骤:

S101,云手机通过其内部组件virtualdisplay进行视频数据的采集。

S102,云手机对采集到的视频数据进行压缩并通过内网,将视频数据传输到指定的编码服务器。

其中,由于是内网传输,所以传输效率很高,尽管如此,由于视频数据相对较大,所以需要对采集到的视频数据进行压缩。

S103,根据云手机当前的网络环境,动态控制编码服务器调整码率并对所述视频数据进行编码。

其中,采用独立的编码服务器有几个好处:

(1)编码服务器独立后,便可实现1对n的编码,达到编码的复用(用户不是实时需要连接云手机,所以一个编码服务端在服务完一个云手机用户后,资源可被回收重复利用,为其他的云手机用户服务,实现了1个编码服务端服务于多台云机设备)。

(2)编码服务器独立搭建,便和云手机解耦,编码端可以根据用户的使用场景,采用H264或H265(编码对性能的要求极高,需要用到GPU资源,这个在云手机上是一个很珍贵的资源,如果云手机上的GPU也被用来做编码,那么一组服务器能够虚拟出的云手机设备将大量减少,大大提高了设备成本)的编码模式。

S104,编码服务器将编码后的视频数据传输给客户端。

可选地,编码服务器将编码后的视频数据传输给客户端包括:

分别判断所述视频数据中的各帧图像是否为I帧图像,若是,则将所述视频数据分割为多段数据并分别为各段数据设置标记。

其中,基于UDP传输协议之上进行优化,在视频流数据上,I帧是关键数据帧,遇到I帧时,会校验I帧数据的完整性,保证在用户端能够收到完整的i帧数据,保证视频数据的显示。P帧时与i帧的差异数据,这部分数据非显示关键数据,在传输过程种如果有丢失,则直接丢弃,基本上不会影响显示,避免因为弱网络环境下因为丢帧重传带来的时间损耗。

可选地,所述编码服务器根据云手机当前的网络环境,动态调整码率包括:

判断云手机当前的网络环境的ping值是否小于设定的阈值,若是,则提高当前的码率,若否,则降低当前的码率。

其中,客户端在网络环境好的情况下,ping值较低,数据传输快,此时会像编码服务器发起请求,编码服务器会提升码率(数据量变大,同时视频流数据也更清晰,用户体验更好)。而当网络一般或者较差时,此时编码服务器也会收到请求,降低码率,减少传输帧率,这样子可以保障把关键视频数据传输到位,在客户端上能够较为流畅的播放视频流。而不会引起因为数据流量大,导致网络延迟逐步扩大的问题。

可选地,云手机对采集到的视频数据进行压缩包括:

采用YUA格式,将所述视频数据压缩为RGB格式24位的数据。

本发明实施例提供的基于云手机的视频数据传输方法,云手机通过其内部组件virtualdisplay进行视频数据的采集,云手机对采集到的视频数据进行压缩并通过内网,将视频数据传输到指定的编码服务器,根据云手机当前的网络环境,动态控制编码服务器调整码率并对所述视频数据进行编码,编码服务器将编码后的视频数据传输给客户端,提升了云手机的可视化效果和用户的体验,降低了设备的成本。

在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。

可以理解的是,上述方法及装置中的相关特征可以相互参考。

所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。

在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。

此外,存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。

本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。

存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。

还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。

本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

以上仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

相关技术
  • 一种基于云手机的视频数据传输方法
  • 一种基于有线电视网络的视频数据传输方法、云VR系统实现方法以及云VR系统
技术分类

06120112355691