掌桥专利:专业的专利平台
掌桥专利
首页

技术领域

本发明涉及网络优化技术领域,尤其是涉及一种OTT服务质量测试方法、装置、电子设备和存储介质。

背景技术

OTT(服务商通过互联网向用户提供的应用服务,Over The Top)服务由运营之外的第三方(即服务商)直接面向用户提供服务和计费,而运营商作为单纯的“传输管道”。在OTT中,服务商通过IP(网际互连协议,Internet Protocol)网络来传输多媒体内容,在具有基础设施的网络里开展没有太多限制,不需要像运营商那样建专网。在智能手机中用户通过安装服务商的应用后,可以进行语音、视频通话,文件传输,内容播放等服务。

具体来说,OTT是通过终端和无线通信网络来为用户提供丰富的、高质量的内容,降低内容生产和交互的成本,比如微信、抖音、优酷等等。在4G(第四代移动通信技术,the4th-Generation mobile communication technology)/5G(第五代移动通信技术,the5th-Generation mobile communication technology)高速上网的条件下,互联网OTT厂商的产品,因其本身固有的平台化,开放性,可玩性等丰富的应用功能,获得了极大的用户量。因此,需要监测OTT服务质量并对对OTT服务质量进行优化。

然而,现有的方法只是针对终端实际运行时的网络状态进行监控,无法定位具体业务存在的网络问题,或者具体服务商存在的网络问题,不利于深度优化网络,提高OTT服务质量。

发明内容

本发明实施例提供一种OTT服务质量测试方法、装置、电子设备和存储介质,用以解决现有技术中无法定位具体业务存在的网络问题,或者具体服务商存在的网络问题,不利于深度优化网络,提高OTT服务质量的问题。

针对以上技术问题,第一方面,本发明实施例提供一种OTT服务质量测试方法,包括:

获取待测试的服务项目,其中,服务项目包括通过互联网向用户提供的应用服务OTT中的至少一种业务;

获取所述服务项目中的业务运行时,在终端监测到的网络数据和业务变化数据;

根据所述网络数据和所述业务变化数据,确定对所述服务项目的服务质量进行测试的测试结果。

第二方面,本发明实施例提供一种OTT服务质量测试装置,包括:

第一获取模块,用于获取待测试的服务项目,其中,服务项目包括通过互联网向用户提供的应用服务OTT中的至少一种业务;

第二获取模块,用于获取所述服务项目中的业务运行时,在终端监测到的网络数据和业务变化数据;

确定模块,用于根据所述网络数据和所述业务变化数据,确定对所述服务项目的服务质量进行测试的测试结果。

第三方面,本发明实施例提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现以上所述的OTT服务质量测试方法的步骤。

第四方面,本发明实施例提供一种非暂态可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以上任一项所述的OTT服务质量测试方法的步骤。

本发明的实施例提供一种OTT服务质量测试方法、装置、电子设备和存储介质,获取某一待测试的服务项目中的业务运行时,监测到的网络数据和业务变化数据。根据监测到的网络数据和业务变化数据,得到反应该服务项目服务质量的测试结果。在服务项目中的业务运行时监测网络数据,监测的网络数据与该服务项目相关,能够反应网络状况是否与该服务项目中业务有关,实现对具体业务运行的网络问题进行定位,进一步地,通过具体业务对应的服务商,能够实现对具体服务商存在的网络问题进行定位。网络数据监测的细化有利于多维度分析网络问题,快速准确定位网络问题,深度优化网络,提高OTT服务质量。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种OTT服务质量测试方法的流程示意图;

图2是本发明另一实施例提供的对OTT服务进行监测提高服务质量的原理示意图;

图3是本发明另一实施例提供的OTT服务质量测试方法的实现过程示意图;

图4是本发明另一实施例提供的视频播放时监测的网络数据界面示意图;

图5是本发明另一实施例提供的一种OTT服务质量测试装置的结构框图;

图6是本发明另一实施例提供的电子设备的实体结构图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

目前对网络数据的监测,都是针对当前终端的实际运行情况进行监测,这种监测方式得到的网络数据无法反应某一服务商或者某一项业务的网络状况,从而无法将网络问题定位到具体的服务商或者具体业务。在对网络进行优化时,也无法快速准确地将网络问题与服务商或具体业务相联系,不利于快速准确定位网络问题,提高服务质量。

为了解决这一技术问题,图1为本实施例提供的一种OTT服务质量测试方法的流程示意图,该方法由任一设备执行,该设备可以是终端、服务器(例如,服务商云平台的某一服务器)或者由独立于终端或者服务器的其它设备,本实施例对此不做具体限制。参见图1,该方法包括:

步骤101:获取待测试的服务项目,其中,服务项目包括通过互联网向用户提供的应用服务OTT中的至少一种业务。

服务项目是服务商提供的应用服务OTT中,的至少一种业务,例如,OTT为微信,服务项目为微信语音,或者服务项目为微信语音和微信发送信息的组合。当服务项目为多种业务的组合时,需要控制终端使得这多种业务均处于运行状态。待测试的服务项目可以是通过预先确定的测试列表获取的,也可以是测试人员临时指定的测试项目。

步骤102:获取所述服务项目中的业务运行时,在终端监测到的网络数据和业务变化数据。

由于需要提高的是具体业务的服务质量,终端侧的网络数据是反应实际网络使用情况的数据,因此需要对终端侧的网络数据进行监测。具体地,可以通过终端的日志确定在终端监测的网络数据。

进一步地,网络数据包括信号强度、信号传输速率、信号传输时延、网络数据接收成功率、丢包率、网络抖动和信号干扰信息等等,只要能够反应网络状况,有助于对网络进行优化,提高服务质量的数据均可进行监测,本实施例不再一一列举。同理,业务变化数据包括业务运行时间和业务状态等,本实施例不再一一列举。

需要说明的是,本实施例中的终端可以是手机、电脑等,本实施例对此不做具体限制。

步骤103:根据所述网络数据和所述业务变化数据,确定对所述服务项目的服务质量进行测试的测试结果。

进一步地,还包括:保存所述测试结果。

进一步地,还包括:根据获取的显示设置信息,显示测试结果;其中,显示设置信息包括显示某一服务项目对应的测试结果、显示某一OTT的所有服务项目对应的测试结果、以及显示某一服务商的各服务项目对应的测试结果。

若显示设置信息为显示某一服务项目对应的测试结果,则显示的内容中仅包括该服务项目中各业务对应的测试结果;若显示设置信息为显示某一OTT的所有服务项目对应的测试结果,则显示的内容中包括该OTT中每一服务项目下,各业务对应的测试结果。若显示设置信息为显示某一服务商的各服务项目对应的测试结果,则显示的内容包括该服务商的各服务项目下,各业务对应的测试结果。

基于上述的网络数据和业务变化数据,可以从业务变化数据的多个维度分析网络数据,例如,不同业务运行时间下网络数据的变化、不同业务状态下网络数据的变化、不同种类的业务(即业务类型,例如,微信语音和微信视频属于不同业务类型)下网络数据的变化等等。由于测试结果从多个角度,针对某一服务项目展示了网络数据的变化,因此通过测试结果能够对该服务项目的服务质量进行分析,定位网络问题,有效优化网络问题。

本实施例提供一种OTT服务质量测试方法,获取某一待测试的服务项目中的业务运行时,监测到的网络数据和业务变化数据。根据监测到的网络数据和业务变化数据,得到反应该服务项目服务质量的测试结果。在服务项目中的业务运行时监测网络数据,监测的网络数据与该服务项目相关,能够反应网络状况是否与该服务项目中业务有关,实现对具体业务运行的网络问题进行定位,进一步地,通过具体业务对应的服务商,能够实现对具体服务商存在的网络问题进行定位。网络数据监测的细化有利于多维度分析网络问题,快速准确定位网络问题,深度优化网络,提高OTT服务质量。

为了降低网络数据受到其它因素的影响程度,使得网络数据更准确地反应服务项目的真实网络状态,进一步地,在上述实施例的基础上,还包括:

确定与所述服务项目对应的OTT,作为待测试OTT;

控制所述终端关闭所述待测试OTT之外的OTT,打开所述待测试OTT,并通过所述待测试OTT仅运行所述服务项目中的业务。

服务项目对应的OTT,例如,微信语音对应的OTT为微信这一应用服务。控制终端关闭待测试OTT后,打开待测试OTT,并使得待测试OTT中仅有服务项目中的业务运行,从而其它服务商和其它业务对网络数据的影响,有利于准确地分析网络问题是否与该服务项目相关。

本实施例通过控制终端将与服务项目中业务无关的应用服务和业务关闭,使得网络数据能够更为准确地反应网络问题是否与该服务项目相关,有利于准确地进行网络优化。

进一步地,在上述各实施例的基础上,所述获取待测试的服务项目,包括:

通过云平台下载测试列表或者获取预先设置的测试列表,从所述测试列表中获取任一待测试的服务项目;

其中,所述测试列表包括需进行测试的服务项目,以及各服务项目对应的OTT。

进一步地,循环执行“从所述测试列表中获取任一待测试的服务项目,确定对所述服务项目的服务质量进行测试的测试结果”的操作,直到遍历所述测试列表中的每一测试项目。

其中,测试列表通过云平台下发或者测试人员主动设置。测试列表中包括的服务项目,比如自动拨打接听微信语音、视频电话,自动播放抖音短视频、YY直播、优酷点播等。

本实施例将需要测试的各测试项目添加到测试列表中,实现了对各测试项目的测试。

图2为本实施例提供的通过对OTT服务进行监测提高服务质量的原理示意图,参见图2,该过程对某一OTT,通过手机终端采集OTT服务数据(即业务变化数据)和网络侧数据(即网络数据)。通过网络侧数据的解码、结合OTT服务数据和网络侧数据的分析统计,确定测试结果。进一步记录统计、回放和展示这些测试结果。具体地,监测手机OTT服务质量,通过监听采集终端网络数据和相关应用的数据;并进行分析,获得业务时间、业务类型,生成成功率、速率、时延等质量指标;上传云平台,通过大数据进一步从各个维度分析服务质量,以便更加方便准确的进行网络优化。

进一步地,在上述各实施例的基础上,所述根据所述网络数据和所述业务变化数据,确定对所述服务项目的服务质量进行测试的测试结果,包括:

对所述服务项目中每一种业务,生成对所述业务监测的网络数据随业务运行时间的第一变化关系、对所述业务监测的网络数据随业务状态的第二变化关系、由所述服务项目中各种业务对应的第一变化关系组成的第一对比图,和/或由所述服务项目中各种业务对应的第二变化关系组成的第二对比图;

将生成的所述第一变化关系、所述第二变化关系、所述第一对比图,和/或所述第二对比图,作为所述测试结果;

其中,所述网络数据包括信号强度、信号传输速率、信号传输时延、网络数据接收成功率、丢包率、网络抖动和信号干扰信息。

需要说明的是,业务运行时间指的是某一业务运行的时间,例如,从开始接通微信语音、微信语音接通过程中和微信语音结束的整个过程中的某一段运行时间或整个运行时间。业务状态指的是业务在不同过程的状态,例如,微信语音接通前的等待接通状态、微信语音接通中的状态和微信语音结束的时刻对应的状态。不同种的业务,即不同业务类型的业务,例如,微信语音和微信视频属于不同种的业务。

举例来说,测试项目中包括的业务为微信语音,则对微信语音从等待接通到微信语音结束的整个过程进行网络数据的监控。若所监控的网络数据为信号强度,则生成在整个微信语音的过程中,信号强度随业务运行时间的第一变化关系;在整个微信语音的过程中选取的一些时刻(例如,选取的一些时刻包括微信语音等待接通状态时某一时刻、接通中状态的某一时刻、微信语音结束的时刻,以及在接通中状态中选取的其它多个时刻),生成信号强度随着选取的各时刻变化的第二变化关系;将生成的第一变化关系和第二变化关系作为该测试项目的测试结果。

再举例,当测试项目中包括的业务为微信语音和微信视频两种业务,则除了对微信语音和微信视频分别生成第一变化关系和第二变化关系外,还可以生成第一对比图,在第一对比图中,横坐标为业务运行时间,纵坐标为信号强度,第一对比图中包括两条曲线,分别是微信语音的第一变化关系和微信视频的第一变化关系。需要说明的是,为了更好的体现两条曲线的对比,可以对横坐标的业务运行时间进行处理,例如,横坐标表示相对于业务由等待接通到接通状态的转换时刻的时间间隔(比如,该转换时刻对应的横坐标的值为0;转换时刻之前的业务运行时间为负值,且与该转换时刻时间间隔越大,绝对值越大;转换时刻之后的业务运行时间为正值,且与该转换时刻时间间隔越大值越大)。

此外,还可以生成第二对比图,在第二对比图中,横坐标为业务状态,纵坐标为信号强度,第二对比图中包括两条曲线,分别是微信语音的第二变化关系和微信视频的第二变化关系。

本实施例中,对服务项目生成的测试报告,即生成服务项目按不同维度变化时,网络数据呈现的变化关系,通过测试报告能够直观地了解不同服务项目的网络状况。

为了分析服务项目的网络数据,进一步地,在上述各实施例的基础上,还包括:

若所述测试结果中存在异常网络数据,则所述服务项目的服务质量不合格;

其中,异常网络数据包括小于或等于第一阈值的信号强度、小于或等于第二阈值的信号传输速率、大于或等于第三阈值的信号传输时延、小于或等于第四阈值的网络数据接收成功率、大于或等于第五阈值的丢包率、大于或等于第六阈值的网络抖动和信号受到干扰的结果。

其中,第一阈值、第二阈值、第三阈值、第四阈值、第五阈值和第六阈值均为设定值。

举例来说,若监测的网络数据包括信号强度,测试报告中包括微信语音对应的第一变化关系和第二变化关系。若第一变化关系中存在某一点信号强度小于第一阈值,则第一变化关系中存在异常网络数据。包含该微信语音的服务项目的服务质量不合格。

本实施例中,通过测试结果中是否存在异常网络数据,筛选出服务质量不合格的服务项目,准确定位了进行网络优化需考虑的服务项目。

进一步地,在上述各实施例的基础上,还包括:

将服务质量不合格的服务项目作为异常服务项目,确定各OTT对应的服务项目中异常服务项目所占的第一比例,将第一比例大于预设比例的OTT作为待分析OTT,并确定各服务商提供的OTT中待分析OTT所占的第二比例,根据所述第一比例和/或所述第二比例对网络进行优化。

进一步地,若第一比例大于第一参考比例,则在排除网络异常,对网络进行优化时考虑所述待分析OTT本身对网络的影响,若第二比例大于第二参考比例,则将第二比例大于第二参考比例的服务商作为待分析服务商,在排除网络异常,对网络进行优化时考虑待分析服务商所提供的服务对网络的影响。通过在不同服务项目中的业务运行过程中监测的网络数据,能够将网络问题与具体业务、服务项目和服务商关联,从而有利于准确快速地定位网络问题,排除网络异常,更好地进行优化。

在进行网络优化时,可以考虑各OTT对应的网络状况或者考虑服务商对应的网络状况,通过第一比例和第二比例可以避免偶然因素带来的网络异常,提高了定位网络问题的准确性。

图3为本实施例提供的OTT服务质量测试方法的实现过程示意图,参见图3,该过程包括如下内容:

被动采集终端网络侧数据,并对其中数据流进行解码,记录、分析统计和展示相关的码流信息;

通过云平台下发或者测试人员主动设置自动测试列表,主动进行一系列的OTT服务测试。比如自动拨打接听微信语音、视频电话,自动播放抖音短视频、YY直播、优酷点播等。采集OTT服务过程中的各项参数指标,比如时延、抖动等;

通过终端和云平台对采集到的数据进行关联分析,生成OTT相关的服务质量指标。可在终端和云平台对实时查看各项参数和分析结果,并可以进行直观的数据回放,大大提升网络分析人员解决问题的效率。

具体来说,本实施例提供的一种OTT服务质量测试方法包括“测试部分”和“分析显示部分”。

其中,“测试部分”实现的功能包括:

通过云平台下发或者测试人员主动设置自动测试列表,主动进行一系列的OTT服务测试。在测试过程中通过辅助服务监控OTT应用的界面状态、服务器延时、数据量等信息,同步采集手机网络侧的相关数据并解码,如:小区信息、邻小区、吞吐量、发射功率、空口信令等。保存到本地并上传至云平台。

“分析显示部分”实现的功能包括:

通过终端和云平台对采集到的数据进行关联分析;将采集并解码的网络侧数据和OTT应用侧记录进行关联,同一次测试业务时间、IP等相同,由此可生成关联记录;以业务时间、业务类型、OTT应用状态为维度,统计这些维度下的参数质量,即信号强度、干扰、速率、时延等指标。通过这些数据就可以很简单的监测OTT服务质量。在终端和云平台都可以对数据和分析结果进行展示、回放。图4为本实施例提供的视频播放时监测的网络数据界面示意图,参见图4,在视频播放时,监测的网络数据包括实时速率(信号传输速率),监测的业务变化数据包括视频分辨率。

本实施例结合云平台自动采集终端网络侧数据和OTT业务的相关数据,实现对OTT业务质量的分析和统计。由于同时分析并关联了网络侧信令面和用户侧OTT业务面两方面的内容,所以可以很方便地从业务时间、IP、PORT(端口)、路由、业务类型等多方面监控OTT服务质量。对于网络分析人员可以更加快速的定位问题节点。

图5为本实施例提供的一种OTT服务质量测试装置的结构框图,参见图5,该装置包括第一获取模块501、第二获取模块502和确定模块503,其中,

第一获取模块501,用于获取待测试的服务项目,其中,服务项目包括通过互联网向用户提供的应用服务OTT中的至少一种业务;

第二获取模块502,用于获取所述服务项目中的业务运行时,在终端监测到的网络数据和业务变化数据;

确定模块503,用于根据所述网络数据和所述业务变化数据,确定对所述服务项目的服务质量进行测试的测试结果。

本实施例提供的OTT服务质量测试装置适用于上述实施例提供的OTT服务质量测试方法,在此不再赘述。

本实施例提供一种OTT服务质量测试装置,获取某一待测试的服务项目中的业务运行时,监测到的网络数据和业务变化数据。根据监测到的网络数据和业务变化数据,得到反应该服务项目服务质量的测试结果。在服务项目中的业务运行时监测网络数据,监测的网络数据与该服务项目相关,能够反应网络状况是否与该服务项目中业务有关,实现对具体业务运行的网络问题进行定位,进一步地,通过具体业务对应的服务商,能够实现对具体服务商存在的网络问题进行定位。网络数据监测的细化有利于多维度分析网络问题,快速准确定位网络问题,深度优化网络,提高OTT服务质量。

优选地,所述第二获取模块还用于:

确定与所述服务项目对应的OTT,作为待测试OTT;

控制所述终端关闭所述待测试OTT之外的OTT,打开所述待测试OTT,并通过所述待测试OTT仅运行所述服务项目中的业务。

优选地,所述第一获取模块还用于:

通过云平台下载测试列表或者获取预先设置的测试列表,从所述测试列表中获取任一待测试的服务项目;

其中,所述测试列表包括需进行测试的服务项目,以及各服务项目对应的OTT。

优选地,所述确定模块还用于:

对所述服务项目中每一种业务,生成对所述业务监测的网络数据随业务运行时间的第一变化关系、对所述业务监测的网络数据随业务状态的第二变化关系、由所述服务项目中各种业务对应的第一变化关系组成的第一对比图,和/或由所述服务项目中各种业务对应的第二变化关系组成的第二对比图;

将生成的所述第一变化关系、所述第二变化关系、所述第一对比图,和/或所述第二对比图,作为所述测试结果;

其中,所述网络数据包括信号强度、信号传输速率、信号传输时延、网络数据接收成功率、丢包率、网络抖动和信号干扰信息。

优选地,所述确定模块还用于:

若所述测试结果中存在异常网络数据,则所述服务项目的服务质量不合格;

其中,异常网络数据包括小于或等于第一阈值的信号强度、小于或等于第二阈值的信号传输速率、大于或等于第三阈值的信号传输时延、小于或等于第四阈值的网络数据接收成功率、大于或等于第五阈值的丢包率、大于或等于第六阈值的网络抖动和信号受到干扰的结果。

优选地,所述确定模块还用于:

将服务质量不合格的服务项目作为异常服务项目,确定各OTT对应的服务项目中异常服务项目所占的第一比例,将第一比例大于预设比例的OTT作为待分析OTT,并确定各服务商提供的OTT中待分析OTT所占的第二比例,根据所述第一比例和/或所述第二比例对网络进行优化。

图6示例了一种电子设备的实体结构示意图,如图6所示,该电子设备可以包括:处理器(processor)601、通信接口(Communications Interface)602、存储器(memory)603和通信总线604,其中,处理器601,通信接口602,存储器603通过通信总线604完成相互间的通信。处理器601可以调用存储器603中的逻辑指令,以执行如下方法:获取待测试的服务项目,其中,服务项目包括通过互联网向用户提供的应用服务OTT中的至少一种业务;获取所述服务项目中的业务运行时,在终端监测到的网络数据和业务变化数据;根据所述网络数据和所述业务变化数据,确定对所述服务项目的服务质量进行测试的测试结果。

此外,上述的存储器603中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

进一步地,本发明实施例公开一种计算机程序产品,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行上述各方法实施例所提供的方法,例如包括:获取待测试的服务项目,其中,服务项目包括通过互联网向用户提供的应用服务OTT中的至少一种业务;获取所述服务项目中的业务运行时,在终端监测到的网络数据和业务变化数据;根据所述网络数据和所述业务变化数据,确定对所述服务项目的服务质量进行测试的测试结果。

另一方面,本发明实施例还提供一种非暂态可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各实施例提供的传输方法,例如包括:获取待测试的服务项目,其中,服务项目包括通过互联网向用户提供的应用服务OTT中的至少一种业务;获取所述服务项目中的业务运行时,在终端监测到的网络数据和业务变化数据;根据所述网络数据和所述业务变化数据,确定对所述服务项目的服务质量进行测试的测试结果。

以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。

通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

相关技术
  • OTT服务质量测试方法、装置、电子设备和存储介质
  • 基于Lottie的提示框生成方法、装置、电子设备及存储介质
技术分类

06120113031223