掌桥专利:专业的专利平台
掌桥专利
首页

一种性能数据统计的方法、系统、设备及可读存储介质

文献发布时间:2023-06-19 09:40:06


一种性能数据统计的方法、系统、设备及可读存储介质

技术领域

本申请涉及性能数据统计领域,特别涉及一种性能数据统计的方法、系统、设备及可读存储介质。

背景技术

性能数据统计是存储区域网络(Storage Area Network,SAN)存储信息管理的重要组成部分,性能数据统计对SAN存储体系中主业务系统的实时检测、性能监控、均衡负载等方面起到重要作用,用于保证存储主业务的正常工作,有助于挖掘资源的潜力,进而提高整个存储体系的性能。

然而,现有的性能数据收集方法给存储系统带来了过量的通信量,增加了存储系统的存储负担以及性能开销,导致存储系统所提供的主要业务功能受到影响。

因此,如何降低性能数据收集对存储系统提供的业务功能的影响是本领域技术人员目前需要解决的技术问题。

发明内容

本申请的目的是提供一种性能数据统计的方法、系统、设备及可读存储介质,用于降低性能数据收集对存储系统提供的业务功能的影响。

为解决上述技术问题,本申请提供一种性能数据统计的方法,该方法包括:

接收性能数据统计命令,并根据所述性能数据统计命令确定待统计性能数据的数据类型;

根据所述数据类型确定对应的统计时间间隔,并依据所述统计时间间隔向存储系统发送所述待统计性能数据的要求报文,以使所述存储系统返回对应的待统计性能数据;

根据接收到的所述待统计性能数据进行性能数据统计。

可选的,在依据所述统计时间间隔向存储系统发送所述待统计性能数据的要求报文之后,在根据接收到的所述待统计性能数据进行性能数据统计之前,还包括:

判断是否接收到存储系统返回的所述待统计性能数据;

若是,则执行根据接收到的所述待统计性能数据进行性能数据统计的步骤;

若否,则禁止向存储系统发送下一个待统计性能数据的要求报文,直至接收到存储系统返回的所述待统计性能数据。

可选的,在依据所述统计时间间隔向存储系统发送所述待统计性能数据的要求报文之后,在根据接收到的所述待统计性能数据进行性能数据统计之前,还包括:

判断在所述统计时间间隔内是否接收到存储系统返回的所述待统计性能数据;

若是,则在当前统计时间间隔内根据接收到的所述待统计性能数据进行性能数据统计;

若否,则在下一个统计时间间隔内根据接收到的所述待统计性能数据进行性能数据统计。

可选的,所述根据接收到的所述待统计性能数据进行性能数据统计,包括:

清空上一次性能数据统计的性能数据列表;

根据接收到的所述待统计性能数据对所述性能指标列表进行填充,以完成此次性能数据统计。

可选的,在根据接收到的所述待统计性能数据对所述性能指标列表进行填充之后,还包括:

将填充完成的性能指标列表进行对外显示或写入日志文件。

可选的,还包括:

接收输入的修改命令,并根据所述修改命令确定待修改数据类型;

执行所述修改命令对所述待修改数据类型的统计时间间隔进行修改。

可选的,所述待统计性能数据的数据类型包括阈值报警数据、实时记录数据、历史记录数据、自动更新数据中的至少一项。

本申请还提供一种性能数据统计的系统,该系统包括:

第一接收模块,用于接收性能数据统计命令,并根据所述性能数据统计命令确定待统计性能数据的数据类型;

确定模块,用于根据所述数据类型确定对应的统计时间间隔,并依据所述统计时间间隔向存储系统发送所述待统计性能数据的要求报文,以使存储系统返回对应的待统计性能数据;

性能数据统计模块,用于根据接收到的所述待统计性能数据进行性能数据统计。

本申请还提供一种性能数据统计设备,该性能数据统计设备包括:

存储器,用于存储计算机程序;

处理器,用于执行所述计算机程序时实现如上述任一项所述性能数据统计的方法的步骤。

本申请还提供一种可读存储介质,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上述任一项所述性能数据统计的方法的步骤。

本申请所提供性能数据统计的方法,包括:接收性能数据统计命令,并根据性能数据统计命令确定待统计性能数据的数据类型;根据数据类型确定对应的统计时间间隔,并依据统计时间间隔向存储系统发送待统计性能数据的要求报文,以使存储系统返回对应的待统计性能数据;根据接收到的待统计性能数据进行性能数据统计。

本申请所提供的技术方案,通过根据待统计性能数据的数据类型确定对应的统计时间间隔,并依据统计时间间隔向存储系统发送待统计性能数据的要求报文,进而完成性能数据的统计,使得因性能数据收集而带来的额外通信量并没有明显地增加网络的负担,相比于现有技术极大的降低了存储系统的存储负担以及性能开销,进而降低了对存储系统所提供的主要业务功能的影响。本申请同时还提供了一种性能数据统计的系统、设备及可读存储介质,具有上述有益效果,在此不再赘述。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。

图1为本申请实施例所提供的一种性能数据统计的方法的流程图;

图2为本申请实施例所提供的一种性能数据统计的系统的结构图;

图3为本申请实施例所提供的一种性能数据统计设备的结构图。

具体实施方式

本申请的核心是提供一种性能数据统计的方法、系统、设备及可读存储介质,用于降低性能数据收集对存储系统提供的业务功能的影响。

为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。

请参考图1,图1为本申请实施例所提供的一种性能数据统计的方法的流程图。

其具体包括如下步骤:

S101:接收性能数据统计命令,并根据性能数据统计命令确定待统计性能数据的数据类型;

基于在现有技术中,一些系统的性能数据收集带来了过量的额外通信量,导致了存储主要业务的负担的增加,并且给系统增加了太多的不必要开销,使得存储系统所提供的主要业务被影响,从而导致效率低下;故本申请提供了一种性能数据统计的方法,用于解决上述问题;

可选的,这里提到的待统计性能数据的数据类型可以包括阈值报警数据、实时记录数据、历史记录数据、自动更新数据中的至少一项,其中:

阈值报警数据为系统在运行时根据设定的阈值检查这类数据相应性能参数的值,若发现有超出阈值则向用户报警。用户可以在相应客户端添加、删除阈值报警数据如虚拟卷或者物理存储器逻辑单元的使用率,或者改变某个数据对象的阈值;

历史记录数据为在系统运行时按照系统或用户设定的时间间隔输出到历史日志文件,这类历史记录对象的划分单位可以为虚拟卷、物理存储器逻辑单元、容器和节点;

实时记录数据在系统运行时按照系统或用户指定的刷新频率用可观的性能曲线等方式几乎实时地传达。用户可以在客户端添加和删除需要感知的一些实时需要的数据如虚拟卷、物理存储器逻辑单元层的iops、带宽或者时延,这类实时记录对象的划分单位是虚拟卷、物理存储器逻辑单元、容器和节点;

自动更新数据为所有不属于上述的其他记录数据,这类数据不向用户通报,用于跟踪系统运行时的可能异常状态;

上述监视数据的重要性依次为:

阈值报警数据>实时记录数据>历史记录数据>自动更新数据

可选的,在一个具体实施例中,可以根据上述数据对象的类别规定四种数据对象的更新间隔分别为:

阈值监视数据:1s~5s,此类数据约占所有数据量的5%;

实时记录数据:3s~5s,此类数据约占所有数据量的10%;

历史记录数据:30s~120s,此类数据约占所有数据量的60%;

自动更新数据:15min、30min、60min,此类数据约占所有数据量的25%。

S102:根据数据类型确定对应的统计时间间隔,并依据统计时间间隔向存储系统发送待统计性能数据的要求报文,以使存储系统返回对应的待统计性能数据;

可选的,为了进一步降低性能数据收集对存储系统提供的业务功能的影响,还可以通过在前一次数据请求报文的性能数据获取到之前,不发送后一次数据请求报文的方式来分散数据请求报文的发送时间,即在依据统计时间间隔向存储系统发送待统计性能数据的要求报文之后,在根据接收到的待统计性能数据进行性能数据统计之前,还可以执行如下步骤:

判断是否接收到存储系统返回的待统计性能数据;

若是,则执行根据接收到的待统计性能数据进行性能数据统计的步骤;

若否,则禁止向存储系统发送下一个待统计性能数据的要求报文,直至接收到存储系统返回的待统计性能数据。

可选的,为了进一步降低性能数据收集对存储系统提供的业务功能的影响,在一个周期内如果有性能数据没有收集完时,还可以通过将该数据延迟至下个周期再统计的方式来分散数据请求报文的发送时间,即在依据统计时间间隔向存储系统发送待统计性能数据的要求报文之后,在根据接收到的待统计性能数据进行性能数据统计之前,还可以执行如下步骤:

判断在统计时间间隔内是否接收到存储系统返回的待统计性能数据;

若是,则在当前统计时间间隔内根据接收到的待统计性能数据进行性能数据统计。

若否,则在下一个统计时间间隔内根据接收到的待统计性能数据进行性能数据统计。

可选的,在一个具体实施例中,还可以对性能收集对象在每次获取数据之前加读锁,获取完之后释放锁,进而实现每个周期内只能获取一次该对象的性能数据,进而进一步降低性能数据收集对存储系统提供的业务功能的影响。

可选的,在一个具体实施例中,还可以通过对虚拟卷、物理存储器逻辑单元、容器和节点中的性能数据进行并行收集处理,进而进一步降低性能数据收集对存储系统提供的业务功能的影响。

S103:根据接收到的待统计性能数据进行性能数据统计。

可选的,这里提到的,根据接收到的待统计性能数据进行性能数据统计,其具体可以为:

清空上一次性能数据统计的性能数据列表;

根据接收到的待统计性能数据对性能指标列表进行填充,以完成此次性能数据统计。

可选的,在根据接收到的待统计性能数据对性能指标列表进行填充之后,还可以将填充完成的性能指标列表进行对外显示或写入日志文件,进而实现对性能数据统计结果的展示和保存。

可选的,由于性能数据的种类和数量能够随系统和集群状态变动而变化,因此为满足用户自定义的设置来对不同类型的数据对象调整时间间隔,还可以执行如下步骤:

接收输入的修改命令,并根据修改命令确定待修改数据类型;

执行修改命令对待修改数据类型的统计时间间隔进行修改。

基于上述技术方案,本申请所提供的一种性能数据统计的方法,通过根据待统计性能数据的数据类型确定对应的统计时间间隔,并依据统计时间间隔向存储系统发送待统计性能数据的要求报文,进而完成性能数据的统计,使得因性能数据收集而带来的额外通信量并没有明显地增加网络的负担,相比于现有技术极大的降低了存储系统的存储负担以及性能开销,进而降低了对存储系统所提供的主要业务功能的影响。

请参考图2,图2为本申请实施例所提供的一种性能数据统计的系统的结构图。

该系统可以包括:

第一接收模块100,用于接收性能数据统计命令,并根据性能数据统计命令确定待统计性能数据的数据类型;

确定模块200,用于根据数据类型确定对应的统计时间间隔,并依据统计时间间隔向存储系统发送待统计性能数据的要求报文,以使存储系统返回对应的待统计性能数据;

性能数据统计模块300,用于根据接收到的待统计性能数据进行性能数据统计。

在上述实施例的基础上,在一个具体实施例中,该系统还可以包括:

第一判断模块,用于判断是否接收到存储系统返回的待统计性能数据;

执行模块,用于当接收到存储系统返回的待统计性能数据时,执行根据接收到的待统计性能数据进行性能数据统计的步骤;

禁止模块,用于当未接收到存储系统返回的待统计性能数据时,禁止向存储系统发送下一个待统计性能数据的要求报文,直至接收到存储系统返回的待统计性能数据。

在上述实施例的基础上,在一个具体实施例中,该系统还可以包括:

第二判断模块,用于判断在统计时间间隔内是否接收到存储系统返回的待统计性能数据;

第一统计模块,用于当在统计时间间隔内接收到存储系统返回的待统计性能数据时,在当前统计时间间隔内根据接收到的待统计性能数据进行性能数据统计。

第二统计模块,用于当在统计时间间隔内未接收到存储系统返回的待统计性能数据时,在下一个统计时间间隔内根据接收到的待统计性能数据进行性能数据统计。

在上述实施例的基础上,在一个具体实施例中,该性能数据统计模块300可以包括:

清空子模块,用于清空上一次性能数据统计的性能数据列表;

填充子模块,用于根据接收到的待统计性能数据对性能指标列表进行填充,以完成此次性能数据统计。

在上述实施例的基础上,在一个具体实施例中,该性能数据统计模块300还可以包括:

显示或写入子模块,用于将填充完成的性能指标列表进行对外显示或写入日志文件。

在上述实施例的基础上,在一个具体实施例中,该系统还可以包括:

第二接收模块,用于接收输入的修改命令,并根据修改命令确定待修改数据类型;

修改模块,用于执行修改命令对待修改数据类型的统计时间间隔进行修改。

在上述实施例的基础上,在一个具体实施例中,待统计性能数据的数据类型可以包括阈值报警数据、实时记录数据、历史记录数据、自动更新数据中的至少一项。

由于系统部分的实施例与方法部分的实施例相互对应,因此系统部分的实施例请参见方法部分的实施例的描述,这里暂不赘述。

请参考图3,图3为本申请实施例所提供的一种性能数据统计设备的结构图。

该性能数据统计设备400可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(central processing units,CPU)422(例如,一个或一个以上处理器)和存储器432,一个或一个以上存储应用程序442或数据444的存储介质430(例如一个或一个以上海量存储设备)。其中,存储器432和存储介质430可以是短暂存储或持久存储。存储在存储介质430的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对装置中的一系列指令操作。更进一步地,处理器422可以设置为与存储介质430通信,在性能数据统计设备400上执行存储介质430中的一系列指令操作。

性能数据统计设备400还可以包括一个或一个以上电源424,一个或一个以上有线或无线网络接口450,一个或一个以上输入输出接口458,和/或,一个或一个以上操作系统441,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等等。

上述图1所描述的性能数据统计的方法中的步骤由性能数据统计设备基于该图3所示的结构实现。

所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。

在本申请所提供的几个实施例中,应该理解到,所揭露的装置、设备和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。

作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。

另外,在本申请各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。

集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,功能调用装置,或者网络设备等)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上对本申请所提供的一种性能数据统计的方法、系统、设备及可读存储介质进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以对本申请进行若干改进和修饰,这些改进和修饰也落入本申请权利要求的保护范围内。

还需要说明的是,在本说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、物品或者设备中还存在另外的相同要素。

相关技术
  • 一种性能数据统计的方法、系统、设备及可读存储介质
  • 风控数据统计方法、系统、计算机设备及可读存储介质
技术分类

06120112256619