数据稽核方法及装置、存储介质及电子设备

技术领域

本公开涉及计算机技术领域，尤其涉及一种数据稽核方法及装置、存储介质及电子设备。

背景技术

随着计算机技术和网络技术的发展，多个系统间交互的网络数据的数据量越来越庞大，为确保数据的准确性、完整性和一致性，数据稽核是必不可少的。

相关技术中，数据的采集、存储、应用在不同的系统实现，各系统数据质量指标、职责、流程和方案不清晰，难以进行统一的数据稽核。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开的目的在于提供一种数据稽核方法、装置、电子设备及存储介质，可以统一对待稽核数据的稽核流程进行配置，形成数据质量管理的端到端闭环。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

根据本公开的一个方面，提供一种数据稽核方法，包括：获取待稽核数据和针对待稽核数据的稽核指标；确定待稽核数据的来源节点和稽核指标对应的稽核规则；根据待稽核数据、来源节点、稽核指标和稽核规则，对待稽核数据进行数据稽核。

在本公开一个实施例中，待稽核数据包括网元数量；来源节点包括：性能处理系统、资源处理系统和采集控制系统；其中，根据待稽核数据、来源节点、稽核指标和稽核规则，对待稽核数据进行数据稽核，包括：向性能处理系统发送性能网元数量上报请求；向资源处理系统发送资源网元数量上报请求；向采集控制系统发送采控网元数量上报请求；接收性能处理系统返回的性能网元数量；接收资源处理系统返回的资源网元数量；接收采集控制系统返回的采控网元数量；根据性能网元数量、资源网元数量、采控网元数量和稽核规则进行数据稽核。

在本公开一个实施例中，稽核指标包括性能网元达标指标、资源网元达标指标和采控网元达标指标；其中，根据性能网元数量、资源网元数量、采控网元数量和稽核规则进行数据稽核，包括：根据性能网元数量确定性能网元达标指标的指标值；根据资源网元数量确定资源网元达标指标的指标值；根据采控网元数量确定采控网元达标指标的指标值；根据性能网元达标指标的指标值、资源网元达标指标的指标值、采控网元达标指标的指标值和稽核规则进行数据稽核。

在本公开一个实施例中，稽核规则中包括：性能网元达标阈值、资源网元达标阈值和采控网元达标阈值；其中，根据性能网元达标指标的指标值、资源网元达标指标的指标值、采控网元达标指标的指标值和稽核规则进行数据稽核，包括：将性能网元达标指标的指标值与性能网元达标阈值进行比较，将资源网元达标指标的指标值与资源网元达标阈值进行比较，将采控网元达标指标的指标值与采控网元达标阈值进行比较，以判断待稽核数据是否存在异常。

在本公开一个实施例中，数据稽核方法还包括：若待稽核数据存在异常，则生成数据质量问题工单；向运营调度系统发送数据质量问题工单。

在本公开一个实施例中，数据稽核方法还包括：获取稽核报告通告方式；生成数据稽核报告，并通过稽核报告通告方式对数据稽核报告进行通告。

在本公开一个实施例中，稽核规则包括记录数检查规则、关键指标总量规则、历史数据对比规则、值域判断及数据质量达标比例规则中的至少一项。

根据本公开的另一个方面，提供一种数据稽核装置，包括：获取模块，用于获取待稽核数据和针对待稽核数据的稽核指标；确定模块，用于确定待稽核数据的来源节点和稽核指标对应的稽核规则；稽核模块，用于根据待稽核数据、来源节点、稽核指标和稽核规则，对待稽核数据进行数据稽核。

根据本公开的又一个方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述的数据稽核方法。

根据本公开的再一个方面，提供一种电子设备，包括：处理器；以及存储器，用于存储所述处理器的可执行指令；其中，所述处理器配置为经由执行所述可执行指令来执行上述的数据稽核方法。

本公开的实施例所提供的数据稽核方法，能够统一设置待稽核数据的来源途径(来源节点)、与质量要求相关的稽核指标、用于检验稽核指标的指标值是否合规的稽核规则，因此可以统一地将多种途径获取到的稽核指标的指标值进行汇总存储，同时可以统一地根据稽核规则对指标值进行稽核比对；并且，在经过基于稽核规则的稽核分析后还可以输出数据质量的稽核报告和数据质量评估报告；此外，还可以在待稽核数据存在异常的情况下自动使用稽核报告通告方式进行通告，以对质量不合格的数据启动更改和校正，形成数据质量管理的端到端闭环。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了可以应用本公开实施例的数据稽核方法的示例性系统架构的示意图；

图2示出了本公开一个实施例的数据稽核方法的流程图；

图3示出了本公开一个实施例的数据稽核方法的交互示意图；

图4示出了本公开一个实施例的数据稽核方法中数据质量稽核系统的位置示意图；

图5示出了可以应用本公开实施例的数据稽核方法的数据质量稽核系统的系统架构示意图；

图6示出了本公开一个实施例的数据稽核装置的框图；和

图7示出本公开实施例中一种数据稽核计算机设备的结构框图。

具体实施方式

现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。

此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本公开的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。

图1示出了可以应用本公开实施例的数据稽核方法的示例性系统架构的示意图。

如图1所示，该系统架构可以包括服务器101、网络102和客户端103。网络102用以在客户端103和服务器101之间提供通信链路的介质。网络102可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

在示例性实施例中，与服务器101进行数据传输的客户端103可以包括但不限于智能手机、台式计算机、平板电脑、笔记本电脑、智能音箱、数字助理、AR(Augmented Reality，增强现实)设备、VR(Virtual Reality，虚拟现实)设备、智能可穿戴设备等类型的电子设备。可选的，电子设备上运行的操作系统可以包括但不限于安卓系统、IOS系统、linux系统、windows系统等。

服务器101可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN(Content Delivery Network，内容分发网络)、以及大数据和人工智能平台等基础云计算服务的云服务器。在一些实际应用中，服务器101也可以是网络平台的服务器，网络平台例如可以是交易平台、直播平台、社交平台或者音乐平台等，本公开实施例对此不作限定。其中，服务器可以是一台服务器，也可以是多台服务器形成的集群，本公开对于服务器的具体架构不做限定。

在一些实施例中，用户可以通过客户端103输入数据稽核请求，其中，数据稽核请求中可以包含有用户指定的待稽核数据和针对待稽核数据的稽核指标；服务器101可以接收该数据稽核请求，并基于该数据稽核请求确定待稽核数据的来源节点和稽核指标对应的稽核规则，然后根据待稽核数据、来源节点、稽核指标和稽核规则，对待稽核数据进行数据稽核。此外，在完成数据稽核后，服务器101还可以向客户端103返回数据稽核报告，或是在待稽核数据存在异常的情况下生成数据质量问题工单，然后向相关节点(如运营调度系统)发送数据质量问题工单。

在一些实施例中，服务器101用于实现数据稽核方法的过程可以是：服务器101获取待稽核数据和针对待稽核数据的稽核指标；服务器101确定待稽核数据的来源节点和稽核指标对应的稽核规则；服务器101根据待稽核数据、来源节点、稽核指标和稽核规则，对待稽核数据进行数据稽核。

此外，需要说明的是，图1所示的仅仅是本公开提供的数据稽核方法的一种应用环境。图1中的服务器101、网络102和客户端103的数目仅仅是示意性的，根据实际需要，可以具有任意数目的客户端、网络和服务器。

为了使本领域普通人员更好地理解本公开的技术方案，下面将结合附图及实施例对本公开示例实施例中的数据稽核方法的各个步骤进行更详细的说明。

图2示出了本公开一个实施例的数据稽核方法的流程图。本公开实施例提供的方法可以由如图1所示的服务器101或客户端103执行，但本公开并不限定于此。

在下面的举例说明中，以服务器101为执行主体进行示例说明。

如图2所示，本公开实施例提供的数据稽核方法可以包括以下步骤。

步骤S201，获取待稽核数据和针对待稽核数据的稽核指标。

本步骤中，待稽核数据可以是网络中产生的特定类型的数据对象，如流量数据、网元数量数据、消息数量数据等。待稽核数据可以是用户通过指定数据名称或数据筛选条件来获取，例如，用户可以指定将某些IP地址的流量数据作为待稽核数据，可以指定将涉及某些设备ID的流量数据作为待稽核数据。

稽核指标可以看作是对上述待稽核数据在不同维度上的数据质量要求，数据质量要求例如可以包括：完整性、及时性、有效性、一致性、唯一性、准确性等方面的要求，对于每一种待稽核数据可以要求一个或者多个数据质量要求。

在一些实施例中，稽核指标可以包括数据完整性指标、数据及时性指标、数据一致性指标、数据准确性指标等。

其中，可以预先配置好多种可选的数据类型或设置多种数据筛选条件，用户可以通过客户端上的操作界面从多种可选的数据类型中选出待稽核数据，或通过客户端上的操作界面对多种数据筛选条件进行设置，进而确定出待稽核数据。

类似地，也可以预先配置好多种可选的稽核指标，用户可以通过客户端上的操作界面从配置好的多种可选的稽核指标中选出针对待稽核数据的稽核指标。在用户操作完后，可以生成数据稽核请求，服务器可以通过解析数据稽核请求来获取待稽核数据和针对待稽核数据的稽核指标。在一些实际应用中，用户还可以设置各稽核指标的计算方式。此外，针对一种待稽核数据，可以设置一个或多个稽核指标，本公开对此不做限定。

步骤S203，确定待稽核数据的来源节点和稽核指标对应的稽核规则。

本步骤中，可以预先设置好多种可选的数据类型的数据来源，数据来源可以看作是获取数据的途径。针对不同的数据，可以由不同的数据来源，可以使用用户从预设的数据来源中选出的一个或多个作为待稽核数据的来源节点，若用户未指定，也可以是用为待稽核数据设置的所有数据来源作为待稽核数据的来源节点。

稽核规则可以看作是用于评判数据在稽核指标下的指标值是否符合规范或者是否异常的判断方式，稽核规则中可以包含一种或多种参数、参数与指标值的计算函数式以及根据函数值判断是否规范的方式，例如，稽核规则中可以包含阈值参数，以及包含阈值参数与指标值之间的大小关系对于待稽核数据是否规范的对应关系(如：若指标值大于阈值参数，则待稽核数据不规范)。在一些实施例中，稽核规则包括记录数检查规则、关键指标总量规则、历史数据对比规则、值域判断及数据质量达标比例规则中的至少一项。

在一些实际应用中，对于同一稽核指标，可以针对不同的待稽核数据设置不同的稽核规则，以使得这些不同的稽核规则能够适应于不同环境下产生的待稽核数据，从而可以对待稽核数据进行适应性稽核。

步骤S205，根据待稽核数据、来源节点、稽核指标和稽核规则，对待稽核数据进行数据稽核。

本步骤中，可以先根据待稽核数据和稽核指标为各个来源节点生成指标数据上报请求，使得各个来源节点各自对待稽核数据的指标原始信息进行统计并上报，其中，指标原始信息可以看作是用于计算稽核指标的指标值的信息。在接收到各个来源节点返回的指标原始信息后，可以根据指标原始信息计算与各个来源节点相关的稽核指标的指标值，然后使用稽核规则对来自不同来源节点的稽核指标的指标值分别进行数据稽核，以得到待稽核数据的稽核结果。

在一些实际应用中，在对待稽核数据进行数据稽核之后可以得到稽核结果，稽核结果可以是全部正常(全部合规)、大部分合规、异常、异常程度高等结果。对于不同的稽核结果可以设置不同的处理方式。

在一些实施例中，数据稽核方法还包括：获取稽核报告通告方式；生成数据稽核报告，并通过稽核报告通告方式对数据稽核报告进行通告。

其中，数据稽核报告可以包含对各项指标值的完整的稽核结果，例如可以得到来自各个来源节点的各项稽核指标的具体指标值、得出质量正常和异常的数据清单、得到基于各项稽核指标的指标值的数据质量评估报告。

稽核报告通告方式可以是用户通过客户端上的操作界面输入的指定的通告方式，也可以是默认的一种或多种通告方式，例如可以是通过邮件进行通告、通过短信进行通告、通过弹窗提醒进行通告、通过声音告警进行通告等。

在一些实施例中，数据稽核方法还包括：若待稽核数据存在异常，则生成数据质量问题工单；向相关节点发送数据质量问题工单。

其中，可以设置判断“待稽核数据存在异常”的标准，例如，若所有稽核指标的指标值中超过50％都不合规，则可以认为待稽核数据存在异常；或者，若超过50％的来源节点统计到的稽核指标的指标值都不合规，则可以认为待稽核数据存在异常。也即，若“待稽核数据存在异常”，可以认为是待稽核数据普遍不合规，因此此时可以生成数据质量问题工单并发送至相关节点(如运营调度系统)以进行问题排查，自动实现问题的发现、上报与解决。其中，进行问题排查的方式可以是自动使用预设的数据检验算法进行问题排查，也可以是通过人工介入的方式进行问题排查，本公开对此不做限定。

通过本公开提供的数据稽核方法，可以统一对待稽核数据的稽核流程进行配置，也即，能够：统一设置待稽核数据的来源途径(来源节点)、与质量要求相关的稽核指标、用于检验稽核指标的指标值是否合规的稽核规则，因此可以统一地将多种途径获取到的稽核指标的指标值进行汇总存储，同时可以统一地根据稽核规则对指标值进行稽核比对；并且，在经过基于稽核规则的稽核分析后还可以输出数据质量的稽核报告和数据质量评估报告；此外，还可以在待稽核数据存在异常的情况下自动使用稽核报告通告方式进行通告，以对质量不合格的数据启动更改和校正，形成数据质量管理的端到端闭环。

在一些实施例中，待稽核数据包括网元数量；来源节点包括：性能处理系统、资源处理系统和采集控制系统；基于此，步骤S205可以包括：向性能处理系统发送性能网元数量上报请求；向资源处理系统发送资源网元数量上报请求；向采集控制系统发送采控网元数量上报请求；接收性能处理系统返回的性能网元数量；接收资源处理系统返回的资源网元数量；接收采集控制系统返回的采控网元数量；根据性能网元数量、资源网元数量、采控网元数量和稽核规则进行数据稽核。

本实施例中，性能网元数量上报请求中可以包含对应于性能处理系统的子指标，以使得性能处理系统可以收集用于计算该子指标的指标值的原始数据，在一些实际应用中，性能网元数量上报请求可以是使得性能处理系统定时上报“性能文件包含网元数量”(即性能网元数量)这一信息。

资源网元数量上报请求中可以包含对应于资源处理系统的子指标，以使得资源处理系统可以收集用于计算该子指标的指标值的原始数据，在一些实际应用中，资源网元数量上报请求可以是使得资源处理系统定时上报“资源数据网元数量”(即资源网元数量)这一信息。

采控网元数量上报请求中可以包含对应于采集控制系统的子指标，以使得采集控制系统可以收集用于计算该子指标的指标值的原始数据，在一些实际应用中，采控网元数量上报请求可以是使得采集控制系统定时上报“NRF指令查询网元数量和采控纳管网元数量(即采控网元数量)”这一信息。

在一些实施例中，稽核指标包括性能网元达标指标、资源网元达标指标和采控网元达标指标；其中，根据性能网元数量、资源网元数量、采控网元数量和稽核规则进行数据稽核，包括：根据性能网元数量确定性能网元达标指标的指标值；根据资源网元数量确定资源网元达标指标的指标值；根据采控网元数量确定采控网元达标指标的指标值；根据性能网元达标指标的指标值、资源网元达标指标的指标值、采控网元达标指标的指标值和稽核规则进行数据稽核。

本实施例中，性能网元达标指标、资源网元达标指标和采控网元达标指标分别可以是前述实施例中与性能处理系统、资源处理系统和采集控制系统对应的子指标。

可以统一地将从性能处理系统、资源处理系统和采集控制系统处获取到的数据进行汇总，也即，可以将性能网元数量、资源网元数量、采控网元数量还有NRF指令查询网元数量进行汇总，然后可以根据汇总得到的数据进行指标值的计算。

在一些实际应用中，性能网元达标指标的指标值的计算方式可以是：

资源网元达标指标的指标值的计算方式可以是：

采控网元达标指标的指标值的计算方式可以是：

在一些实施例中，稽核规则中包括：性能网元达标阈值、资源网元达标阈值和采控网元达标阈值；其中，根据性能网元达标指标的指标值、资源网元达标指标的指标值、采控网元达标指标的指标值和稽核规则进行数据稽核，包括：将性能网元达标指标的指标值与性能网元达标阈值进行比较，将资源网元达标指标的指标值与资源网元达标阈值进行比较，将采控网元达标指标的指标值与采控网元达标阈值进行比较，以判断待稽核数据是否存在异常。

本实施例中，性能网元达标阈值、资源网元达标阈值和采控网元达标阈值可以是预先设置好的，可以在配置稽核规则时定义在稽核规则中。

在一些实施例中，数据稽核方法还包括：若待稽核数据存在异常，则生成数据质量问题工单；向运营调度系统发送数据质量问题工单。

本实施例中，可以根据对“待稽核数据是否存在异常”的判断结果设置不同的处理方式，例如，若均正常，则可以根据各指标值的计算结果生成数据稽核报告和质量评估报告；若一项或两项指标存在异常，则可以根据各指标值的计算结果生成数据稽核报告和质量评估报告，并根据异常的指标值生成异常数据清单；若三项指标均存在异常，则可以根据各指标值的计算结果生成数据稽核报告和质量评估报告，并根据异常的指标值生成数据质量问题工单，并将数据质量问题工单发送至运营调度系统以通过运营调度系统进行问题排查；在运营调度系统排查出问题后，还可以返回工单处理结果，进而对质量不合格的数据启动更改和校正，形成数据质量管理的端到端闭环。

图3示出了本公开一个实施例的数据稽核方法的交互示意图，如图3所示，包括：数据质量稽核系统3001、性能处理系统3002、资源处理系统3003、采集控制系统3004和运营调度系统3005之间的交互，具体的交互流程可以包括以下步骤。

步骤S301，数据质量稽核系统3001向性能处理系统3002分配子指标(定时上报：性能文件包含网元数量)；

步骤S303，数据质量稽核系统3001向资源处理系统3003分配子指标(定时上报：资源数据网元数量)；

步骤S305，数据质量稽核系统3001向采集控制系统3004分配子指标(定时上报数量1、NRF指令查询网元数量：2、采控纳管网元数量)；

步骤S307，性能处理系统3002向数据质量稽核系统3001进行在线网元数量统计上报；

步骤S309，资源处理系统3003向数据质量稽核系统3001进行网元资源数据上报；

步骤S311，采集控制系统3004向数据质量稽核系统3001进行采控管理网元数量上报；

步骤S313，数据质量稽核系统3001进行数据质量稽核比较、阈值判断；

步骤S315，数据质量稽核系统3001进行数据质量问题原因判定，该问题可以通过工单推动解决；

步骤S317，数据质量稽核系统3001向运营调度系统3005发送数据质量问题工单；

步骤S319，运营调度系统3005向数据质量稽核系统3001返回工单处理结果。

本实施例中，步骤S301～步骤S305的执行顺序可以不做限定，步骤S307～步骤S311执行顺序也可以不做限定。图3实施例的其它内容可以参照上述其它实施例。

在一些实际应用中，能够实现本公开提供的数据稽核方法的数据质量稽核系统，可以应用于新一代运营系统的应用场景，该数据质量稽核系统可以是新一代运营系统场景下的数据存储共享系统中的单独模块，也可以是新一代运营系统场景下的一个单独的系统。

图4示出了本公开一个实施例的数据稽核方法中数据质量稽核系统的位置示意图，如图4所示，数据质量稽核系统400可以是新一代运营系统场景下的数据存储共享系统中的单独模块。

图5示出了可以应用本公开实施例的数据稽核方法的数据质量稽核系统的系统架构示意图，如图5所示，数据质量稽核系统500的系统架构可以包括：数据质量指标管理501、数据质量稽核规则502、数据质量稽核服务管理503、数据质量指标获取504、数据质量统计报告505、数据问题处理流程506等主要模块，也可以包含异常处理、数据展示、流程展示等模块。在一些实施例中，通过本实施例中的系统架构来实现数据稽核方法可以包括以下步骤。

步骤一：在数据质量指标管理501中添加数据、数据来源、数据质量要求；其中，数据质量要求可以包括：完整性、及时性、有效性、一致性、唯一性、准确性等，对于每一个数据可以要求一个或者多个数据质量要求。

本步骤中，“数据”可以是指数据的具体名称，也可以是某些类型的数据，例如：按照设备ID、IP地址、流量等筛选条件确定出的某些类型的数据。

步骤二：数据质量稽核规则502可以实现规则管理功能，其中可以定义好相关的规则，包括记录数检查、关键指标总量、历史数据对比、值域判断及数据质量达标比例等规则。

本步骤中，历史数据对比的规则例如可以是：设备端口流量历史均值为1Gbps，出现设备流量为100Gbps，历史数据对比就认为这个数据不合理；值域判断的规则例如可以是：例如对于流量，可以设定只有0-100Gbps，超过就认为数据是错误的。

步骤三：在数据质量稽核服务管理503中可以创建和设置稽核任务，选择需要进行质量管控的指标和数据，并对数据模型中需要进行质量管控的数据添加指标和设置相应的质量规则(即步骤二中的规则)，设置输出统计报告的要求或者进行消息通知设置等，完成稽核任务编辑后进行保存并启动相应的稽核任务。

步骤四：稽核任务运行中，可以通过数据质量指标获取504结合多种途径(即数据来源)对数据进行获取，并通过数据质量统计报告505对数据质量进行稽核分析，得出质量异常的数据清单以及生成稽核报告和质量评估报告，如达到设定的相应的阈值启动数据问题处理流程。

本步骤中，对数据质量进行稽核分析，可以是：根据获取到的“数据”，通过指标的计算方式得到“指标值”，判断“指标值”是否符合“规则”；其中，若符合则数据正常，若不符合则数据异常。

数据清单中可以包括哪些数据具体存在的数据质量问题；类似地，稽核报告/质量评估报告中也可以包括哪些数据具体存在的数据质量问题、每天/周/月解决多少问题等。

此外，对于“如达到设定的相应的阈值启动数据问题处理流程”，可以理解为：对于不符合规则的情况，如果范围超过大，则启动问题处理流程，如果只有少量的不合规情况，则可以不处理；具体的范围可以根据实际需求或是实际的生产环境进行设置，本公开对此不做限定。

步骤五：数据问题处理流程506可以通过工单形式发送到相关节点系统(如相应的处理人操控的系统)处进行核查，以发现问题并解决问题，实现问题解决的闭环流程。其中，若涉及到历史数据的更改，还可以对历史数据进行更新。

继续参考图5，数据质量稽核系统500还可以与其他系统有如下交互。

定义指标：在数据指标定义时，需要设计对应的指标计算公式，计算公式中的各数据项需要进行管理，数据质量指标获取504的功能就是对各数据来源渠道和数据内容进行管理，为指标计算公式设计过程提供数据项的清单服务。

数据统计监控稽核：数据稽核的过程主要是通过对多种不同来源的数据进行计算操作以及进行比对，依据比对结果得出数据指标的值，用数据指标的值表示数据稽核项的质量情况。其中，“进行计算操作”具体可以是：根据指标计算公式计算出数据的各项指标值；“进行比对”具体可以是：判断指标值是否符合规则，也可以是：使用规则中的比对算法将指标值与规则中的阈值进行比对，以判断指标值是否符合规则。

数据指标出现异常时，需要及时上报事件，可以通过运营调度系统的工单触发处置流程的启动，并通过后继续的指标监控确定处置效果并记录处置情况。

需要注意的是，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

图6示出了本公开一个实施例的数据稽核装置600的框图；如图6所示，包括：获取模块601，用于获取待稽核数据和针对待稽核数据的稽核指标；确定模块602，用于确定待稽核数据的来源节点和稽核指标对应的稽核规则；稽核模块603，用于根据待稽核数据、来源节点、稽核指标和稽核规则，对待稽核数据进行数据稽核。

通过本公开提供的数据稽核装置，可以统一对待稽核数据的稽核流程进行配置，也即，能够：统一设置待稽核数据的来源途径(来源节点)、与质量要求相关的稽核指标、用于检验稽核指标的指标值是否合规的稽核规则，因此可以统一地将多种途径获取到的稽核指标的指标值进行汇总存储，同时可以统一地根据稽核规则对指标值进行稽核比对；并且，在经过基于稽核规则的稽核分析后还可以输出数据质量的稽核报告和数据质量评估报告；此外，还可以在待稽核数据存在异常的情况下自动使用稽核报告通告方式进行通告，以对质量不合格的数据启动更改和校正，形成数据质量管理的端到端闭环。

在一些实施例中，待稽核数据包括网元数量；来源节点包括：性能处理系统、资源处理系统和采集控制系统；其中，稽核模块603根据待稽核数据、来源节点、稽核指标和稽核规则，对待稽核数据进行数据稽核，包括：向性能处理系统发送性能网元数量上报请求；向资源处理系统发送资源网元数量上报请求；向采集控制系统发送采控网元数量上报请求；接收性能处理系统返回的性能网元数量；接收资源处理系统返回的资源网元数量；接收采集控制系统返回的采控网元数量；根据性能网元数量、资源网元数量、采控网元数量和稽核规则进行数据稽核。

在一些实施例中，稽核指标包括性能网元达标指标、资源网元达标指标和采控网元达标指标；其中，稽核模块603根据性能网元数量、资源网元数量、采控网元数量和稽核规则进行数据稽核，包括：根据性能网元数量确定性能网元达标指标的指标值；根据资源网元数量确定资源网元达标指标的指标值；根据采控网元数量确定采控网元达标指标的指标值；根据性能网元达标指标的指标值、资源网元达标指标的指标值、采控网元达标指标的指标值和稽核规则进行数据稽核。

在一些实施例中，稽核规则中包括：性能网元达标阈值、资源网元达标阈值和采控网元达标阈值；其中，稽核模块603根据性能网元达标指标的指标值、资源网元达标指标的指标值、采控网元达标指标的指标值和稽核规则进行数据稽核，包括：将性能网元达标指标的指标值与性能网元达标阈值进行比较，将资源网元达标指标的指标值与资源网元达标阈值进行比较，将采控网元达标指标的指标值与采控网元达标阈值进行比较，以判断待稽核数据是否存在异常。

在一些实施例中，数据稽核装置还包括发送模块604，若待稽核数据存在异常，则发送模块604用于：生成数据质量问题工单；向运营调度系统发送数据质量问题工单。

在一些实施例中，获取模块601还用于：获取稽核报告通告方式；稽核模块603还用于：生成数据稽核报告；发送模块604还用于：通过稽核报告通告方式对数据稽核报告进行通告。

在一些实施例中，稽核规则包括记录数检查规则、关键指标总量规则、历史数据对比规则、值域判断及数据质量达标比例规则中的至少一项。

图6实施例的其它内容可以参照上述其它实施例。

所属技术领域的技术人员能够理解，本发明的各个方面可以实现为系统、方法或程序产品。因此，本发明的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。

图7示出本公开实施例中一种数据稽核计算机设备的结构框图。需要说明的是，图示出的电子设备仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

下面参照图7来描述根据本发明的这种实施方式的电子设备700。图7显示的电子设备700仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图7所示，电子设备700以通用计算设备的形式表现。电子设备700的组件可以包括但不限于：上述至少一个处理单元710、上述至少一个存储单元720、连接不同系统组件(包括存储单元720和处理单元710)的总线730。

其中，所述存储单元存储有程序代码，所述程序代码可以被所述处理单元710执行，使得所述处理单元710执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的步骤。例如，所述处理单元710可以执行如图2中所示的方法。

存储单元720可以包括易失性存储单元形式的可读介质，例如随机存取存储单元(RAM)7201和/或高速缓存存储单元7202，还可以进一步包括只读存储单元(ROM)7203。

存储单元720还可以包括具有一组(至少一个)程序模块7205的程序/实用工具7204，这样的程序模块7205包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。

总线730可以为表示几类总线结构中的一种或多种，包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。

电子设备700也可以与一个或多个外部设备800(例如键盘、指向设备、蓝牙设备等)通信，还可与一个或者多个使得用户能与该电子设备700交互的设备通信，和/或与使得该电子设备700能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口750进行。并且，电子设备700还可以通过网络适配器760与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器760通过总线730与电子设备700的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备700使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

在本公开的示例性实施例中，还提供了一种计算机可读存储介质，其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施方式中，本发明的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在终端设备上运行时，所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的步骤。

根据本发明实施方式的用于实现上述方法的程序产品，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在终端设备，例如个人电脑上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。

计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。

应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

此外，尽管在附图中以特定顺序描述了本公开中方法的各个步骤，但是，这并非要求或者暗示必须按照该特定顺序来执行这些步骤，或是必须执行全部所示的步骤才能实现期望的结果。附加的或备选的，可以省略某些步骤，将多个步骤合并为一个步骤执行，以及/或者将一个步骤分解为多个步骤执行等。

通过以上的实施方式的描述，本领域的技术人员易于理解，这里描述的示例实施方式可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施方式的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、移动终端、或者网络设备等)执行根据本公开实施方式的方法。

根据本公开的一个方面，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述实施例的各种可选实现方式中提供的方法。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由所附的权利要求指出。