掌桥专利:专业的专利平台
掌桥专利
首页

一种基于大数据的企业运行数据监测系统

文献发布时间:2024-04-18 20:01:55


一种基于大数据的企业运行数据监测系统

技术领域

本发明涉及企业数据监测技术领域,具体是一种基于大数据的企业运行数据监测系统。

背景技术

随着互联网技术的不断更新换代,企业所面临的数据处理的任务并发量也越发庞大,对企业运行数据的管理也成了一个棘手的问题,传统的企业运行数据监测系统对于访问量过大的情况没有很好的应对办法,间接造成了云端服务器的负载过大,如何对多个数据同时进行封装,加快数据封装的速度,对于企业中用户对企业运行数据的错误操作和正确操作没有相应的规范行为,用户的操作权限一成不变,对于产生问题的企业运行数据,及时有效的进行责任的定位追踪也是一个难题,以上这些问题都是在企业运行监测中亟须解决的问题。

发明内容

为了解决上述问题,本发明的目的在于提供一种基于大数据的企业运行数据监测系统。

本发明的目的可以通过以下技术方案实现:一种基于大数据的企业运行数据监测系统,包括监测中心,所述监测中心通信连接有数据采集模块、数据处理模块、决策生成模块以及责任追踪模块;

所述数据采集模块通过建立永久数据采集空间进行自身企业运行数据的采集,建立临时数据交互空间采集其他企业的企业运行数据;

所述数据处理模块将自身企业运行数据封装为测试集,将其他企业的企业运行数据封装为实验集,测试集和实验集进行匹配生成不同的决策系数;

所述决策生成模块获取决策系数,设置决策区间,根据决策系数落定在不同的决策区间生成对应的决策方案,所述决策方案关联有对应的查阅权限,通过查阅权限获取决策方案并记录查阅操作生成访问日志,根据访问日志对查阅权限进行限制;

所述责任追踪模块设置有信息摄录单元、责任生成单元、责任认定单元以及责任追踪单元;所述信息摄录单元获取访问日志所包括的日志内容信息;所述责任生成单元和责任认定单元用于生成责任相关信息;所述责任追踪单元用于将责任相关信息追踪至不同的责任人处。

进一步的,所述数据采集模块采集自身企业运行数据和其他企业的企业运行数据的过程包括:

建立永久数据采集空间采集自身企业运行数据,建立临时数据交互空间采集其他企业的企业运行数据,在临时数据交互空间内生成一个数据抓取信号并关联携带一个访问证明ID,封装生成一个数据文件集合并发送至所设置的云端服务器处;解构出数据抓取信号后,则将云端服务器所存储的其他企业的企业运行数据压缩成数据流,并建立通信通道将数据流传输至临时数据交互空间。

进一步的,所述数据处理模块封装测试集和实验集的过程包括:

将自身企业运行数据和其他企业的企业运行数据分割为若干个数据单元段,并对数据单元段赋予标记类型和进行标号,设置封装间隔、初始封装点位以及后置封装点位,并入若干个数据单元段生成若干个实验子集和测试子集,根据若干个测试子集生成测试集,根据若干个实验子集生成实验集。

进一步的,所述决策系数生成的过程包括:

所述其他企业的企业运行数据包括若干个企业点检选项,所述企业点检选项包括有企业运行数据的不同数据运行状态,数据运行状态通过状态运行值与预设的标准数据范围进行比较来限定,企业点检选项不同的数据运行状态有对应的特性曲线绘制系数范围,每个所述特性曲线绘制系数范围内有若干个绘制点位,依次连接若干个绘制点位形成企业运行数据特性曲线;所述测试集映射生成有对应的数据文本集合,根据数据文本集合构建自身企业运行数据特性曲线,将企业运行数据特性曲线和自身企业运行数据特性曲线进行重合比对,得到重合系数,根据重合系数获取重合系数均值并作为测试集和实验集的决策系数。

进一步的,所述决策方案生成的过程包括:

所述决策生成模块获取决策系数,并设置决策区间,根据决策系数落定在不同的决策区间生成对应的决策方案,设置的决策区间包括独立决策区间、协商决策区间以及协同决策区间;

不同决策类型的决策区间有对应的区间跨度值,根据决策系数与区间跨度值的从属关系生成不同的决策方案。

进一步的,根据所述访问日志对查阅权限进行限制的过程包括:

所述决策方案关联有对应的查阅权限,所述查阅权限包括临时查看权限和永久查看权限,临时查看权限规定在所设置的查阅时间内才能进行查阅,且对查阅操作有相应的限制;所述永久查看权限不对查阅时间作出限制,通过查阅权限获取决策方案时,记录相应的查阅操作的操作状态,所述操作状态包括合法状态以及违规状态,分别记录通过查阅权限进行查阅操作的合法状态和违规状态的次数,设置查阅转换阈值,并将查阅权限以及对应的操作状态、查阅转换阈值和决策方案合并生成访问日志,根据访问日志进行查阅权限的变更。

进一步的,所述信息摄录单元获取日志内容信息的过程包括:

所述日志内容信息包括日志生成时间、日志类型、操作详情以及安全相关信息,所述日志类型包括加密日志和公开日志,若获取到加密日志,则信息摄录单元向监测中心发送解密钥获取指令,监测中心通过无线传输将解密钥传输至信息摄录单元,信息摄录单元获取解密钥对加密日志进行解密,解密后将加密日志存储至所设置的存储区域内;若获取到的日志类型为公开日志,则直接将公开日志存储至信息摄录单元的存储区域。

进一步的,所述责任相关信息生成的过程包括:

根据访问日志构建责任报表,所述责任报表录入操作详情和安全相关信息,操作详情包括操作对象和操作内容,若操作对象不处于所设置的操作对象白名单内,则标记该操作对象为非法对象,若操作内容与所设置的标准操作许可内容不一致,标记该操作内容为非法操作内容;所述安全相关信息有对应的安全限定值,并包括若干个安全系数,若干个安全系数的总和若大于等于安全限定值,则将安全相关信息标记为异常信息,否则,不标记异常信息,将所述责任报表输入至责任认定单元生成责任相关信息;所述责任相关信息包括责任内容信息、责任人信息以及责任安全信息,所述责任内容信息根据非法操作内容生成,所述责任人信息根据非法对象生成,所述责任安全信息根据异常信息生成。

进一步的,所述责任追踪单元将责任相关信息追踪至不同的责任人的过程包括:

获取责任人信息,所述责任人信息包括责任人联系电话、责任人编号以及责任人所属企业;将责任人联系电话标记为责任追踪电话,责任人编号作为待追踪索引,获取责任相关信息中的责任内容信息和责任安全信息并生成责任事件,所述责任事件设置不同的优先级,根据优先级的先后顺序,汇总责任追踪电话、待追踪索引以及责任人所属企业生成责任定向源,将责任事件推送至责任定向源处。

与现有技术相比,本发明的有益效果是:

1、临时数据交互空间设置有交互时间,在交互时间内数据抓取信号和访问证明ID存在并生效,交互时间结束后,数据抓取信号和访问证明ID被同步销毁;对数据的获取限定了一个条件,对于其他企业的企业运行数据进行采集,采用临时数据交互空间的方式,达到所设置时间则销毁,减小了系统的开销负荷,在云端服务器抓取其他企业的企业运行数据时,通过判断数据读写区域是否存在访问证明ID来限制运行状态,运行状态包括“进行态”和“空闲态”,“进行态”下,数据抓取开始,禁止其他访问者继续在该时间内进行数据抓取,在“空闲态”下,则允许其他访问者进行云端服务器的访问,减小了云端服务器的访问过载的可能性,提高数据抓取效率,此外,采集的其他企业的企业运行数据为与该自身企业运行数据相同企业类型的企业数据,且公开存储在云端服务器,其他企业的企业运行数据已经有对应的企业运行状态和对应的决策方案,二者各自生成数据特性曲线,通过比对二者数据特性曲线的重合度来直接获取当前的企业运行数据的运行状态和决策方案,一定程度上减少了直接对自身企业运行数据处理带来的工作量;

2、数据处理模块每并入一个数据单元段都需对其进行重复值剔除、数据清洗以及格式统一转换,格式统一转换是封装的前置条件,封装间隔设置的数值越大,则同时进行封装的数据单元段数目越多,提高了数据封装的速度;

3、实现对查阅权限的变更,保证了错误操作过多的用户得到限制,正确操作的用户则可以获得查阅权限等级的提升,设置摄录临界周期,记为T

4、通过责任追踪模块生成责任事件,所述责任事件设置不同的优先级,责任事件的处理顺序按优先级先后顺序进行处理,提升了责任追踪的效率,并对企业运行数据中存在的问题及时定位并解决,减少了企业运行所存在的隐患问题。

附图说明

图1为本发明的原理图。

图2为本发明责任追踪模块的结构示意图。

具体实施方式

如图1和图2所示,一种基于大数据的企业运行数据监测系统,包括监测中心,所述监测中心通信连接有数据采集模块、数据处理模块、决策生成模块以及责任追踪模块;

所述数据采集模块通过建立永久数据采集空间进行自身企业运行数据的采集,建立临时数据交互空间采集其他企业的企业运行数据;

所述数据处理模块将自身企业运行数据封装为测试集,将其他企业的企业运行数据封装为实验集,测试集和实验集进行匹配生成不同的决策系数;

所述决策生成模块获取决策系数,设置决策区间,根据决策系数落定在不同的决策区间生成对应的决策方案,所述决策方案关联有对应的查阅权限,通过查阅权限获取决策方案并记录查阅操作生成访问日志,根据访问日志对查阅权限进行限制;

所述责任追踪模块设置有信息摄录单元、责任生成单元、责任认定单元以及责任追踪单元;所述信息摄录单元获取访问日志所包括的日志内容信息;所述责任生成单元和责任认定单元用于生成责任相关信息;所述责任追踪单元用于将责任相关信息追踪至不同的责任人处。

具体的,所述数据采集模块采集自身企业运行数据和其他企业的企业运行数据的过程包括:

所述数据采集模块采集到的数据信息包括自身企业运行数据以及其他企业的企业运行数据;

需要说明的是,所述自身企业运行数据关联有对应的企业类型,通过临时数据交互空间所采集到的其他企业的企业运行数据,也为与自身企业运行数据企业类型相同的企业数据,且为已经公开可被获取的作为参考的企业数据,公开之后的企业数据保存在云端服务器处,其他企业的企业运行数据是经过监测的,有对应的企业点检选项,而企业点检选项包括了企业运行数据的不同数据运行状态;

对自身企业运行数据通过在数据采集模块建立永久数据采集空间的方式进行采集,所述永久数据采集空间设置有数据识别区,对其他企业的企业运行数据的采集则通过建立临时数据交互空间的方式进行;

所述数据采集模块建立临时数据交互空间后,同步在临时数据交互空间内生成一个数据抓取信号,标记为P-Craw,所述数据抓取信号P-Craw关联携带一个访问证明ID,封装数据抓取信号P-Craw和访问证明ID,生成一个数据文件集合,并将数据文件集合发送至互联网处所设置的云端服务器处;

所述云端服务器获取数据文件集合并进行解构,解构出数据抓取信号后,则将云端服务器所存储的其他企业的企业运行数据压缩成数据流,并建立通信通道将数据流传输至临时数据交互空间;

所述访问证明ID写入云端服务器所设置的数据读写区域,所述数据读写区域设置有两种运行状态,分别为“进行态”和“空闲态”,数据读写区域读取到访问证明ID时,将运行状态设置为“进行态”,否则,设置为“空闲态”;

需要说明的是,企业运行数据为各种与企业运营相关的数据信息,其包括财务数据、生产数据、运营数据以及IT数据,财务数据包括企业若干项财务指标,生产数据包括生产效率、生产成本、生产量以及产品质量等数据,运营数据包括运营效率、物流配送、供应链管理以及库存管理等数据,IT数据包括IT系统使用情况、数据安全和IT服务质量等IT相关数据。

需要进一步说明的是,临时数据交互空间设置有交互时间,记为T

设置转移周期T

具体的,所述数据处理模块封装测试集和实验集的过程包括:

获取数据库内存储的自身企业运行数据和其他企业的企业运行数据,所述自身企业运行数据和其他企业的企业运行数据被分割为若干个数据单元段;

根据自身企业运行数据分割出的数据单元段,赋予标记类型A,根据其他企业的企业运行数据分割出的数据单元段,赋予标记类型B;

对所述标记类型A的数据单元段标号为i,有i=1,2,3,……,n,n为自然数,且n>0,对所述标记类型B的数据单元段标号为j,有j=1,2,3,……,m,m为自然数,且m>0;

设置封装间隔,记为N,N为大于0的自然数,以标号为i=1或j=1的数据单元段分别作为初始封装点位,对封装间隔N进行减一操作,继续并入后续N-1个数据单元段作为后置封装点位,直至N=0,停止并入数据单元段;

根据初始封装点位和N-1个后置封装点位分别生成(n/N)+G个测试子集和(m/N)+G个实验子集,其中以标号i=1作为初始封装点位的封装结果为测试子集,标号j=1作为初始封装点位的封装结果则为实验子集;

汇总若干个生成的测试子集生成测试集,汇总若干个生成的实验子集生成实验集;

需要说明的是,G为取整系数,当n/N或m/N的结果为整数时,G的取值为0,否则,G的取值为1,每并入一个数据单元段都需对其进行重复值剔除、数据清洗以及格式统一转换,通过数据清洗剔除采集到的无关信息,格式统一转换是封装的前置条件,封装间隔N设置的数值越大,则同时进行封装的数据单元段数目越多,提高了数据封装的速度;

具体的,所述决策系数生成的过程包括:

所述实验集表示其他企业的企业运行数据,所述其他企业的企业运行数据包括若干个企业点检选项,所述企业点检选项包括有企业运行数据的不同数据运行状态;

所述数据运行状态包括“低荷运行态”“适载运行态”以及“过载运行态”,数据运行状态代表了其他企业的企业运行数据的总体运行负荷情况,不同的运行负荷情况则反映了企业运行数据是否存在异常,以及异常对应的程度级别;

其中,“低荷运行态”和“过载运行态”都为存在异常的运行负荷情况,而“适载运行态”则为正常的运行负荷情况,数据运行状态有对应的状态运行值,状态运行值为其他企业的企业运行数据在对应设置的数据库中存储时,数据库进行查询优化时的优化速率,进行数据检索时的检索速率,进行数据传输时的传输速率所生成;

根据优化速率、检索速率以及传输速率的数值累加并取平均后,生成相应的状态运行值,其代表了数据库进行上述操作时的各项速率指标,用于直接衡量数据库的状态,并间接反映相关企业运行数据的情况;

所述数据运行状态通过状态运行值与预设的标准数据范围进行比较来限定,所述标准数据范围记为ψ=[α,β],将状态运行值标记为St;

若St∈ψ,则将数据运行状态标记为“适载运行态”;

所述企业点检选项不同的数据运行状态有对应的特性曲线绘制系数范围,其中,“低荷运行态”的特性曲线绘制系数范围标记为R

每个所述特性曲线绘制系数范围内有若干个绘制点位,R

所述绘制点位R

需要说明的是,根据若干个绘制点位相对应的数值,将数值满足相应特性曲线绘制系数范围内的绘制点位进行平滑曲线的连接处理,进而生成相应的企业运行数据特性曲线,企业运行数据特性曲线由其他企业的企业运行数据处理得到的数据运行状态一一对应,即不同的运行负荷情况有相应的企业运行数据特性曲线,而企业运行数据特性曲线代表了当前的其他企业的企业运行数据的整体运行情况,用于后续自身企业运行数据所生成的自身企业运行数据特性曲线的比对,从而确定自身企业运行数据的整体运行情况;

所述测试集映射生成有对应的数据文本集合,记为Text,所述数据文本集合Text表示自身企业运行数据的不同运行数值,每个所述不同运行数值有对应的绘制点位,记为P[k],其中k的取值范围为[1,+∞),且k为整数;

汇总若干个绘制点位P[k]依次用平滑的曲线连接,构建出测试集所对应的自身企业运行数据特性曲线,将企业运行数据特性曲线和自身企业运行数据特性曲线进行重合比对,得到重合系数,记为υ,设置重合比对的总次数,记为sum,得到sum次重合比对的重合系数均值,记为Ave,有Ave=υ/sum,将重合系数均值作为测试集和实验集的决策系数;

需要说明的是,通过将自身企业运行数据特性曲线与企业运行数据特性曲线进行重合比对,进而确定二者的重合程度,并得到重合系数,而企业运行数据特性曲线为已知数据,其经过数据处理分析后有对应的若干种决策方案,通过不同的重合系数来推断自身企业运行数据与其他企业的企业运行数据的匹配度,进而直接获取已知数据所对应的决策方案,跳过了对自身企业数据进行数据分析从而生成决策方案的流程;

具体的,所述决策方案生成的过程包括:

所述决策生成模块获取决策系数,并设置决策区间,根据决策系数落定在不同的决策区间生成对应的决策方案;

所述决策区间根据其他企业的企业运行数据所设置,将自身企业运行数据对应生成的决策系数与决策区间进行匹配,从而获取其他企业的企业运行数据对应的决策方案,其他企业的企业决策方案为经过数据处理分析后得到的决策方案;

所述决策区间由预设的决策程序所生成,决策程序通过获取其他企业的企业运行数据生成不同的决策区间,决策区间的区间取值范围设置为[0,1);

设置的决策区间包括独立决策区间、协商决策区间以及协同决策区间这三种不同的决策类型;

不同决策类型的决策区间有对应的区间跨度值,所述决策区间与区间跨度值的对应关系如下:

当决策区间的决策类型为独立决策区间时,其对应的区间跨度值记为Ω1,有Ω1=[0,0.3];

当决策区间的决策类型为协商决策区间时,其对应的区间跨度值记为Ω2,有Ω2=(0.3,0.7];

当决策区间的决策类型为协同决策区间时,其对应的区间跨度值记为Ω3,有Ω3=(0.7,1);

当Ave∈Ω1时,生成决策方案一;

当Ave∈Ω2时,生成决策方案二;

当Ave∈Ω3时,生成决策方案三;

不同的决策方案有对应的决策级别,所述决策级别包括决策级别一、决策级别二以及决策级别三,其中决策方案一对应决策级别一,决策方案二和决策方案三分别对应决策级别二和决策级别三;

决策级别的先后顺序为:决策级别一小于决策级别二,决策级别二小于决策级别三;

所述决策方案一由独立决策区间对应获取,其代表该决策方案由企业所包括的管理层个人所决定生成,对应企业运行数据的“低荷运行态”,决策方案二和决策方案三都是由管理层和企业其他人员共同敲定,对应企业运行数据的“过载运行态”;

具体的,根据所述访问日志对查阅权限进行限制的过程包括:

所述决策方案关联有对应的查阅权限,通过查阅权限获取决策方案并记录查阅操作生成访问日志,根据访问日志对查阅权限进行限制;

所述查阅权限包括临时查看权限和永久查看权限,临时查看权限规定在所设置的查阅时间内才能进行查阅,且对查阅操作有相应的限制,所述限制包括禁止下载、打印和更新决策方案;

所述永久查看权限不对查阅时间作出限制,且提供对决策方案的下载、打印和更新,以及允许将决策方案上传至云端服务器处,通过查阅权限获取决策方案时,记录相应的查阅操作的操作状态;

所述操作状态包括合法状态以及违规状态,分别记录通过查阅权限进行查阅操作的合法状态和违规状态的次数,分别记为D

获取访问日志,当D

需要说明的是,查阅时间设置为9:00—17:00,通过操作状态所对应合法状态和违规状态的设置,所述合法状态表示用户进行查阅访问日志的正确操作,所述违规状态为用户对访问日志进行查阅的错误操作,通过对正确操作和错误操作的次数统计,实现对查阅权限的变更,保证了错误操作过多的用户得到限制,正确操作的用户则可以获得查阅权限等级的提升,在等级上,临时查看权限小于永久查看权限。

具体的,所述信息摄录单元获取访问日志所包括的日志内容信息的过程包括:

所述访问日志的日志内容信息包括日志生成时间、日志类型、操作详情以及安全相关信息;

所述信息摄录单元设置有识别区域,获取到的访问日志通过识别区域截获到访问日志的日志类型,所述日志类型包括加密日志和公开日志;

若获取到加密日志,则信息摄录单元向监测中心发送解密钥获取指令,监测中心通过无线传输将解密钥传输至信息摄录单元,信息摄录单元获取解密钥对加密日志进行解密,解密后将加密日志存储至所设置的存储区域内;

若获取到的日志类型为公开日志,则直接将公开日志存储至信息摄录单元的存储区域;

访问日志存储至存储区域后,同步将操作详情以及安全相关信息进行访问加密权限的关联,所述访问加密权限对应有访问密钥序列,获取访问密钥序列后,允许对操作详情以及安全相关信息进行读取;

设置摄录临界周期,记为T

需要说明的是,摄录临界周期代表了访问日志的最迟录入期限,通过获取当前访问时间和日志生成时间,计算是否达到摄录临界周期,若达到了,则设置最高优先级,将访问日志安排为优先录入的顺序;

具体的,所述责任生成单元和责任认定单元生成责任相关信息的过程包括:

将访问日志输入至责任生成单元后构建责任报表,所述责任报表录入日志内容信息中的操作详情和安全相关信息,所述操作详情包括操作对象和操作内容;

若操作对象不处于所设置的操作对象白名单内,则标记该操作对象为非法对象,若操作内容与所设置的标准操作许可内容不一致,标记该操作内容为非法操作内容;

所述安全相关信息有对应的安全限定值,记为Safe-Data,所述安全相关信息包括若干个安全系数,获取若干个安全系数的总和,记为Sum-Data,若Sum-Data≥Safe-Data,则将安全相关信息标记为异常信息,并将异常信息进行备份后上传至监测中心,若Sum-Data<Safe-Data,则不对安全相关信息进行标记为异常信息的处理;

将所述责任报表输入至责任认定单元,责任认定单元设置生物识别模组,所述生物识别模组预先录入管理员的生物识别特征,当管理员再次输入生物识别特征,并与生物识别模组录入的生物识别特征匹配成功后,则生成责任相关信息;

所述责任相关信息包括责任内容信息、责任人信息以及责任安全信息,所述责任内容信息根据非法操作内容生成,所述责任人信息根据非法对象生成,所述责任安全信息根据异常信息生成;

所述责任相关信息生成后上传至责任追踪单元;

具体的,所述责任追踪单元将责任相关信息追踪至不同的责任人的过程包括:

所述责任追踪单元获取责任相关信息,并同步获取责任相关信息中的责任人信息,所述责任人信息包括责任人联系电话、责任人编号以及责任人所属企业;

将责任人联系电话标记为责任追踪电话,责任人编号作为待追踪索引,获取责任相关信息中的责任内容信息和责任安全信息并生成责任事件;

所述责任事件设置不同的优先级,所述优先级包括一级优先级、二级优先级以及三级优先级,责任事件的处理顺序按照一级优先级、二级优先级以及三级优先级的先后顺序进行处理;

汇总责任追踪电话、待追踪索引以及责任人所属企业生成责任定向源,将责任事件推送至责任定向源处;

以上实施例仅用以说明本发明的技术方法而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方法进行修改或等同替换,而不脱离本发明技术方法精神和范围。

技术分类

06120116571353