一种业务数据监测预警平台及预警方法

技术领域

本发明属于数据处理技术领域，涉及业务数据监测预警技术，具体是一种业务数据监测预警平台及预警方法。

背景技术

数据是对事实、概念或指令的一种表达形式，可由人工或自动化装置进行处理。数据经过解释并赋予一定的意义之后，便成为信息。数据处理是对数据的采集、存储、检索、加工、变换和传输。数据处理的基本目的是从大量的、可能是杂乱无章的、难以理解的数据中抽取并推导出对于某些特定的人们来说是有价值、有意义的数据。数据处理是系统工程和自动控制的基本环节。数据处理贯穿于社会生产和社会生活的各个领域。数据处理技术的发展及其应用的广度和深度，极大地影响了人类社会发展的进程。在日常工作中，我们经常能够见到业务数据。

在日常工作中，业务数据繁多且杂乱，其中更夹杂着虚假欺诈的业务信息，庞大的业务数据处理较为繁琐，无法剔除其中的垃圾信息，为此，我们提出一种业务数据监测预警平台及预警方法。

发明内容

针对现有技术存在的不足，本发明目的是提供一种业务数据监测预警平台及预警方法。

本发明所要解决的技术问题为：

如何有效剔除繁多且杂乱的业务数据中虚假欺诈的垃圾业务信息；如何实现业务数据高效性梳理。

本发明的目的可以通过以下技术方案实现：

一种业务数据监测预警平台，包括数据接发模块、数据传输模块、数据鉴定模块、数据圈定模块、数据分类模块、数据库和业务数据监测预警平台；

所述数据分类模块用于对业务数据监测预警平台接收到的业务数据进行数据分类，数据分类过程具体如下：

步骤S1：从接收到的业务数据中提取的发件人信息和业务数据，并将发件人信息和业务数据传输至业务数据监测预警平台进行匹配，并得到匹配结果；

步骤S2：若匹配结果提示为垃圾信息，则将业务数据标记为垃圾信息，若匹配结果提示为非垃圾信息，则将发件人信息与本地黑名单以及通讯录名单进行比对，若发件人信息与通讯录名单匹配，则将业务数据标记为普通信息，若与本地黑名单匹配，则将业务数据标记为垃圾信息，若发件人信息与本地黑名单以及通讯录名单均不匹配，则将业务数据标记为未知联系人信息；

步骤S3：读取普通信息中的具体内容；业务数据具体包括文本数据、图片数据、音影数据和其他数据；

所述数据圈定模块与数据库数据连接，所述数据库中还存储有已删除的信息、未知联系人信息；所述数据圈定模块根据数据分类模块的分类结果将接收到的业务数据进行圈定存储，圈定存储步骤具体如下：

步骤SS1：将垃圾信息直接传输至数据圈定模块，数据圈定模块将垃圾信息转存至设置有自动清理时间的文件夹下，文件夹达到自动清算时间时，数据圈定模块将文件夹内的垃圾信息进行清理；

步骤SS2：数据圈定模块对普通信息中的文本数据、图片数据和音影数据进行圈定存储，具体如下：

步骤SS21：数据圈定模块将大于设定阈值的图片数据压缩另存为对应的图片数据副本，并用图片数据副本替换普通信息中原有的图片数据，原有的图片数据上传至业务数据监测预警平台；

步骤SS22：数据圈定模块将大于设定阈值的音影数据中截取出一段不超设定阈值的音影数据副本，并用音影数据副本替换普通信息中原有的音影数据，原有的音影数据上传至业务数据监测预警平台；

步骤SS3：将未知联系人信息存储至临时文件夹，记录使用人员查看未知联系人信息的次数和对应的查看时间、未知联系人信息的删除时间；

步骤SS4：计算查看时间和删除时间之间的时间差值，若时间差值小于设定时间阈值，则该未知联系人信息的发件人信息标记为备选黑名单，若同一发件人信息被五次标记为备选黑名单后，将该发件人信息添加至本地黑名单中；若使用人员与同一发件人在二十四小时内的回复次数超过系统设定次数或总回复次数超过系统设定次数，则将该发件人信息标记为备选通讯录名单，并反馈询问使用人员是否对该发件人添加备注，备注添加完成后，将该发件人信息添加至通讯录名单；

步骤SS5：数据圈定模块将其他数据存储至临时文件夹。

进一步地，所述数据接发模块与业务数据监测预警平台通信连接；所述数据接发模块与数据传输模块通信连接；所述数据传输模块与业务数据监测预警平台通信连接；所述数据分类模块与业务数据监测预警平台通信连接，所述数据鉴定模块与业务数据监测预警平台；所述数据圈定模块与业务数据监测预警平台通信连接；所述数据圈定模块与数据库数据连接，所述数据库与业务数据监测预警平台数据连接。

进一步地，使用人员通过用户终端输入个人信息后注册登录业务数据监测预警平台，并将个人信息发送至业务数据监测预警平台内存储；所述个人信息包括姓名、手机号码、公司名称和公司职务；

所述数据接发模块用于使用人员接收和发送业务数据，并将业务数据传输至数据传输模块，所述数据传输模块用于将业务数据发送至业务数据监测预警平台。

进一步地，所述数据库存储有垃圾信息库和使用人员上传的业务数据；

所述数据鉴定模块用于将业务数据与垃圾信息库进行比对鉴定，比对鉴定过程具体如下：

P1：通过分词技术与特征字库配合使用对上传的业务数据进行特征字的获取；特征字具体为：在垃圾信息中出现频率超过预设值X1，且在普通信息中出现频率低于预设值X2的字符，且X1＞X2；

P2：获取上传的业务数据中特征字的数量，若满足特征字数量超过预设值或发件人信息与本地黑名单匹配中的至少一种情况，则匹配结果反馈提示业务数据为垃圾信息；

P3：若特征字数量低于预设值且发件人信息与本地黑名单不匹配，则匹配结果反馈提示业务数据为非垃圾信息；

P4：将匹配结果发回数据分类模块。

进一步地，所述垃圾信息库中包含发件人库和特征字库；

所述发件人库包括本地黑名单、备选黑名单、通讯录名单、备选通讯录名单。

进一步地，所述数据鉴定模块还用于对业务数据监测预警平台中的业务数据进行相似度鉴定，鉴定过程如下：

Q1：获取业务数据中的图片数据和音影数据，并得到图片数据和音影数据相应的参数信息；

Q2：通过图片识别技术和音影识别技术对所有使用人员上传的图片数据和音影数据进行分析，分析是否存在相同文件；相同文件具体为：内容相同，但分辨率不同的文件；

Q3：若存在相同图片数据和音影数据时，数据鉴定模块将上传的数据与相同数据进行对比，保留分辨率高的数据和所有使用人员的参数信息；同时使用人员与保留数据之间建立映射关系链，映射关系链具体为数据的参数信息；

Q4：使用人员通过用户终端查看业务数据时，用户终端向业务数据监测预警平台输入相应的数据的参数信息，业务数据监测预警平台依据输入的参数信息将保留的数据提取并另存为上传时完全相同的替换文件，业务数据监测预警平台将替换文件发回用户终端。

一种业务数据监测预警方法，方法包括以下具体步骤：

步骤一，使用人员通过用户终端输入个人信息后注册登录业务数据监测预警平台，并将个人信息发送至业务数据监测预警平台内存储，使用人员通过数据接发模块接收和发送业务数据，并通过数据传输模块将业务数据发送至业务数据监测预警平台，通过数据鉴定模块将业务数据与垃圾信息库进行比对鉴定，通过分词技术与特征字库配合使用对上传的业务数据进行特征字的获取，得到上传的业务数据中特征字的数量，若满足特征字数量超过预设值或发件人信息与本地黑名单匹配中的至少一种情况，则匹配结果反馈提示业务数据为垃圾信息，若特征字数量低于预设值且发件人信息与本地黑名单不匹配，则匹配结果反馈提示业务数据为非垃圾信息，将匹配结果发回数据分类模块；

步骤二，数据分类模块将接收到的业务数据进行数据分类，从接收到的业务数据中提取的发件人信息和业务数据，并将发件人信息和业务数据传输至业务数据监测预警平台进行匹配，并得到匹配结果，若匹配结果提示为垃圾信息，则将业务数据标记为垃圾信息，若匹配结果提示为非垃圾信息，则将发件人信息与本地黑名单以及通讯录名单进行比对，若发件人信息与通讯录名单匹配，则将业务数据标记为普通信息，若与本地黑名单匹配，业务数据确定为垃圾信息，若发件人信息与本地黑名单以及通讯录名单均不匹配，则将业务数据标记为未知联系人信息，读取普通信息中的具体内容；

步骤三，数据圈定模块根据数据分类模块的分类结果将接收到的业务数据进行圈定存储，将垃圾信息直接传输至数据圈定模块，数据圈定模块将垃圾信息转存至设置有自动清理时间的文件夹下，文件夹达到自动清算时间时，数据圈定模块将文件夹内的垃圾信息进行清理，数据圈定模块将普通信息中的文本数据、图片数据和音影数据进行圈定存储，将大于设定阈值的图片数据压缩另存为对应的图片数据副本，并用图片数据副本替换普通信息中原有的图片数据，原有的图片数据上传至业务数据监测预警平台，将大于设定阈值的音影数据中截取出一段不超设定阈值的音影数据副本，并用音影数据副本替换普通信息中原有的音影数据，原有的音影数据上传至业务数据监测预警平台，将未知联系人信息存储至临时文件夹，记录使用人员查看未知联系人信息的次数和对应的查看时间、未知联系人信息的删除时间，计算查看时间和删除时间之间的时间差值，若时间差值小于设定时间阈值，则该未知联系人信息的发件人信息标记为备选黑名单，若同一发件人信息被五次标记为备选黑名单后，将该发件人信息添加至本地黑名单中，若使用人员与同一发件人在二十四小时内的回复次数超过系统设定次数或总回复次数超过系统设定次数，则将该发件人信息标记为备选通讯录名单，并反馈询问使用人员是否对该发件人添加备注，备注添加完成后，将该发件人信息添加至通讯录名单，最后数据圈定模块将其他数据存储至临时文件夹；

步骤四，数据鉴定模块还对业务数据监测预警平台中的业务数据进行相似度鉴定，获取业务数据中的图片数据和音影数据，并得到图片数据和音影数据相应的参数信息，通过图片识别技术和音影识别技术对所有使用人员上传的图片数据和音影数据进行分析，分析是否存在相同文件，若存在相同图片数据和音影数据时，数据鉴定模块将上传的数据与相同数据进行对比，保留分辨率高的数据和所有使用人员的参数信息，并建立使用人员与保留数据之间的映射关系链，使用人员通过用户终端查看业务数据时，用户终端向业务数据监测预警平台输入相应的数据的参数信息，业务数据监测预警平台依据输入的参数信息将保留的数据提取并另存为上传时完全相同的替换文件，业务数据监测预警平台将替换文件发回用户终端。

与现有技术相比，本发明的有益效果是：

1、本发明通过数据鉴定模块将业务数据与垃圾信息库进行比对鉴定，依据业务数据中的特征字，若满足特征字数量超过预设值或发件人信息与本地黑名单匹配，业务数据为垃圾信息，若特征字数量低于预设值且发件人信息与本地黑名单不匹配，业务数据为非垃圾信息，匹配结果发回数据分类模块，从而有效剔除业务数据中的虚假垃圾信息；

2、本发明通过数据分类模块将接收到的业务数据进行数据分类，从业务数据中提取的发件人信息和业务数据，并将发件人信息和业务数据传输至数据鉴定模块进行匹配得到匹配结果，依据业务数据鉴定结果，首先将业务数据标记为垃圾信息和非垃圾信息，而后将非垃圾信息对应的发件人信息与本地黑名单以及通讯录名单进行比对，若发件人信息与通讯录名单匹配，业务数据标记为普通信息，若与本地黑名单匹配，业务数据确定为垃圾信息，若发件人信息与本地黑名单以及通讯录名单均不匹配，则将业务数据标记为未知联系人信息，从而实现了业务数据的高效梳理；

3、本发明通过数据圈定模块根据数据分类模块的分类结果将接收到的业务数据进行圈定存储，将垃圾信息直接传输至数据圈定模块，数据圈定模块将垃圾信息转存至设置有自动清理时间的文件夹下，达到自动清算时间时对垃圾信息进行清理，数据圈定模块将大于设定阈值的图片数据压缩另存为对应的图片数据副本并替换原有的图片数据，将大于设定阈值的音影数据中截取出一段不超设定阈值的音影数据副本并替换原有的音影数据，将未知联系人信息存储至临时文件夹，计算查看时间和删除时间之间的时间差值并比对时间阈值后将未知联系人信息的发件人信息标记为备选黑名单，若同一发件人信息被五次标记为备选黑名单后，将该发件人信息添加至本地黑名单中，依据未知联系人信息的回复次数将发件人信息存储备选通讯录名单后询问是否添加至通讯录，业务数据依次圈定后实现分类存储；

4、本发明还通过数据鉴定模块对业务数据监测预警平台中的业务数据进行相似度鉴定，将上传的图片数据和音影数据与存储的数据进行比对，若存在相同图片数据和音影数据时，保留分辨率高的数据和所有使用人员的参数信息，并建立使用人员与保留数据之间的映射关系链，待用户查看时输入相应的数据的参数信息即可得到对应的业务数据，避免业务数据存储冗余，节省存储空间。

附图说明

为了便于本领域技术人员理解，下面结合附图对本发明作进一步的说明。

图1为本发明的整体系统框图。

具体实施方式

下面将结合实施例对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

请参阅图1所示，一种业务数据监测预警平台，包括数据接发模块、数据传输模块、数据鉴定模块、数据圈定模块、数据分类模块、数据库和业务数据监测预警平台；

所述数据接发模块与业务数据监测预警平台通信连接；所述数据接发模块与数据传输模块通信连接；所述数据传输模块与业务数据监测预警平台通信连接；所述数据分类模块与业务数据监测预警平台通信连接，所述数据鉴定模块与业务数据监测预警平台；所述数据圈定模块与业务数据监测预警平台通信连接；所述数据圈定模块与数据库数据连接，所述数据库与业务数据监测预警平台数据连接；

使用人员通过用户终端输入个人信息后注册登录业务数据监测预警平台，并将个人信息发送至业务数据监测预警平台内存储；所述个人信息包括姓名、手机号码、公司名称、公司职务等；

所述数据接发模块用于使用人员接收和发送业务数据，并将业务数据传输至数据传输模块，所述数据传输模块用于将业务数据发送至业务数据监测预警平台；

所述数据分类模块用于对业务数据监测预警平台接收到的业务数据进行数据分类，数据分类过程具体如下：

步骤S1：从接收到的业务数据中提取的发件人信息和业务数据，并将发件人信息和业务数据传输至业务数据监测预警平台进行匹配，并得到匹配结果；

步骤S2：若匹配结果提示为垃圾信息，则将业务数据标记为垃圾信息，若匹配结果提示为非垃圾信息，则将发件人信息与本地黑名单以及通讯录名单进行比对，若发件人信息与通讯录名单匹配，则将业务数据标记为普通信息，若与本地黑名单匹配，则将业务数据标记为垃圾信息，若发件人信息与本地黑名单以及通讯录名单均不匹配，则将业务数据标记为未知联系人信息；

步骤S3：读取普通信息中的具体内容；业务数据具体包括文本数据、图片数据、音影数据和其他数据；

所述数据库存储有垃圾信息库和使用人员上传的业务数据，垃圾信息库中包含发件人库和特征字库；所述发件人库包括本地黑名单、备选黑名单、通讯录名单、备选通讯录名单等；所述数据鉴定模块用于将业务数据与垃圾信息库进行比对鉴定，比对鉴定过程具体如下：

P1：通过分词技术与特征字库配合使用对上传的业务数据进行特征字的获取；特征字具体为：在垃圾信息中出现频率超过预设值X1，且在普通信息中出现频率低于预设值X2的字符，且X1＞X2；

P2：获取上传的业务数据中特征字的数量，若满足特征字数量超过预设值或发件人信息与本地黑名单匹配中的至少一种情况，则匹配结果反馈提示业务数据为垃圾信息；

P3：若特征字数量低于预设值且发件人信息与本地黑名单不匹配，则匹配结果反馈提示业务数据为非垃圾信息；

P4：将匹配结果发回数据分类模块；

所述数据圈定模块与数据库数据连接，所述数据库中还存储有已删除的信息、未知联系人信息等；

所述数据圈定模块根据数据分类模块的分类结果将接收到的业务数据进行圈定存储，圈定存储步骤具体如下：

步骤SS1：将垃圾信息直接传输至数据圈定模块，数据圈定模块将垃圾信息转存至设置有自动清理时间的文件夹下，文件夹达到自动清算时间时，数据圈定模块将文件夹内的垃圾信息进行清理；

步骤SS2：数据圈定模块对普通信息中的文本数据、图片数据和音影数据进行圈定存储，具体如下：

步骤SS21：数据圈定模块将大于设定阈值的图片数据压缩另存为对应的图片数据副本，并用图片数据副本替换普通信息中原有的图片数据，原有的图片数据上传至业务数据监测预警平台；

步骤SS22：数据圈定模块将大于设定阈值的音影数据中截取出一段不超设定阈值的音影数据副本，并用音影数据副本替换普通信息中原有的音影数据，原有的音影数据上传至业务数据监测预警平台；

步骤SS3：将未知联系人信息存储至临时文件夹，记录使用人员查看未知联系人信息的次数和对应的查看时间、未知联系人信息的删除时间；

步骤SS4：计算查看时间和删除时间之间的时间差值，若时间差值小于设定时间阈值，则该未知联系人信息的发件人信息标记为备选黑名单，若同一发件人信息被五次标记为备选黑名单后，将该发件人信息添加至本地黑名单中；若使用人员与同一发件人在二十四小时内的回复次数超过系统设定次数或总回复次数超过系统设定次数，则将该发件人信息标记为备选通讯录名单，并反馈询问使用人员是否对该发件人添加备注，备注添加完成后，将该发件人信息添加至通讯录名单；

步骤SS5：数据圈定模块将其他数据存储至临时文件夹；

所述数据鉴定模块还用于对业务数据监测预警平台中的业务数据进行相似度鉴定，鉴定过程如下：

Q1：获取业务数据中的图片数据和音影数据，并得到图片数据和音影数据相应的参数信息；

Q2：通过图片识别技术和音影识别技术对所有使用人员上传的图片数据和音影数据进行分析，分析是否存在相同文件；相同文件具体为：内容相同，但分辨率不同的文件；

Q3：若存在相同图片数据和音影数据时，数据鉴定模块将上传的数据与相同数据进行对比，保留分辨率高的数据和所有使用人员的参数信息；同时使用人员与保留数据之间建立映射关系链，映射关系链具体为数据的参数信息；

Q4：使用人员通过用户终端查看业务数据时，用户终端向业务数据监测预警平台输入相应的数据的参数信息，业务数据监测预警平台依据输入的参数信息将保留的数据提取并另存为上传时完全相同（内存相同、分辨率相同等等）的替换文件，业务数据监测预警平台将替换文件发回用户终端。

上述公式均是去量纲取其数值计算，公式是由采集大量数据进行软件模拟得到最近真实情况的一个公式，公式中的预设参数由本领域的技术人员根据实际情况进行设置。

实施例二

基于统一发明的又一构思，现提供一种业务数据监测预警方法，方法具体如下：

步骤一，使用人员通过用户终端输入个人信息后注册登录业务数据监测预警平台，并将个人信息发送至业务数据监测预警平台内存储，使用人员通过数据接发模块接收和发送业务数据，并通过数据传输模块将业务数据发送至业务数据监测预警平台，通过数据鉴定模块将业务数据与垃圾信息库进行比对鉴定，通过分词技术与特征字库配合使用对上传的业务数据进行特征字的获取，得到上传的业务数据中特征字的数量，若满足特征字数量超过预设值或发件人信息与本地黑名单匹配中的至少一种情况，则匹配结果反馈提示业务数据为垃圾信息，若特征字数量低于预设值且发件人信息与本地黑名单不匹配，则匹配结果反馈提示业务数据为非垃圾信息，将匹配结果发回数据分类模块；

步骤二，数据分类模块将接收到的业务数据进行数据分类，从接收到的业务数据中提取的发件人信息和业务数据，并将发件人信息和业务数据传输至业务数据监测预警平台进行匹配，并得到匹配结果，若匹配结果提示为垃圾信息，则将业务数据标记为垃圾信息，若匹配结果提示为非垃圾信息，则将发件人信息与本地黑名单以及通讯录名单进行比对，若发件人信息与通讯录名单匹配，则将业务数据标记为普通信息，若与本地黑名单匹配，业务数据确定为垃圾信息，若发件人信息与本地黑名单以及通讯录名单均不匹配，则将业务数据标记为未知联系人信息，读取普通信息中的具体内容；

步骤三，数据圈定模块根据数据分类模块的分类结果将接收到的业务数据进行圈定存储，将垃圾信息直接传输至数据圈定模块，数据圈定模块将垃圾信息转存至设置有自动清理时间的文件夹下，文件夹达到自动清算时间时，数据圈定模块将文件夹内的垃圾信息进行清理，数据圈定模块将普通信息中的文本数据、图片数据和音影数据进行圈定存储，将大于设定阈值的图片数据压缩另存为对应的图片数据副本，并用图片数据副本替换普通信息中原有的图片数据，原有的图片数据上传至业务数据监测预警平台，将大于设定阈值的音影数据中截取出一段不超设定阈值的音影数据副本，并用音影数据副本替换普通信息中原有的音影数据，原有的音影数据上传至业务数据监测预警平台，将未知联系人信息存储至临时文件夹，记录使用人员查看未知联系人信息的次数和对应的查看时间、未知联系人信息的删除时间，计算查看时间和删除时间之间的时间差值，若时间差值小于设定时间阈值，则该未知联系人信息的发件人信息标记为备选黑名单，若同一发件人信息被五次标记为备选黑名单后，将该发件人信息添加至本地黑名单中，若使用人员与同一发件人在二十四小时内的回复次数超过系统设定次数或总回复次数超过系统设定次数，则将该发件人信息标记为备选通讯录名单，并反馈询问使用人员是否对该发件人添加备注，备注添加完成后，将该发件人信息添加至通讯录名单，最后数据圈定模块将其他数据存储至临时文件夹；

步骤四，数据鉴定模块还对业务数据监测预警平台中的业务数据进行相似度鉴定，获取业务数据中的图片数据和音影数据，并得到图片数据和音影数据相应的参数信息，通过图片识别技术和音影识别技术对所有使用人员上传的图片数据和音影数据进行分析，分析是否存在相同文件，若存在相同图片数据和音影数据时，数据鉴定模块将上传的数据与相同数据进行对比，保留分辨率高的数据和所有使用人员的参数信息，并建立使用人员与保留数据之间的映射关系链，使用人员通过用户终端查看业务数据时，用户终端向业务数据监测预警平台输入相应的数据的参数信息，业务数据监测预警平台依据输入的参数信息将保留的数据提取并另存为上传时完全相同的替换文件，业务数据监测预警平台将替换文件发回用户终端。

以上公开的本发明优选实施例只是用于帮助阐述本发明。优选实施例并没有详尽叙述所有的细节，也不限制该发明仅为的具体实施方式。显然，根据本说明书的内容，可作很多的修改和变化。本说明书选取并具体描述这些实施例，是为了更好地解释本发明的原理和实际应用，从而使所属技术领域技术人员能很好地理解和利用本发明。本发明仅受权利要求书及其全部范围和等效物的限制。