一种计算机大数据存储系统

技术领域

本发明涉及计算机技术领域，具体是一种计算机大数据存储系统。

背景技术

信息时代，物联网、社交网络改变了人们的生活方式，在其中传输的数据种类，数据规模也在以前所未有的速度增长。数据不再是网络中简单的处理对象，数据已经变成了具有重要价值的基础性资源。随着对数据资源价值关注度的增加，如何更好的管理以及更有效地利用这些数据也相应地得到了越来越多的关注。大数据来源多样使得其结构复杂，例如文字、图片、语音、视频等等均是大数据的来源。有时候大数据产生是实时的，并要求数据管理分析工具立刻分析得出实时结论。对于一些大型企业，企业的管理中涉及很多的大数据存储、分析，对搜集到的庞大数据进行实时分析并得出有益于企业发展的启示往往是战略性的，体现了企业的竞争力。

随着用户的增加，计算机世界正变得庞大而复杂。随着网络要求的提升和技术的进步，云计算凭借自身的优良性能也正逐步成为流行的计算模式。云计算通过群集的商业计算机来支持海量数据的处理,该技术使得用户对需要处理的数据的分析变得更加方便。更加方便的技术必然吸引更多的用户的加入，也使得用户的数据量以前所未有的速度膨胀,且数据结构类型也变得更加多样性。如何如何将这些大数据有效，安全地存储和备份是个值得深究的问题。本课题主要研究大数据存储中的管理效率，安全备份，容灾容错等相关问题。

在大数据中常常包含巨大的信息量，具有重要的价值。但因为大数据价值密度的特点，如何从中发现从而利用所需的价值，往往需要足够多的数据，并且对这大量的数据进行处理分析也是一大难题。以往常用的数据库，例如以关系数据库为代表的传统数据管理模型已经无法满足大数据管理的要求。因此，需要研究更高效的数据存储方式，采用更灵活、更方便的数据存储模型和相应的数据处理方式。

在网络计算机运行过程中，海量大数据存储系统本身存在存储容量较小、速度慢等缺点,因此必须采用合理的硬件和逻辑控制对网络计算机模型下海量大数据存储系统进行设计。在大数据存储系统设计过程中，首先对网络计算机模型下的数据接口中所接收的数据进行采集和控制，并对采集的数据进行分析,将海量大数据分类为可利用网络数据和不可利用网络数据。

发明内容

本发明的目的在于提供一种计算机大数据存储系统，以解决上述背景技术中提出的问题。

为实现上述目的，本发明提供如下技术方案：

一种计算机大数据存储系统，包括数据采集单元、数据控制单元、数据分析单元、数据分类单元、数据处理单元、密码录入装置、数据存储单元、数据库、显示单元、通讯装置及手持终端；其中，

所述数据采集单元及数据控制单元均通过计算机网络数据接口与网络服务器连接，从而网络服务器中采集相应的数据，且所述数据控制单元用以对采集的数据进行控制；

所述数据分析单元的数据输入端分别与数据采集单元及数据控制单元的数据输出端连接，且所述数据分析单元用以对采集的数据进行分析，并将采集的数据分为不可利用数据及可利用数据；

所述数据分类单元的数据输入端与数据分析单元的数据输出端连接，且所述数据分类单元用于将数据进行分类处理；

所述数据处理单元的数据输入端与数据分类单元的数据输出端连接，所述数据处理单元用以对数据分类单元发出的数据进行接收，所述数据处理单元的数量为一个或多个，且所述数据处理单元用于对数据分类单元分发的各类数据进行样本数据抽取；

所述密码录入装置通过数据连接线与数据处理单元连接，用以保护用户的信息，避免用户信息轻易的被人窃取；

所述数据存储单元的数据输入端与数据处理单元的数据输出端连接，所述数据存储单元的数量与所述数据处理单元数量相同，且所述数据存储单元与所述数据处理单元一一对应连接；

所述数据库的数据输入端与数据存储单元的数据输出端连接，且所述数据库用以对数据存储单元的数据进行整合；

所述显示单元的数据输入端与数据库的数据输出端连接，用于用户输入操作指令和查看数据信息；

所述通讯装置通过数据连接线与显示单元连接；

所述通讯装置的无线输出端与手持终端的无线输入端连接。

作为本发明进一步的方案：所述可利用数据通过数据分类单元分为常规数据及冗余数据，所述常规数据直接通过数据存储单元进行数据存储，所述冗余数据通过数据压缩后，再通过数据存储单元进行数据存储。

作为本发明再进一步的方案：所述不可利用数据直接被所述数据处理单元进行摒除。

作为本发明再进一步的方案：所述密码录入装置包括指纹录入器、人脸识别器及身份证读取器。

作为本发明再进一步的方案：所述数据存储单元为机械硬盘、混合硬盘和/或固态硬盘或U盘。

作为本发明再进一步的方案：所述通讯装置包括5G通讯模块、蓝牙模块和WiFi通讯模块。

作为本发明再进一步的方案：所述显示单元为具有触摸屏的电子智能设备。

作为本发明再进一步的方案：所述手持终端为手机、iPad或个人笔记本电脑。

与现有技术相比，本发明的有益效果是：

本发明可快速全面的对网络计算机下的海量大数据进行存储，并通过密码录入装置的设置，便于通过多重方式对用户的信息进行保护，且在通讯装置的作用下，便于用户在不同环境下进行操作，提高了便利性，在采集各项海量大数据存储信息,进行网络计算机模型下海量大数据存储时，为了降低数据存储开销，提高数据存储容量和吞吐量，要对规模型网络计算机中大数据超高密度的存储结构进行分析，利用循环分段的计算方式进行冗余大数据特性压缩，在网络计算机模型下海量大数据存储系统的分布式缓存空间中实现大数据传输,遍布全部存储节点，实现海量大数据的存储优化。

附图说明

图1为一种计算机大数据存储系统的结构示意图。

图2为一种计算机大数据存储系统中数据分析单元的结构示意图。

图3为一种计算机大数据存储系统中密码录入装置的结构示意图。

图4为一种计算机大数据存储系统中通讯装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参阅图1～4，本发明实施例中，一种计算机大数据存储系统，包括数据采集单元、数据控制单元、数据分析单元、数据分类单元、数据处理单元、密码录入装置、数据存储单元、数据库、显示单元、通讯装置及手持终端；其中，所述数据采集单元及数据控制单元均通过计算机网络数据接口与网络服务器连接，从而网络服务器中采集相应的数据，且所述数据控制单元用以对采集的数据进行控制；所述数据分析单元的数据输入端分别与数据采集单元及数据控制单元的数据输出端连接，且所述数据分析单元用以对采集的数据进行分析，并将采集的数据分为不可利用数据及可利用数据；所述数据分类单元的数据输入端与数据分析单元的数据输出端连接，且所述数据分类单元用于将数据进行分类处理；所述数据处理单元的数据输入端与数据分类单元的数据输出端连接，所述数据处理单元用以对数据分类单元发出的数据进行接收，所述数据处理单元的数量为一个或多个，且所述数据处理单元用于对数据分类单元分发的各类数据进行样本数据抽取；所述密码录入装置通过数据连接线与数据处理单元连接，用以保护用户的信息，避免用户信息轻易的被人窃取；所述数据存储单元的数据输入端与数据处理单元的数据输出端连接，所述数据存储单元的数量与所述数据处理单元数量相同，且所述数据存储单元与所述数据处理单元一一对应连接；所述数据库的数据输入端与数据存储单元的数据输出端连接，且所述数据库用以对数据存储单元的数据进行整合；所述显示单元的数据输入端与数据库的数据输出端连接，用于用户输入操作指令和查看数据信息；所述通讯装置通过数据连接线与显示单元连接；所述通讯装置的无线输出端与手持终端的无线输入端连接。

所述可利用数据通过数据分类单元分为常规数据及冗余数据，所述常规数据直接通过数据存储单元进行数据存储，所述冗余数据通过数据压缩后，再通过数据存储单元进行数据存储。

所述不可利用数据直接被所述数据处理单元进行摒除。

所述密码录入装置包括指纹录入器、人脸识别器及身份证读取器。

所述数据存储单元为机械硬盘、混合硬盘和/或固态硬盘或U盘。

所述通讯装置包括5G通讯模块、蓝牙模块和WiFi通讯模块。

所述显示单元为具有触摸屏的电子智能设备。

所述手持终端为手机、iPad或个人笔记本电脑。

本发明的工作原理是：

由于身份证读取器、密码录入器及人脸识别器，便于多重保护用户的信息，避免用户信息轻易的被人窃取，导致不可估计的损失，由于通讯装置，以便于将用户信息便捷的传输到手持设备中，避免使用信息时通过插入存储装置读取，由于通讯装置内的多种通讯模块，以便于在不同的环境下均能将用户信息传输到手持终端中，通过数据分析单元对数据采集单元从网络服务器采集的各种类型的数据进行数据清理，排除异常数据，并通过数据分类单元对数据进行分类处理，并将分类处理的数据通过数据处理单元去除不可利用数据，并将冗余数进行压缩存储至对应的数据存储单元中，用户可通过显示单元输入操作指令和查看数据信息，能够将分散的、不同类型的，不同标准的数据进行有效的除重筛选和整合，且保证了数据质量和传输稳定性。

在采集各项海量大数据存储信息,进行网络计算机模型下海量大数据存储时，为了降低数据存储开销，提高数据存储容量和吞吐量，要对规模型网络计算机中大数据超高密度的存储结构进行分析，利用循环分段的计算方式进行冗余大数据特性压缩，在网络计算机模型下海量大数据存储系统的分布式缓存空间中实现大数据传输,遍布全部存储节点，实现海量大数据的存储优化。

以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。