一种基于分布式计算的区块链大数据处理方法
文献发布时间:2023-06-19 09:41:38
技术领域
本发明涉及数据处理技术领域,具体涉及一种基于分布式计算的区块链大数据处理方法。
背景技术
区块链技术中,每个节点均需存储整个区块链中的数据,从而实现去中心化、不可篡改等效果。但是每个节点要完整地存储区块链中的数据则会让每个节点数据存储过大而发生负载过大、数据冗余、容易死机、数据处理速度降低、同步数据库费时费力等问题。
发明内容
为解决上述问题,本发明提供了一种基于分布式计算的区块链大数据处理方法,在可以保证区块链内载数据安全的前提下,可以降低每个节点的负载量,并实现数据的分布式计算处理,大大提高了区块链数据的处理效率。
为实现上述目的,本发明采取的技术方案为:
一种基于分布式计算的区块链大数据处理方法,包括如下步骤:
S1、采用随机部分加密的方式实现大数据的预处理;
S2、采用随机分区域的储存方式实现完成预处理的大数据的储存;
S3、为每一个区域匹配一个唯一的数据处理节点。
进一步地,还包括:基于哈希函数实现大数据格式的标准化处理的步骤。
进一步地,所述步骤S1中,采用随机密文的数据加密算法随机选取部分大数据实现该部分大数据的加密处理的方式实现大数据的预处理。
进一步地,所述步骤S2中,采用随机的方式为完成预处理的大数据匹配对应的MPT树储存节点,每个MPT树储存节点均需分配到数据,且相互之间不存在重叠数据。
进一步地,所述步骤S3中,为每一个MPT树储存节点匹配一个唯一的数据处理节点。
进一步地,还包括:
为随机密文的数据加密算法匹配对应的生物验证模型的步骤,基于匹配的生物验证模型可以实现随机密文的数据加密算法的解密。
进一步地,为每一个数据处理节点匹配一唤醒码,通过唤醒码可以实现不同数据处理节点的单独/同步唤醒,基于分布式的数据处理节点实现MPT树储存数据的分布计算处理。
本发明具有以下有益效果:
在可以保证区块链内载数据安全的前提下,可以降低每个节点的负载量,并实现数据的分布式计算处理,大大提高了区块链数据的处理效率。
附图说明
图1为本发明实施例1一种基于分布式计算的区块链大数据处理方法的流程图。
图2为本发明实施例2一种基于分布式计算的区块链大数据处理方法的流程图。
具体实施方式
为了使本发明的目的及优点更加清楚明白,以下结合实施例对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
实施例1
如图1所示,一种基于分布式计算的区块链大数据处理方法,包括如下步骤:
S1、基于哈希函数实现大数据格式的标准化处理;
S2、采用随机部分加密的方式实现标准化的大数据的预处理;
S3、采用随机分区域的储存方式实现完成预处理的大数据的储存;
S4、为每一个区域匹配一个唯一的数据处理节点。
本实施例中,所述步骤S1中,采用随机密文的数据加密算法随机选取部分大数据实现该部分大数据的加密处理的方式实现大数据的预处理。所述步骤S2中,采用随机的方式为完成预处理的大数据匹配对应的MPT树储存节点,每个MPT树储存节点均需分配到数据,且相互之间不存在重叠数据。所述步骤S3中,为每一个MPT树储存节点匹配一个唯一的数据处理节点。
本实施例中,为每一个数据处理节点匹配一唤醒码,通过唤醒码可以实现不同数据处理节点的单独/同步唤醒,基于分布式的数据处理节点实现MPT树储存数据的分布计算处理。
实施例2
如图2所示,一种基于分布式计算的区块链大数据处理方法,包括如下步骤:
S1、基于哈希函数实现大数据格式的标准化处理;
S2、采用随机部分加密的方式实现标准化的大数据的预处理;并为随机密文的数据加密算法匹配对应的生物验证模型;
S3、采用随机分区域的储存方式实现完成预处理的大数据的储存;
S4、为每一个区域匹配一个唯一的数据处理节点。
所述步骤S1中,采用随机密文的数据加密算法随机选取部分大数据实现该部分大数据的加密处理的方式实现大数据的预处理。所述步骤S2中,采用随机的方式为完成预处理的大数据匹配对应的MPT树储存节点,每个MPT树储存节点均需分配到数据,且相互之间不存在重叠数据。所述步骤S3中,为每一个MPT树储存节点匹配一个唯一的数据处理节点。
本实施例中,为每一个数据处理节点匹配一唤醒码,通过唤醒码可以实现不同数据处理节点的单独/同步唤醒,基于分布式的数据处理节点实现MPT树储存数据的分布计算处理。
本实施例中,基于匹配的生物验证模型可以实现随机密文的数据加密算法的解密。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
- 一种基于分布式计算的区块链大数据处理方法
- 基于区块链和大数据分析的信息处理方法及大数据平台