一种基于分布式消息架构的跨网数据交换技术及方法

技术领域

本发明涉及跨网数据交换技术领域，具体是一种基于分布式消息架构的跨网数据交换技术及方法。

背景技术

跨网数据交换需要借助单向光闸的文件摆渡功能交换到对端网络，通过LinuxKernel 内核，将MQ实时传输技术与DATAX、DOCKER、GEARMAN等模式融合，且内置专有隔离交换模块实现内容智能过滤、CRC校验、抗DDoS/DOS，实现跨网域的数据采集、资源请求、数据交换和共享服务等场景。

在低速的网络环境中，大文件的数据交换需要花费时间长且网络出现故障的几率大，倘若遇到故障将导致文件获取不成功，数据交换过程造成文件丢失，无法保障数据的完整性及安全性。因此，本发明提供了一种基于分布式消息架构的跨网数据交换技术及方法，以解决上述背景技术中提出的问题。

发明内容

本发明目的为了提高在数据交换效率，旨在提高跨网络服务交换的性能，进而进一步保护数据，实现智能数据获取。

为实现上述目的，本发明提供如下技术方案：

一种基于分布式消息架构的跨网数据交换技术及方法，本方法使用java编程语言实现，实现过程如下：

第一步在网络可达一侧部署操作主机和智能化客户端，不可达一侧的智能化客户端只需要安装介质一次；采集数据方发起指令采集全网各个主机设备或系统的相关信息数据，加密后执行指令，可达网络一侧的智能客户端接收到该信息数据，首先对信息数据进行解密，得到原始的信息数据；利用校验码对信息数据进行校验，确保接收到的数据是由采集数据方所发出；

第二步再将所需数据采集到宿主机，在宿主机中创建一个文本文件，然后复制对标数据指令到发出端的采集数据方容器内，利用DATAX实现数据的同步及处理；采集数据方在指令获得反馈后，解密校验再进行进一步处理；

第三步在采集完成后，内部宿主机经GEARMAN安全隔离数据通道到网闸，压缩成介质，形成闭环双向摆渡传输，保障数据传输过程中的数据安全。

作为本发明进一步的方案，所述指令包含发送方网络信息数据和唯一的标识符，包括地址。

作为本发明再进一步的方案，所述介质为可以传输的媒介。

与现有技术相比，本发明的有益效果是：

1、本方法确保数据交换操作能够以正确顺序执行，在不同网络区域的内外两端各部署一套智能化客户端完成协议适配、信息采集、信息压缩、信息解压的工作。

2、本方法利用利用跨网安全交换技术实现数据的跨部门安全交换和共享融合，打破了传统的技术壁垒限制。

3、针对目前发明利用MQ技术，实现断点传输，保障不稳定的网络状态下信息传输的可靠性，遵循政府部门环境安全要求的前提下，实现数据传输，提升了整个网络的运维监控效率，使跨网也能够快速有效地对系统或设备进行监控、报警和分析处理。

具体实施方式

下面将对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例中，一种基于分布式消息架构的跨网数据交换技术及方法，本方法使用 java编程语言实现，实现过程如下：

第一步在网络可达一侧部署操作主机和智能化客户端，不可达一侧的智能化客户端只需要安装介质一次；采集数据方发起指令采集全网各个主机设备或系统的相关信息数据，发起指令包含发送方网络信息数据包括地址等唯一的标识符，加密后执行指令，可达网络一侧的智能客户端接收到该信息数据，首先对信息数据进行解密，得到原始的信息数据；利用校验码对信息数据进行校验，确保接收到的数据是由采集数据方所发出；

第二步再将所需数据采集到宿主机，在宿主机中创建一个文本文件，然后复制对标数据指令到发出端的采集数据方容器内，利用DATAX实现数据的同步及处理；采集数据方在指令获得反馈后，解密校验再进行进一步处理；

第三步在采集完成后，内部宿主机经GEARMAN安全隔离数据通道到网闸，压缩成介质，该介质为可以传输的媒介，形成闭环双向摆渡传输，保障数据传输过程中的数据安全。

本发明的工作原理是：

点与点之间，通过MQ技术实现断点传输，利用DATAX对标同步两点数据，在DOCKER宿主机内通过原始复制方式管理数据，创建一个文本文件，然后复制到容器中，经GEARMAN安全隔离数据通道，形成双向摆渡传输闭环，保障数据传输过程中的数据安全

该技术实现了完整的高性能跨域数据交换链路聚合、多线程并行处理机制，提供通道资源共享，具有统一便捷的传输交换、服务协议等多种功能，支持多种入参检验、结果格式转化、结果过滤、统一服务标准，充分提高通道利用率，保障了数据交换的稳定性，本方法确保数据交换操作能够以正确顺序执行，在不同网络区域的内外两端各部署一套智能化客户端完成协议适配、信息采集、信息压缩、信息解压的工作，同时实现数据交换的安全可控。

本方法利用利用跨网安全交换技术实现数据的跨部门安全交换和共享融合，打破了传统的技术壁垒限制。

针对目前发明利用MQ技术，实现断点传输，保障不稳定的网络状态下信息传输的可靠性，遵循政府部门环境安全要求的前提下，实现数据传输，提升了整个网络的运维监控效率，使跨网也能够快速有效地对系统或设备进行监控、报警和分析处理。

以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。