IPv6地址快速标识方法、装置、设备、介质和程序产品

技术领域

本公开涉及计算机通信技术领域，尤其涉及一种IPv6地址快速标识方法、装置、电子设备、介质和程序产品。

背景技术

随着IPv6规模部署和应用的深入推进，IPv6的网络承载能力显著增强，数据中心、内容分发网络、云平台和域名解析系统等应用基础设施基本完成IPv6改造。随着IPv6的发展，我国IPv6活跃用户数持续增长，物联网IPv6连接数达到千万级。移动网络IPv6流量占比达到全网流量的20％，其中，城域网IPv6流量占比达到5％。县级以上政府门户网站IPv6支持率达到70％，国内主要商业网站及移动互联网应用IPv6支持率达到60％。在IPv6的应用逐渐规模化的背景下，识别IPv6的可用资产势在必行。

发明内容

鉴于上述问题，本发明提供了一种IPv6地址快速标识方法、装置、电子设备、介质和程序产品。

本公开的一个方面提供了一种IPv6地址快速标识方法，包括：采集并汇聚IPv6数据流；统计所述IPv6数据流的所属IP地址段和所属IP地址段对应的IP地址数量；基于预设的配置文件识别所述IPv6数据流所属IP地址段的属性标识，所述属性标识包括AS分布、国家分布、经纬度和所属组织；展示所述所属IP地址段、所属IP地址段对应的IP地址数量及所述属性标识。

可选地，在统计所述IPv6数据流的所属IP地址段和所属IP地址段对应的IP地址数量之前，所述方法还包括：将所述IPv6数据流分片存储，其中，分片存储的内容为所述IPv6数据流的每个分片的长度和所述分片在所述IPv6数据流中的位置。

可选地，在统计所述IPv6数据流的所属IP地址段和所属IP地址段对应的IP地址数量包括：识别所述IPv6数据流中数据的预设统计字段，将所述预设统计字段与预设IP地址段进行映射运算，识别所述数据的IP地址的所属IP地址段；统计所述IPv6数据流中数据的IP地址分属各IP地址段的数量。

可选地，还包括：将所述IPv6数据流中相同IP地址的数据合并去重。

可选地，所述基于预设的配置文件识别所述IPv6数据流所属IP地址段的属性标识包括：基于预设的配置文件分段识别所述IP地址段内的分段，将各分段与对应类别的属性标识匹配，得到各分段的属性标志。

可选地，所述IPv6数据流从网络中的路由器或交换机采集，所述IPv6数据流包括源IP地址、目的IP地址、源端口、目的端口、协议号、入流量和出流量。

本公开的第二个方面提供了一种IPv6地址快速标识装置，包括：采集模块，用于采集并汇聚IPv6数据流；统计模块，用于统计所述IPv6数据流的所属IP地址段和所属IP地址段对应的IP地址数量；识别模块，用于基于预设的配置文件识别所述IPv6数据流所属IP地址段的属性标识，所述属性标识包括AS分布、国家分布、经纬度和所属组织；展示模块，用于展示所述所属IP地址段、所属IP地址段对应的IP地址数量及所述属性标识。

本公开的另一个方面提供了一种电子设备，包括：存储器，处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时，实现所述IPv6地址快速标识方法中的各个步骤。

本公开的另一个方面提供了一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现所述IPv6地址快速标识方法中的各个步骤。

本公开的第五方面还提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述IPv6地址快速标识方法。

在本公开实施例采用的上述至少一个技术方案能够达到以下有益效果：

本公开实施例提供的IPv6地址快速标识方法能自动划分计算数据和计算任务，自动分配和执行任务以及收集计算结果，将数据分布存储、数据通信、容错处理等并行计算涉及到的很多系统底层的复杂细节交由系统负责处理，大大减少了软件开发人员的负担。

附图说明

为了更完整地理解本公开及其优势，现在将参考结合附图的以下描述，其中：

图1示意性示出了本公开实施例提供的一种IPv6地址快速标识方法的示意图；

图2示意性示出了本公开实施例提供的一种IPv6地址快速标识装置的结构框图；

图3示意性示出了本公开实施例提供的一种电子设备的结构框图。

具体实施方式

以下，将参照附图来描述本公开的实施例。但是应该理解，这些描述只是示例性的，而并非要限制本公开的范围。在下面的详细描述中，为便于解释，阐述了许多具体的细节以提供对本公开实施例的全面理解。然而，明显地，一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外，在以下说明中，省略了对公知结构和技术的描述，以避免不必要地混淆本公开的概念。

在此使用的术语仅仅是为了描述具体实施例，而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在，但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。

在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义，除非另外定义。应注意，这里使用的术语应解释为具有与本说明书的上下文相一致的含义，而不应以理想化或过于刻板的方式来解释。

附图中示出了一些方框图和/或流程图。应理解，方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器，从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/或流程图中所说明的功能/操作的装置。

因此，本公开的技术可以硬件和/或软件(包括固件、微代码等)的形式来实现。另外，本公开的技术可以采取存储有指令的计算机可读介质上的计算机程序产品的形式，该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。在本公开的上下文中，计算机可读介质可以是能够包含、存储、传送、传播或传输指令的任意介质。例如，计算机可读介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。计算机可读介质的具体示例包括：磁存储装置，如磁带或硬盘(HDD)；光存储装置，如光盘(CD-ROM)；存储器，如随机存取存储器(RAM)或闪存；和/或有线/无线通信链路。

图1示意性示出了本公开实施例提供的一种IPv6地址快速标识方法的示意图。

如图1所示，本公开的实施例提供了一种IPv6地址快速标识方法，包括操作S110～S140。

S110，采集并汇聚IPv6数据流。采集的IPv6数据流来源于路由器或交换机。采集IPv6数据流的方法为：在路由器或交换机上配置流量分析工具Netflow，开启流量分析工具Netflow，采集所述IPv6数据流；采集到的IPv6数据流包括：源IP、目的IP、源端口、目的端口、协议号、入流量和出流量。可以通过预设的数据汇聚服务器对IPv6数据流汇聚。

S120，统计IPv6数据流的所属IP地址段和所属IP地址段对应的IP地址数量。在本实施例中，可以通过CDH计算服务器分别统计计算数据流中源IP/目的IP地址个数、所属IP段数(/48、/32等)、端口分布、协议分布。

具体的，在执行S130之前，将IPv6数据流汇聚数据的输入进行分片，将所述IPv6数据流分片存储。在进行计算之前，根据输入文件计算输入分片，每个输入分片针对一个任务。其中，输入分片存储的内容并非数据本身，而是所述IPv6数据流的每个分片的长度和所述分片在所述IPv6数据流中的位置。基于分片执行数据流的并行计算，可以提高计算效率。分片中不存储数据本身，可降低存储压力。

在本实施例中，S120具体可以包括S121～S122。

S121，识别所述IPv6数据流中数据的预设统计字段，将所述预设统计字段与预设IP地址段进行映射运算，识别所述数据的IP地址的所属IP地址段。在该过程中，还可以将所述IPv6数据流中相同IP地址的数据合并去重。所述数据流中源IPv6/目的IPv6地址同一个IPv6地址可能会出现多次，那么映射输出文件冗余就会很多，因此在归纳计算前对相同的key做一个合并操作，文件就会变小，这样就提高了宽带的传输效率。同时输出数据。

S122，统计所述IPv6数据流中数据的IP地址分属各IP地址段的数量。

在本实施例中，bgp.conf的配置内容示例如下：

/>

根据S120，地址归属地址段示例如下：

地址段统计示例：

S130，基于预设的配置文件识别IPv6数据流所属IP地址段的属性标识，属性标识包括AS分布、国家分布、经纬度和所属组织。在本实施例中，可以借助CDH大数据平台分别快速统计字段源IPv6地址、目的IPv6地址、端口、协议等数据，并将IPv6地址根据预设的bgp.conf的配置文件，分别归类/32、/48地址表中，结合地址标识库ipdb.conf作为CHD大数据平台的数据输入，快速统计AS分布、国家分布、经纬度、所属组织等标志。

在本实施例中，基于预设的配置文件分段识别所述IP地址段内的分段，将各分段与对应类别的属性标识匹配，得到各分段的属性标志。AS号、国家分布示例如下：

S140，展示所属IP地址段、所属IP地址段对应的IP地址数量及属性标识。通过数据展示，可以是用户直观的了解IPv6地址的使用情况，为用户提供了解IPv6的可用资产提供便利。

根据该实施例的应用场景可以包括教育网在内的多种网络应用场景。网路包括光纤交换机、采集服务器、数据流量探测器、普通交换机、数据汇聚服务器、CDH计算服务器等。

用户可以通过设于采集服务器的数据流量探测器来采集IPv6数据流，通过数据汇聚服务器对IPv6数据流汇聚，最后，通过CDH计算服务器统计数据流中源IP/目的IP地址个数、所属IP段数(/48、/32等)、端口分布、协议分布等数据参数，并识别其中的IPv6标识。

可选地，IPv6数据流可以来源于路由器或交换机。采集IPv6数据流的方法为：在路由器或交换机上配置流量分析工具Netflow，开启流量分析工具Netfiow，采集所述IPv6数据流；采集到的IPv6数据流包括：源IP、目的IP、源端口、目的端口、协议号、入流量和出流量。

本公开提供的IPv6地址快速标识方法基于集群的高性能并行计算平台，一个包含数十、数百至数千个节点的分布和并行计算集群，能自动完成计算任务的并行化处理，自动划分计算数据和计算任务，在集群节点上自动分配和执行任务以及收集计算结果，将数据分布存储、数据通信、容错处理等并行计算涉及到的很多系统底层的复杂细节交由系统负责处理，大大减少了软件开发人员的负担。

它借助于函数式程序设计语言Lisp的设计思想，提供了一种简便的并行程序设计方法，用Map和Reduce两个函数编程实现基本的并行计算任务，提供了抽象的操作和并行编程接口，以简单方便地完成大规模数据的编程和计算处理。

基于上述IPv6地址快速标识方法，本公开还提供了一种IPv6地址快速标识装置。以下将结合图2对该装置进行详细描述。

图2示意性示出了根据本公开实施例的IPv6地址快速标识装置的结构框图。

如图2所示，该实施例的IPv6地址快速标识装置200包括采集模块210、统计模块220、识别模块330和展示模块240。

采集模块210用于采集并汇聚IPv6数据流。在一实施例中，采集模块210可以用于执行前文描述的操作S110，在此不再赘述。

统计模块220用于统计所述IPv6数据流的所属IP地址段和所属IP地址段对应的IP地址数量。在一实施例中，统计模块220可以用于执行前文描述的操作S120，在此不再赘述。

识别模块230基于预设的配置文件识别所述IPv6数据流所属IP地址段的属性标识，所述属性标识包括AS分布、国家分布、经纬度和所属组织。在一实施例中，识别模块230可以用于执行前文描述的操作S130，在此不再赘述。

展示模块240用于展示所述所属IP地址段、所属IP地址段对应的IP地址数量及所述属性标识。在一实施例中，展示模块240可以用于执行前文描述的操作S140，在此不再赘述。

需要说明的是，采集模块210、统计模块220、识别模块230和展示模块240中的任意多个模块可以合并在一个模块中实现，或者其中的任意一个模块可以被拆分成多个模块。或者，这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合，并在一个模块中实现。根据本公开的实施例，采集模块210、统计模块220、识别模块230和展示模块240中的至少一个可以至少被部分地实现为硬件电路，例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC)，或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现，或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者，采集模块210、统计模块220、识别模块230和展示模块240中的至少一个可以至少被部分地实现为计算机程序模块，当该计算机程序模块被运行时，可以执行相应的功能。

图3示意性示出了根据本公开实施例的适于实现IPv6地址快速标识方法的电子设备的方框图。

如图3所示，本实施例中所描述的电子设备，包括：电子设备300包括处理器310、计算机可读存储介质320。该电子设备300可以执行上面参考图1描述的方法，以实现对特定操作的检测。

具体地，处理器310例如可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如，专用集成电路(ASIC))，等等。处理器310还可以包括用于缓存用途的板载存储器。处理器310可以是用于执行参考图1描述的根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。

计算机可读存储介质320，例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如，可读存储介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质的具体示例包括：磁存储装置，如磁带或硬盘(HDD)；光存储装置，如光盘(CD-ROM)；存储器，如随机存取存储器(RAM)或闪存；和/或有线/无线通信链路。

计算机可读存储介质320可以包括计算机程序321，该计算机程序321可以包括代码/计算机可执行指令，其在由处理器310执行时使得处理器310执行例如上面结合图1所描述的方法流程及其任何变形。

计算机程序321可被配置为具有例如包括计算机程序模块的计算机程序代码。例如，在示例实施例中，计算机程序321中的代码可以包括一个或多个程序模块，例如包括321A、模块321B、……。应当注意，模块的划分方式和个数并不是固定的，本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合，当这些程序模块组合被处理器310执行时，使得处理器310可以执行例如上面结合图1所描述的方法流程及其任何变形。

根据本发明的实施例，采集模块310、统计模块320、识别模块330和展示模块340中的至少一个可以实现为参考图3描述的计算机程序模块，其在被处理器310执行时，可以实现上面描述的相应操作。

本公开还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的设备/装置/系统中所包含的；也可以是单独存在，而未装配入该设备/装置/系统中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被执行时，实现根据本公开实施例的方法。

本公开的实施例还包括一种计算机程序产品，其包括计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。当计算机程序产品在计算机系统中运行时，该程序代码用于使计算机系统实现本公开实施例所提供的物品推荐方法。

在该计算机程序被处理器301执行时执行本公开实施例的系统/装置中限定的上述功能。根据本公开的实施例，上文描述的系统、装置、模块、单元等可以通过计算机程序模块来实现。

在一种实施例中，该计算机程序可以依托于光存储器件、磁存储器件等有形存储介质。在另一种实施例中，该计算机程序也可以在网络介质上以信号的形式进行传输、分发，并通过通信部分被下载和安装，和/或从可拆卸介质被安装。该计算机程序包含的程序代码可以用任何适当的网络介质传输，包括但不限于：无线、有线等等，或者上述的任意合适的组合。

在这样的实施例中，该计算机程序可以通过通信部分从网络上被下载和安装，和/或从可拆卸介质被安装。在该计算机程序被处理器执行时，执行本公开实施例的系统中限定的上述功能。根据本公开的实施例，上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。

根据本公开的实施例，可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例提供的计算机程序的程序代码，具体地，可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。程序设计语言包括但不限于诸如Java，C++，python，“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部汁算设备(例如利用因特网服务提供商来通过因特网连接)。

附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

本领域技术人员可以理解，本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合，即使这样的组合或结合没有明确记载于本公开中。特别地，在不脱离本公开精神和教导的情况下，本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。

以上对本公开的实施例进行了描述。但是，这些实施例仅仅是为了说明的目的，而并非为了限制本公开的范围。尽管在以上分别描述了各实施例，但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围，本领域技术人员可以做出多种替代和修改，这些替代和修改都应落在本公开的范围之内。