一种实现数据导入时自动归集和导出的系统及方法

技术领域

本发明属于计算机技术领域，具体涉及一种实现数据导入时自动归集和导出的系统及方法。

背景技术

农业农村行业是指涉及到农业生产、农村建设和农民生活的各个方面的产业，包括种植业、畜牧业、渔业、林业、农村基础设施建设等。

现有技术中，在农业农村行业信息化建中过程中，会产生大量数据，数据流转形式多种多样， 通过EXCEL的方式流转比较方便通用。利用java自定义的注解，使用已开发好的注解，即可实现数据的导入、导出。传统的EXCEL导入、导出方法，并未实现对数据的分析、归集。此为现有技术的不足之处。

有鉴于此，本发明提供一种实现数据导入时自动归集和导出的系统及方法，以解决现有技术中存在的上述缺陷，是非常有必要的。

发明内容

本发明的目的在于，针对上述现有技术存在的缺陷，提供设计一种实现数据导入时自动归集和导出的系统及方法，以解决上述技术问题。

为实现上述目的，本发明给出以下技术方案：

一种实现数据导入时自动归集和导出的系统，包括：

自定义注解模块，该模块利用java的注解并结合POI，对数据进行归集和导出，添加简单的注解标识实现数据的导入、导出，并与农业农村行业紧密结合，在导入数据时读取每个单元格的数据，通过语义分析识别数据，与资料库的数据进行对比，经过算法算出匹配度较高的数据信息，并与上传的数据主外键关联，实现农业农村相关的数据关联；

简化了通过EXCEL导入、导出农业农村行业数据进作数据归集功能，

注解数据归集模块，该模块中注解名为@ExcelOper,在需要归集和导出数据的JavaBean属性上标识上注解，利用POI读取EXCEL的值，将Excel的列与JavaBean添加注解说明属性绑定，使用JAVA的反射机制给JavaBean赋值；分析已赋值的JavaBean，通过语义分析从资料库中获取到与导入数据相匹配的数据，并以导入数据为主数据的方式进行数据关联；

注解导出数据模块，该模块中在需要导出的数据的JavaBean的属性上添加注解标志，导出时读取当前JavaBean的属性，根据属性生成Excel文件，根据注解上的名称作为Excel表格列名，读取JavaBean的数据，并将数据填到对应的EXCEL单元格，完毕后返回Excel文件流。整个导出过程只需在JavaBean上添加上注解说明即可。

作为优选，所述的自定义注解模块中，分析数与之匹配度最高的分类，将数据打上数据标签，实现数据的自动分类。

作为优选，所述的自定义注解模块中，分析每列字符使用字典判断工具类，自动识别字典列，将数据转换成相应的字典，供统计、分析、查询使用。

作为优选，所述的注解数据归集模块中，通过语义分析从资料库中获取到与导入数据相匹配的数据包括图片、产地、视频、安全指标、生产周期或加工周期。

作为优选，所述的注解数据归集模块中，导入过程中同时自动分类，将产品信息分为种植业、畜牧业、渔业、林业大类，同时将数据打标签，如热销产品、季节性产品、地理标志性产品等。

本发明还提供一种实现数据导入时自动归集和导出的方法，包括以下步骤：

步骤S1：自定义注解的步骤，该步骤利用java的注解并结合POI，对数据进行归集和导出，添加简单的注解标识实现数据的导入、导出，并与农业农村行业紧密结合，在导入数据时读取每个单元格的数据，通过语义分析识别数据，与资料库的数据进行对比，经过算法算出匹配度较高的数据信息，并与上传的数据主外键关联，实现农业农村相关的数据关联；

简化了通过EXCEL导入、导出农业农村行业数据进作数据归集功能，

步骤S2：注解数据归集的步骤，该步骤中注解名为@ExcelOper,在需要归集和导出数据的JavaBean属性上标识上注解，利用POI读取EXCEL的值，将Excel的列与JavaBean添加注解说明属性绑定，使用JAVA的反射机制给JavaBean赋值；分析已赋值的JavaBean，通过语义分析从资料库中获取到与导入数据相匹配的数据，并以导入数据为主数据的方式进行数据关联；

步骤S3：注解导出数据的步骤，该步骤中在需要导出的数据的JavaBean的属性上添加注解标志，导出时读取当前JavaBean的属性，根据属性生成Excel文件，根据注解上的名称作为Excel表格列名，读取JavaBean的数据，并将数据填到对应的EXCEL单元格，完毕后返回Excel文件流。整个导出过程只需在JavaBean上添加上注解说明即可。

作为优选，所述的步骤S1中，分析数与之匹配度最高的分类，将数据打上数据标签，实现数据的自动分类。

作为优选，所述的步骤S1中，分析每列字符使用字典判断工具类，自动识别字典列，将数据转换成相应的字典，供统计、分析、查询使用。

作为优选，所述的步骤S2中，通过语义分析从资料库中获取到与导入数据相匹配的数据包括图片、产地、视频、安全指标、生产周期或加工周期。

作为优选，所述的步骤S2中，导入过程中同时自动分类，将产品信息分为种植业、畜牧业、渔业、林业大类，同时将数据打标签，如热销产品、季节性产品、地理标志性产品等。

本发明的有益效果在于，通过注解简了EXCEL文件导入、导出，使用时无需过多的开发，节约开发成本。紧密与农业农村行业数据进行关联，改变通常只上传单条数据，本发明会将上传的数据作语义分析后将单件数据变成为成套丰富数据，减少了数据上传上后对数再进行归集的过程。归集数据后，单一的数据成为一套数据，成套的数据供农村基础设施建设方面、农业环境保护方面、农产品质量安全方面或在农业电商方面使用，从而增加农产品的经济效益。

此外，本发明设计原理可靠，结构简单，具有非常广泛的应用前景。

由此可见，本发明与现有技术相比，具有突出的实质性特点和显著地进步，其实施的有益效果也是显而易见的。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1是本发明提供的一种实现数据导入时自动归集和导出的系统的原理框图。

图2是本发明提供的一种实现数据导入时自动归集和导出的方法的流程图。

其中，1-自定义注解模块，2-注解数据归集模块，3-注解导出数据模块。

具体实施方式

下面结合附图并通过具体实施例对本发明进行详细阐述，以下实施例是对本发明的解释，而本发明并不局限于以下实施方式。

实施例1：

如图1所示，本实施例提供的一种实现数据导入时自动归集和导出的系统，包括：

自定义注解模块1，该模块利用java的注解并结合POI，对数据进行归集和导出，添加简单的注解标识实现数据的导入、导出，并与农业农村行业紧密结合，在导入数据时读取每个单元格的数据，通过语义分析识别数据，与资料库的数据进行对比，经过算法算出匹配度较高的数据信息，并与上传的数据主外键关联，实现农业农村相关的数据关联；

简化了通过EXCEL导入、导出农业农村行业数据进作数据归集功能，所述的自定义注解模块1中，分析数与之匹配度最高的分类，将数据打上数据标签，实现数据的自动分类。所述的自定义注解模块1中，分析每列字符使用字典判断工具类，自动识别字典列，将数据转换成相应的字典，供统计、分析、查询使用。

注解数据归集模块2，该模块中注解名为@ExcelOper,在需要归集和导出数据的JavaBean属性上标识上注解，利用POI读取EXCEL的值，将Excel的列与JavaBean添加注解说明属性绑定，使用JAVA的反射机制给JavaBean赋值；分析已赋值的JavaBean，通过语义分析从资料库中获取到与导入数据相匹配的数据，并以导入数据为主数据的方式进行数据关联；所述的注解数据归集模块2中，通过语义分析从资料库中获取到与导入数据相匹配的数据包括图片、产地、视频、安全指标、生产周期或加工周期。所述的注解数据归集模块2中，导入过程中同时自动分类，将产品信息分为种植业、畜牧业、渔业、林业大类，同时将数据打标签，如热销产品、季节性产品、地理标志性产品等。

注解导出数据模块3，该模块中在需要导出的数据的JavaBean的属性上添加注解标志，导出时读取当前JavaBean的属性，根据属性生成Excel文件，根据注解上的名称作为Excel表格列名，读取JavaBean的数据，并将数据填到对应的EXCEL单元格，完毕后返回Excel文件流。整个导出过程只需在JavaBean上添加上注解说明即可。

实施例2：

如图2所示，本实施例提供一种实现数据导入时自动归集和导出的方法，包括以下步骤：

步骤S1：自定义注解的步骤，该步骤利用java的注解并结合POI，对数据进行归集和导出，添加简单的注解标识实现数据的导入、导出，并与农业农村行业紧密结合，在导入数据时读取每个单元格的数据，通过语义分析识别数据，与资料库的数据进行对比，经过算法算出匹配度较高的数据信息，并与上传的数据主外键关联，实现农业农村相关的数据关联；

简化了通过EXCEL导入、导出农业农村行业数据进作数据归集功能，所述的步骤S1中，分析数与之匹配度最高的分类，将数据打上数据标签，实现数据的自动分类。所述的步骤S1中，分析每列字符使用字典判断工具类，自动识别字典列，将数据转换成相应的字典，供统计、分析、查询使用。

步骤S2：注解数据归集的步骤，该步骤中注解名为@ExcelOper,在需要归集和导出数据的JavaBean属性上标识上注解，利用POI读取EXCEL的值，将Excel的列与JavaBean添加注解说明属性绑定，使用JAVA的反射机制给JavaBean赋值；分析已赋值的JavaBean，通过语义分析从资料库中获取到与导入数据相匹配的数据，并以导入数据为主数据的方式进行数据关联；所述的步骤S2中，通过语义分析从资料库中获取到与导入数据相匹配的数据包括图片、产地、视频、安全指标、生产周期或加工周期。所述的步骤S2中，导入过程中同时自动分类，将产品信息分为种植业、畜牧业、渔业、林业大类，同时将数据打标签，如热销产品、季节性产品、地理标志性产品等。

步骤S3：注解导出数据的步骤，该步骤中在需要导出的数据的JavaBean的属性上添加注解标志，导出时读取当前JavaBean的属性，根据属性生成Excel文件，根据注解上的名称作为Excel表格列名，读取JavaBean的数据，并将数据填到对应的EXCEL单元格，完毕后返回Excel文件流。整个导出过程只需在JavaBean上添加上注解说明即可。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的方法而言，由于其与实施例公开的系统相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

在本发明所提供的几个实施例中，应该理解到，所揭露的系统、系统和方法，可以通过其它的方式实现。例如，以上所描述的系统实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，系统或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能模块可以集成在一个处理单元中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个单元中。

同理，在本发明各个实施例中的各处理单元可以集成在一个功能模块中，也可以是各个处理单元物理存在，也可以两个或两个以上处理单元集成在一个功能模块中。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上公开的仅为本发明的优选实施方式，但本发明并非局限于此，任何本领域的技术人员能思之的没有创造性的变化，以及在不脱离本发明原理前提下所作的若干改进和润饰，都应落在本发明的保护范围内。