一种地震波形数据存储归档管理的方法

技术领域

本发明涉及地震数据管理领域，尤其涉及一种地震波形数据存储归档管理的方法。

背景技术

地震作为自然灾害具有极大地破坏力，当前我国建立了地震监测设备和由国家至地方的地震数据网，实现对地震前后系列数据的监测，并采集到的数据自下而上的进行汇总，形成体量巨大的数据集合，面广两大的地震相关数据面行整合后临进存储整合问题。

同时，科研人员为了能够更深入的地了解地震产生的规律、分析地震涉及范围、评估灾损情况等，往往会调取以往地震波形数据进行数据调研和对比分析，但地震波形数据量较大，科研人员在存储、接收、检索和显示上等十分不便，有待于改进。

发明内容

为克服现有技术的缺点，本发明目的在于提供一种地震波形数据存储归档管理的方法。

本发明通过以下技术措施实现的，所述地震波形数据存储归档管理的方法包括：接收实时波形数据和非实时波形数据，流服务器将采集到的实时波形数据上传至实时处理系统，所述实时处理系统自动处理波形数据并将自动处理结果上传到人机交互处理系统内；所述人机交互处理系统上传地震相关数据和地震目录到网络文件系统内；所述网络文件系统将地震相关数据和地震目录数据存储设备到主机，所述主机将获得数据信息上传到AWS，所述AWS可单向或双向同步数据到主机；所述主机上挂载多个存储数据的磁盘阵列，所述磁盘阵列利用底层磁盘的接口将其每个磁盘且分为多个扇区，并监控各个扇区的情况，对上传异常的数据段，利其用冗余数据对原有的扇区重新扫描修复，自动填补AWS服务器上中断的数据，完成数据的迁移和补缺；所述数据段可以通过索引查找调用，一个所述索引对应一定时间段的连续的Miniseed格式的监测数据，所述索引按照NetCDF格式存储对应时间段的波形数据，所述时间段为一个连续的时间段，包括开始的时间和结束的时间。

作为一种优选方式，所述数据文件采用STEIM2压缩算法按通道归档波形数据，所述数据文件的归档通道依时间、台网代码、台站代码、通道代码、数据文件的级别顺序管理。

作为一种优选方式，所述索引调用数据文件时采用Miniseed格式抽取时间段波形，根据调用数据的时间(年)、台网代码、台站代码、通道代码、时间(日)的顺序分级查找。

作为一种优选方式，所述AWS在源服务器的AWS里单向同步本机没有的波形数据；将所述数据源服务器里的AWS设置为数据同步源，则两台或两台以上的AWS服务互为数据同步源实现双向数据同步。

作为一种优选方式，流服务器通过数据采集器将采集到的数据进行打包并上传到主机，所述主机按照一定的格式进行整理后发送至人机交互单元。

作为一种优选方式，所述网络文件系统允许网络中的计算机之间资源共享，本地网络文件系统的客户端可以远程读写服务器上的文件。

作为一种优选方式，还包括系统管理单元，所述系统管理单元监控基本组件运行、调度应用程序作业。

本发明提供的一种地震波形数据存储归档管理的方法，数据服务系统可以从实时数据流服务器中接收实时数据，也可以提供旧数据的在线查询下载等服务，方便地震相关数据的收集和显示；其次，按照时间顺序，采用STEIM2压缩算法，按通道归档波形数据对地震波形数据进行归档管理，方便数据迁移，高效地管理和查询地震波形数据，采用数据文件方式存储数据，为数据提供查询索引，结合地震台站观测数据的特点设计数据服务系统；同时，一个索引对应一定时间段的连续的Miniseed格式的监测数据，系统按规则查找数据文件存放路径，在相关文件中找到数据的索引，通过索引抽取时间段波形数据，快速从文件中读取相关数据段。方便科研人员有逻辑的存储和检索旧的波形数据，结构清晰的接收和显示实时数据。

附图说明

图1为本发明实施例的波形数据存储归档管理示意图；

图2为本发明实施例的索引查找波形数据示意图；

图3为本发明实施例的数据索引的格式示意图。

具体实施方式

下面结合实施例并对照附图对本发明作进一步详细说明。

一种地震波形数据存储归档管理的方法，参考图1至图2，所述地震波形数据存储归档管理的方法包括：接收实时波形数据和非实时波形数据，流服务器将采集到的实时波形数据上传至实时处理系统，所述实时处理系统自动处理波形数据并将自动处理结果上传到人机交互处理系统内；所述人机交互处理系统上传地震相关数据和地震目录到网络文件系统内；所述网络文件系统将地震相关数据和地震目录数据存储设备到主机，所述主机将获得数据信息上传到AWS，所述AWS可单向或双向同步数据到主机；所述主机上挂载多个存储数据的磁盘阵列，所述磁盘阵列利用底层磁盘的接口将其每个磁盘且分为多个扇区，并监控各个扇区的情况，对上传异常的数据段，利其用冗余数据对原有的扇区重新扫描修复，自动填补AWS服务器上中断的数据，完成数据的迁移和补缺；该方法具有数据迁移功能，也支持离线的数据同步功能，可以对512字节打包的Miniseed文件重新扫描，并自动填补AWS服务器上中断的数据。

在一实施例中，如图1和2所示，所述数据段可以通过索引查找调用，一个所述索引对应一定时间段的连续的Miniseed格式的监测数据，所述索引按照NetCDF格式存储对应时间段的波形数据，所述时间段为一个连续的时间段，包括开始的时间和结束的时间；所述数据文件采用STEIM2压缩算法按通道归档波形数据，所述数据文件的归档通道依时间、台网代码、台站代码、通道代码、数据文件的级别顺序管理；所述索引调用数据文件时采用Miniseed格式抽取时间段波形，根据调用数据的时间(年)、台网代码、台站代码、通道代码、时间(日)的顺序分级查找。一定时间段的连续的Miniseed格式的监测数据允许用户从本地采用这些文件格式进行数据加载。如图2所示，系统采用台站名而不直接使用IP地址，使配置起来逻辑更清晰，而且流服务器的日志中会给出台站名。

所述AWS在源服务器的AWS里单向同步本机没有的波形数据；将所述数据源服务器里的AWS设置为数据同步源，则两台或两台以上的AWS服务互为数据同步源实现双向数据同步。

流服务器通过数据采集器将采集到的数据进行打包并上传到主机，所述主机按照一定的格式进行整理后发送至人机交互单元。

所述网络文件系统允许网络中的计算机之间资源共享，本地网络文件系统的客户端可以远程读写服务器上的文件。

还包括系统管理单元，所述系统管理单元监控基本组件运行、调度应用程序作业。

以上是对本发明一种地震波形数据存储归档管理的方法进行的阐述，用于帮助理解本发明，但本发明的实施方式并不受上述实施例的限制，任何未背离本发明原理下所作的改变、修饰、替代、组合、简化，均应为等效的置换方式，都包含在本发明的保护范围之内。