[发明专利]一种面向建筑结构试验的异构数据融合方法

说明书

本发明公开了一种面向建筑结构试验的异构数据融合方法。不同采集器将采集数据通过各种现场总线传输给上位机，并由上位机接收，然后不同上位机通过异构数据处理程序建立TCP连接将原始数据发送给本地处理软件。最后本地处理软件对各种采集器的数据进行处理，输出特定统一的JSON数据，并进行统一数据存储。本发明提供的面向建筑结构试验的异构数据融合方法在数据接收层面上进行，能对不同类型的数据进行同步接收和存储，能在关系型数据库中结构化数据和非结构化数据对应的JSON数据进行共同关联查询，能实现分析不同采集器的不同性质采集数据之间的关系，实现了同步接收数据并高效存储。

技术领域

本发明涉及了一种建筑数据融合方法，尤其是涉及一种面向建筑结构试验的异构数据融合方法。

背景技术

建筑结构试验是建筑在结构设计、施工和研究过程中的重要环节，通过建筑结构试验可以检测结构设计是否安全可靠。建筑结构试验使用各种采集器对现场数据进行采集,不同厂商生产的采集器需要安装相应的上位机来进行数据采集和接收。由于各种上位机分别进行数据接收和存储，造成各种数据之间相互隔离，不利于对试验数据的统一管理和分析，因此需要设计一种异构数据融合方法将各种采集器的采集数据统一存储。

现有的异构数据融合方法包括联邦数据库法，数据仓库法，虚拟数据库法等等。这些方法大多在数据库层面上进行数据融合，即数据源为各个数据库，且各自存在不足之处，例如联邦数据库法对于数据源的可扩展性很差，数据仓库法对于数据查询的实时性不高，虚拟数据库法的数据查询过程较为复杂。由于在建筑结构试验中，数据源为各种上位机的接收到的实时数据，因此这些方法并不适用。

发明内容

本发明的目的在于提供一种面向建筑结构试验的异构数据融合方法，利用采集器采集试验数据，利用上位机进行数据接收，利用异构数据处理程序将各种原始数据处理成特定统一的JSON数据，最后进行数据的统一存储。

本发明的目的是通过以下技术方案来实现的：

不同采集器将采集数据通过各种现场总线传输给上位机，并由上位机接收，然后不同上位机通过异构数据处理程序建立TCP连接将原始数据发送给本地处理软件。最后本地处理软件对各种采集器的数据进行处理，输出特定统一的 JSON数据，并进行统一数据存储。

本发明的有益效果是：

本发明提供的面向建筑结构试验的异构数据融合方法在数据接收层面上进行。各种上位机接收到采集数据时，将原始数据发送到本地处理软件(一种异构数据处理程序)，本地处理软件将原始数据处理成特定统一的JSON数据，从而消除数据的异构性，最后将JSON数据存储至关系型数据库中。

本发明方法能对不同类型的数据进行同步接收和存储，能在关系型数据库中结构化数据和非结构化数据对应的JSON数据进行共同关联查询，能实现分析不同采集器的不同性质采集数据之间的关系。

本发明能实时接收各采集器的数据并同步转化为特定统一的JSON数据形式；将这些实时数据缓存在本地，并对每个采集器的JSON数据进行合并；最后调用数据库的存储过程对JSON数据进行批量数据存储，实现了同步接收数据并高效存储。

附图说明

图1是本发明所搭建的数据融合系统结构示意图；

图2是本发明异构数据处理程序的流程图。

具体实施方式

下面结合附图和具体的实施例对本发明技术方案作进一步的详细描述。

本发明具体实施如下：

步骤1：建筑结构试验现场部署各种传感器，传感器的采集数据通过采集器接收并传输到上位机上，所有的采集器和上位机通过交换机连接在同一个局域网内；

步骤2：对于每个厂家生产的采集器，上位机上安装对应的上位机软件，上位机软件控制采集器进行数据采集，并接收原始数据；