[发明专利]用于多源试验数据引接处理方法

权利要求书

1.一种用于多源试验数据引接处理方法，其特征在于，包括如下步骤：

进行数据引接；

识别数据类型；

调用对应类型数据的引接模型；

启动引接处理流程。

2.根据权利要求1所述的用于多源试验数据引接处理方法，其特征在于，所述引接处理流程包括：半结构化数据引接流程、结构化数据引接流程、非结构化数据引接流程、API接口数据引接流程和实时报文数据引接流程。

3.根据权利要求2所述的用于多源试验数据引接处理方法，其特征在于，所述半结构化数据引接流程包括如下步骤：

利用第一搜索引擎连接第一数据源库；

根据具体业务需求，从第一数据源库中获取集合清单；

将集合清单接引至第一本地数据库；

其中，所述第一搜索引擎以Python技术为基础集成MongoDB数据库操作组件后构建，所述第一数据库的半结构化数据以MongoDB数据库存储为主，所述第一本地数据库为MongoDB数据库。

4.根据权利要求2所述的用于多源试验数据引接处理方法，其特征在于，所述结构化数据引接流程包括如下步骤：

利用第二搜索引擎连接第二数据源库；

根据具体业务需求，从第二数据源库中获取数据表清单；

将数据表清单利用字段转换引擎接引至第二本地数据库；

其中，所述第二搜索引擎以Python技术为基础集成各类常规数据库操作组件后构建，所述第二数据库的结构化数据包括Oracle、Mysql、sqlserver、postgresql、国产数据库(达梦)等常规数据库，所述第二本地数据库为Mysql数据库。

5.根据权利要求2所述的用于多源试验数据引接处理方法，其特征在于，所述非结构化数据引接流程包括如下步骤：

通过FTP的方式录入数据；

选择文件分类目录；

将文件资料上传至所选目录内；

将文件资料的相关信息存储至第三本地数据库；

将文件资料通过FTP服务上传到服务器；

其中，所述第三本地数据库为mysql数据库。

6.根据权利要求5所述的用于多源试验数据引接处理方法，其特征在于，所述非结构化数据的录入分为离线模式和在线模式：

所述离线模式为：用户选择文件分类目录，直接上传文件资料；

所述在线模式为：通过提供的服务连接信息，设定需要接引的文件及其存放位置，动态监控文件夹是否产生新的文件，自动将新的文件进行动态上传。

7.根据权利要求2所述的用于多源试验数据引接处理方法，其特征在于，所述API接口数据引接流程包括如下步骤：

通过接口引擎获取数据；

将获取的数据分为结构化数据和半结构化数据；

结构化数据，从第一解析组件库中选择匹配的解析组件，解析后接引至第四本地数据库；

半结构化数据，直接储存至第四本地数据库；

其中，所述第一解析组件库以Python技术为基础根据不同接口内容开发构成，所述第四本地数据库包括Mysql数据库和mongoDB数据库。

8.根据权利要求2所述的用于多源试验数据引接处理方法，其特征在于，所述实时报文数据引接流程包括如下步骤：

通过UDP获取数据，

从第二解析组件库中选择匹配的解析组件，解析后接引至第五本地数据库；

其中，所述第二解析组件库以Python为技术为基础针对不同报文格式开发构成，所述第五本地数据库为Mysql数据库。