[发明专利]兼容性数据导入的线索分析方法、系统及可读存储介质

权利要求书

1.一种兼容性数据导入的线索分析方法，其特征在于，所述方法包括：

定义多种数据类型，根据所定义的数据类型对提供的数据进行结构化处理；

对结构化数据通过预设字段解析规则进行清洗并存储到搜索引擎服务器；

通过关键字和/或类型查询并历遍所述结构化数据，汇总在历遍所述结构化数据中的搜索路线并展示查询的所有关联数据信息。

2.根据权利要求1所述的兼容性数据导入的线索分析方法，其特征在于，所述定义多种数据类型步骤之前，所述方法还包括：

定义数据源，所述数据源包括数据提供方式、每一所述数据提供方式的数据接入信息，并针对每一数据源设置数据拉取频率及每次拉取量。

3.根据权利要求2所述的兼容性数据导入的线索分析方法，其特征在于，所述数据源包括数据库、FTP服务器、SFTP服务器以及端口上传文件；所述方法还包括：预先设置数据接入的数据库信息；预先设置FTP服务器、SFTP服务器的信息并采集所述FTP服务器、所述SFTP服务器的预设目录内的数据，若是接入数据是文件类型则通过数据上传端口上传。

4.根据权利要求1所述的兼容性数据导入的线索分析方法，其特征在于，所述根据所定义的数据类型对提供的数据进行结构化处理的还包括：

根据每一种数据类型的映射关系将非结构化数据转化成结构化数据，当无法结构化时，存储原始内容并提供全文检索。

5.根据权利要求1所述的兼容性数据导入的线索分析方法，其特征在于，所述根据所定义的数据类型对提供的数据进行结构化处理的步骤包括：

所述数据类型至少包括txt 、xls 、xlsx 、rar 、tar、gz 、zip 、jpg 、png、doc、docx 、pdf；

针对每一所述数据类型设置数据名称、数据存储的表名、字段映射关系、字段解析规则，从而建立结构化映射关系。

6.根据权利要求5所述的兼容性数据导入的线索分析方法，其特征在于，

当所述数据类型是txt文档时，所述结构化处理步骤包括：

读取txt文件内容，通过回车符将内容拆分为若干行；

识别列信息，从第一行开始使用预设分隔符\t, ,, , -, |进行分割，直到找到映射关系中的列名，保存列信息，此时下一行作为数据内容的开始行；

从开始行逐行解析为数据内容；

当所述数据类型是xls文件或xlsx文件时，所述结构化处理步骤包括：

使用读取xls文件或xlsx文件内容；

识别列信息，从第一行开始找到映射关系中的列名，此时下一行作为数据内容的开始行；

从开始行解析数据内容；

当所述数据类型是pdf文件或图片格式文件时，所述结构化处理步骤包括：

通过OCR技术识别pdf文件或图片格式文件内容，通过回车符将内容拆分为若干行；

识别列信息，从第一行开始使用预设分隔符\t, ,, , -, |进行分割，直到找到映射关系中的列名，保存列信息，此时下一行作为数据内容的开始行；

从开始行逐行解析为数据内容。

7.根据权利要求1所述的兼容性数据导入的线索分析方法，其特征在于，所述对结构化数据通过预设字段解析规则进行清洗并存储到搜索引擎服务器还包括：

在预设字段解析规则时，通过自定义方式给字段打上业务标签。

8.根据权利要求1所述的兼容性数据导入的线索分析方法，其特征在于，所述通过关键字和/或类型查询并历遍所述结构化数据，汇总在历遍结构化数据中的搜索路线并展示查询的所有关联数据信息的步骤包括：

通过关键字和/或类型查询所述结构化数据，利用所查询到的关联数据作为线索进一步查询所述结构化数据，直至达到数据上限或者无相关数据；

汇总在历遍所述结构化数据中的搜索路线并展示找到的所有关联数据信息，并通过思维导图的方式展示分析过程和结果。