[发明专利]一种数据整合管理方法、装置、系统和用户终端

权利要求书

1.一种数据整合管理方法，其特征在于，包括：

获取数据源中的目标数据的综合信息；

对所述综合信息进行标准化整理，得到标准化数据；

通过主索引引擎获取与所述目标数据对应的主索引，并将所述主索引与所述标准化数据绑定；

根据所述主索引导入与所述主索引绑定的所述标准化数据，并将所述标准化数据发送至服务端。

2.如权利要求1所述数据整合管理方法，其特征在于，所述“获取数据源中的目标数据的综合信息”包括：

基于数据查询方式或数据接口方式，判断所述目标数据对应的数据是否为待解析数据；

若是，则通过解析引擎对所述待解析数据进行结构化，生成综合信息。

若否，则获取数据源中的目标数据的增量变化数据，并将所述增量变化数据作为综合信息。

3.如权利要求1所述数据整合管理方法，其特征在于，所述“对所述综合信息进行标准化整理，得到标准化数据”包括：

清除所述综合信息中的无效信息；

对清除无效信息后的所述综合信息中的编码数据依据预设统一标准进行转换，得到所述标准化数据。

4.如权利要求1所述数据整合管理方法，其特征在于，所述“通过主索引引擎获取与所述目标数据对应的主索引，并将所述主索引与所述标准化数据绑定”之前，还包括：

将所述标准化数据加密传输至任务调度中心，以便于所述任务调度中心通过主索引引擎对所述主索引与所述标准化数据的绑定。

5.如权利要求1所述数据整合管理方法，其特征在于，所述“根据所述主索引导入与所述主索引绑定的所述标准化数据，并将所述标准化数据发送至服务端”，包括：

基于所述主索引，将与所述主索引绑定的所述标准化数据进行批量数据导入；

若在批量数据导入时，存在无法导入的标准化数据，则将所述无法导入的标准化数据先进行缓冲，再将缓冲后的所述无法导入的标准化数据批量提交；

将批量提交的所述标准化数据发送至服务端。

6.如权利要求5所述数据整合管理方法，其特征在于，所述“将批量提交的所述标准化数据发送至服务端”包括：

将批量提交的所述标准化数据进行入库；

若所述标准化数据存在无法入库的数据，则将无法入库的所述标准化数据进行单条插入，并通过脚本对单条插入的所述标准化数据进行自动适配；

将所述自行适配的所述标准化数据入库存储至服务端。

7.一种数据整合管理装置，其特征在于，包括：获取模块、整理模块、绑定模块和导入模块；

所述获取模块，用于获取数据源中的目标数据的综合信息；

所述整理模块，用于对所述综合信息进行标准化整理，得到标准化数据；

所述绑定模块，用于通过主索引引擎获取与所述目标数据对应的主索引，并将所述主索引与所述标准化数据绑定；

所述导入模块，用于根据所述主索引导入与所述主索引绑定的所述标准化数据，并将所述标准化数据发送至服务端。

8.一种数据整合管理系统，其特征在于，包括数据源、前置采集引擎、中心调度引擎、主索引引擎、区域数据中心和数据发布服务；

所述数据源、所述前置采集引擎和所述中心调度引擎依次连接；

所述主索引引擎和所述区域数据中心均与所述中心调度引擎连接；

所述数据发布服务与所述区域数据中心连接。

9.一种用户终端，其特征在于，包括存储器以及处理器，所述存储器用于存储数据整合管理程序，所述处理器运行所述数据整合管理程序以使所述用户终端执行如权利要求1-6中任一项所述数据整合管理方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有数据整合管理程序，所述数据整合管理程序被处理器执行时实现如权利要求1-6中任一项所述数据整合管理方法。