[发明专利]GIS电网图形数据接入全业务数据中心的方法及系统

权利要求书

1.GIS电网图形数据接入全业务数据中心的方法，其特征是，包括：

步骤(1)：根据配置文件连接源端oracle数据库，然后从源端oracle数据库中读取所有表的表名；根据表名读取每张表的元数据信息；

步骤(2)：根据步骤(1)所获取的元数据信息确认包含有电网图形数据的表中MDSYS.SDO_GEOMETRY字段类型对应的字段名称为SHAPE；所述字段名称SHAPE，包括七个子字段名称；

步骤(3)：创建全业务数据中心分析域目标表：遍历步骤(1)所获取的每张表中的所有列，将MDSYS.SDO_GEOMETRY类型中所对应的步骤(2)所述的七个子字段名称转换为目标端数据库mysql的字段名称，mysql的其余字段名称与源端oracle数据库字段名称保持一致；

步骤(4)：并发执行数据抽取转换加载任务；

步骤(4)包括步骤：

步骤(41)：创建数据抽取进程池，设定进程的数量n小于步骤(1)所获取的表的数量；

步骤(42)：一个进程只负责对一张表进行数据抽取，当数据抽取进程池中的一个进程数据抽取执行完毕后再添加新的表放入到数据抽取进程池中，维持执行的进程总数为n；

步骤(43)：每个进程都根据步骤(1)所获取的分区信息、表的每个block的最大ROWID值和表的每个block的最小ROWID值对表的所有数据切分成多个子任务，然后开启多线程，每个线程一次抽取一个子任务所对应的数据量。

2.如权利要求1所述的GIS电网图形数据接入全业务数据中心的方法，其特征是，所述元数据信息，包括：表的索引信息、分区信息、表的每个block的最大ROWID值、表的每个block的最小ROWID值、表中每一列的字段名称以及每一列的字段类型。

3.如权利要求1所述的GIS电网图形数据接入全业务数据中心的方法，其特征是，字段名称SHAPE，包括：SHAPE.SDO_GTYPE、SHAPE.SDO_SRID、SHAPE.SDO_POINT.X、SHAPE.SDO_POINT.Y、SHAPE.SDO_POINT.Z、SHAPE.SDO_ELEM_INFO、SHAPE.SDO_ORDINATES七个子字段名称。

4.GIS电网图形数据接入全业务数据中心的系统，其特征是，包括：存储器、处理器以及存储在存储器上并在处理器上运行的计算机程序，所述计算机程序被处理器运行时，完成以下步骤：

步骤(1)：根据配置文件连接源端oracle数据库，然后从源端oracle数据库中读取所有表的表名；根据表名读取每张表的元数据信息；

步骤(2)：根据步骤(1)所获取的元数据信息确认包含有电网图形数据的表中MDSYS.SDO_GEOMETRY字段类型对应的字段名称为SHAPE；所述字段名称SHAPE，包括七个子字段名称；

步骤(3)：创建全业务数据中心分析域目标表：遍历步骤(1)所获取的每张表中的所有列，将MDSYS.SDO_GEOMETRY类型中所对应的步骤(2)所述的七个子字段名称转换为目标端数据库mysql的字段名称，mysql的其余字段名称与源端oracle数据库字段名称保持一致；

步骤(4)：并发执行数据抽取转换加载任务；

步骤(4)包括步骤：

步骤(41)：创建数据抽取进程池，设定进程的数量n小于步骤(1)所获取的表的数量；

步骤(42)：一个进程只负责对一张表进行数据抽取，当数据抽取进程池中的一个进程数据抽取执行完毕后再添加新的表放入到数据抽取进程池中，维持执行的进程总数为n；

步骤(43)：每个进程都根据步骤(1)所获取的分区信息、表的每个block的最大ROWID值和表的每个block的最小ROWID值对表的所有数据切分成多个子任务，然后开启多线程，每个线程一次抽取一个子任务所对应的数据量。

5.一种计算机可读存储介质，其特征是，其上存储有计算机指令，所述计算机指令被处理器运行时，完成以下步骤：

步骤(1)：根据配置文件连接源端oracle数据库，然后从源端oracle数据库中读取所有表的表名；根据表名读取每张表的元数据信息；

步骤(2)：根据步骤(1)所获取的元数据信息确认包含有电网图形数据的表中MDSYS.SDO_GEOMETRY字段类型对应的字段名称为SHAPE；所述字段名称SHAPE，包括七个子字段名称；

步骤(3)：创建全业务数据中心分析域目标表：遍历步骤(1)所获取的每张表中的所有列，将MDSYS.SDO_GEOMETRY类型中所对应的步骤(2)所述的七个子字段名称转换为目标端数据库mysql的字段名称，mysql的其余字段名称与源端oracle数据库字段名称保持一致；

步骤(4)：并发执行数据抽取转换加载任务；

步骤(4)包括步骤：

步骤(41)：创建数据抽取进程池，设定进程的数量n小于步骤(1)所获取的表的数量；

步骤(42)：一个进程只负责对一张表进行数据抽取，当数据抽取进程池中的一个进程数据抽取执行完毕后再添加新的表放入到数据抽取进程池中，维持执行的进程总数为n；

步骤(43)：每个进程都根据步骤(1)所获取的分区信息、表的每个block的最大ROWID值和表的每个block的最小ROWID值对表的所有数据切分成多个子任务，然后开启多线程，每个线程一次抽取一个子任务所对应的数据量。