[发明专利]一种基于CMSP的空间数据增量更新方法

权利要求书

1.一种基于CMSP的空间数据增量更新方法，其特征在于，

先配置需要监听的数据库表，创建CMSP任务，监听捕获变化数据放入topic消息队列中，定时从消息队列中读取和解析消息，并将变化的数据更新到目标库中；

主要包括以下步骤：

1）空间增量数据的发现；

2）增量数据的获取；

3）增量数据的处理；

4）增量数据入库；

5）增量更新的机制；

6）增量更新任务的监控；

空间增量数据的发现：配置需要监测的数据库和表信息，创建CMSP任务，并将监测的数据写入对应的topic消息队列中；

增量数据的获取：读取并解析topic中的消息，根据定义好的消息格式，解析消息，获取增量数据；

增量数据的处理：根据解析的内容，重新组织数据，形成一条消息作为任务发送到kafka中；

增量数据入库：并发的从kafka中获取任务，判断数据处理操作，如果是删除操作，直接调用arcgis的删除接口删除数据，如果是修改和增加数据则调用相关接口修改和增加目标库中的数据；

增量更新的机制：支持定时更新和手动更新，定时更新是在任务页面配置定时执行时间，或者在任务列表页面点击执行按钮进行数据更新；

增量更新任务的监控：空间数据增量更新的监控主要分为两块，CMSP任务的监控和nifi增量任务的监控，CMSP任务监控CMSP任务是否正常执行，是否监测到空间数据的变化，nifi增量任务监控主要是监控增量数据是否被正确处理并入库。

2.根据权利要求1所述的方法，其特征在于，

采用B/S架构，通过页面配置完成空间数据的增量抽取。