[发明专利]一种不动产数据整合系统及方法

说明书

本发明公开了一种不动产数据整合系统及方法，涉及数据处理领域。本发明包括：不动产单元中设有多种数据库；不动产数据整合单元包括：数据采集模块采集多种数据库信息并数字化处理；数据抽取模块对采集到的数据进行抽取；数据清洗模块清洗出有效数据；数据转换模块根据转换规则将有效数据进行转换；数据加载模块将匹配完成的数据进行加载的；服务器包括用于存储数据的不动产正式数据库和向智能终端发送信息的通信模块。本发明通过对不同系统和多种数据库内的不动产数据进行整合，利用数据的采集、抽取、清洗、转换、匹配和加载将所有数据整合到新的数据库内，简化了数据整合的步骤，提高了数据整合的效率，给工作人员带来了极大方便。

技术领域

本发明属于数据处理领域，特别是涉及一种不动产数据整合系统及方法。

背景技术

目前各地在土地调查、土地登记、房产调查测绘、房屋产权管理等业务中所生产的基础数据库类数据多数情况下是依赖于某个特定应用系统，所生成的数据高度依赖于特定的软件应用系统，只能在特定软件中或特定的业务系统中才能使用，无法供外部应用，导致数据丧失了其本该具有的独立于业务的特性。

在分散登记背景下的多种业务数据来源、多种介质来源的数据分别遵循各自相关的行业标准，有时同一种业务在不同时期，会对应不同的业务标准，无疑给数据整合造成了非常大的难度，主要表现为标准不一、数据精度不一、数据要素不齐全、没有关联、历史数据复杂。

综上，因不动产的多源异构、多业务多时点、无业务独立性等特点，在房产和土地登记数据整合过程中，必然涉及数据模式不匹配、数据内容不唯一、语义冲突等问题。

发明内容

本发明的目的在于提供一种不动产数据整合系统及方法，通过对不同系统和多种数据库内的不动产数据进行整合，利用数据的采集、抽取、清洗、转换、匹配和加载将所有数据整合到新的数据库内，解决了现有的不动产数据系统种类多、数据分散带来的整合困难、依靠编程整合难度大，费时费力的问题。

为解决上述技术问题，本发明是通过以下技术方案实现的：

本发明为一种不动产数据整合系统，包括不动产单元、不动产数据整合单元、服务器和智能终端，所述不动产数据整合单元分别与不动产单元和服务器连接；所述服务器与智能终端无线连接；所述不动产单元包括若干种数据库；所述不动产数据整合单元包括：用于采集不动产单元中多种数据库信息并进行数字化处理的数据采集模块；用于对采集到的数据进行抽取的数据抽取模块；用于根据清洗规则清洗出有效数据的数据清洗模块；用于根据转换规则将有效数据进行转换的数据转换模块；用于根据定义规则进行匹配的规则匹配模块；用于将匹配完成的数据进行加载的数据加载模块；所述服务器包括用于将加载完成的数据存储到不动产正式数据库和向智能终端发送信息的通信模块。

优选地，所述智能终端包括智能手机、PC机和平板电脑。

本发明为一种不动产数据整合方法，包括如下步骤：

其中，数据抽取包括如下步骤：

S101采集的数据进行字段映射；

S102对映射的字段进行关联得到原始中转数据；

S103判断原始数据是否需要增量；

若是，则执行步骤S104；

若否，则执行步骤S105；

S104对元数据进行增量抽取，得到待清洗数据；

S105对元数据进行全量抽取，到的待清洗数据；

其中，数据清洗包括如下步骤：

S201设置清洗规则，将元数据进行规范化处理；

S202根据清洗规则对需要的数据进行替换得到干净的中转数据；