[发明专利]一种数据库表内容快速比对系统

说明书

本发明提供一种数据库表内容快速比对系统，属于Java Web应用开发及SQL数据库表领域，本发明加入了Web前端页面，能够进行两个不同数据库表中字段的自由选择，配对比较，并且通过异步同时计算CRC32值并默认存储，大幅提高了比对速度，同时通过使用全量比对，大大增加了两个表内容比对的正确率。

技术领域

本发明涉及Java Web应用开发及SQL数据库表领域，尤其涉及一种数据库表内容快速比对系统。

背景技术

在数据库中，两个表内容的比对在当前的数据库迁移和数据库表内容比较差异中具有非常重要的作用，特别针对于百万，千万甚至上亿的数据量的表。当前许多市面上的数据库比对工具，比较数据库中的两张相同表结构的表内容的方法，大致通过sql语法组合拼接sql语句进行全量对比，这种方式虽然可以保证比对的高正确率，但是受制于表结构的统一，不能够对于两张不同表结构的内容进行比较，其次不能自由选择比对表各自所需要的字段，使用起来十分不便，往往不能满足用户比对的需求。其次，对于呈千万级别或者上亿级别的两个表的数据对比，效率十分低下，造成用户体验不佳。

发明内容

为了解决以上技术问题，本发明提供了一种数据库表内容快速比对系统，旨在保证两个表内容全量对比的基础之上，解决两表结构不统一和比对速度低下的问题，实现一种保持高正确率而快速进行表内容比对的目标。

本发明的技术方案是：

本发明提供了一种数据库表内容快速比对系统，目的是在保证两个表内容全量对比的基础之上，应用Java Web开发，比对用户所选择的数据内容，提高用户体验，解决两表结构不统一和大量数据下比对速度低下的难题。

在交互过程中包含三个方面：Html页面，默认数据库，应用服务器层。

其中，

Html页面即网页前端页面，主要用途是系统和用户的交互。

默认数据库是服务器层后端所默认链接的数据库，主要用途是建立目标表CRC32存储表和源表CRC32存储表(CRC32存储表的数据结构设计为：库表地址名，表名，批次号，创建时间，任务名称，主键最小值，主键最大值，CRC32值)，并用来存储源表和目标表的计算结果及相关。

应用服务层的主要工作模块是数据库的链接，表名字段名的获取，controller层的异步并行计算CRC32值，数据库的创建插入和具体内容差异逻辑上的比较。

进一步的，

Html页面输入源数据库和目标数据库的地址，端口，用户名和密码，将这些信息发送到应用服务器。应用服务器使用jdbc分别连接源数据库和目标数据库，通过本发明拼接的sql分别获取两个数据库每个表名称，并回传到html页面。接下来，Html页面上所选择要对比的两个表格会请求应用服务器层，应用服务器层通过拼接好的sql获得源库和数据库的字段名，类型，长度；其中非常重要的一点是获得两个表的主键，通过确保两个主键类型和长度一致来确保两个表的主键可以唯一确定；将字段名(不包含主键名)回传到Html页面，并在主页显示；分别通过html的文本框，先选择源数据库表的字段，然后选择目标数据库表的字段，点击映射按钮，将源表字段名-目标表字段名这种格式添加到第三个html文本框(起名映射关系)；将所需要映射的字段逐一添加到映射表文本框；通过数据对比按钮将映射关系发送到应用服务层，应用服务器将映射关系拆解为源表字段和目标表字段。