[发明专利]数据库变更数据的处理方法、装置、计算机设备和介质在审
申请号: | 202110601826.3 | 申请日: | 2021-05-31 |
公开(公告)号: | CN113377789A | 公开(公告)日: | 2021-09-10 |
发明(设计)人: | 钱威 | 申请(专利权)人: | 上海数禾信息科技有限公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/22 |
代理公司: | 北京市万慧达律师事务所 11111 | 代理人: | 刘锋;邱忠贶 |
地址: | 201206 上海市浦东新区自*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据库 变更 数据 处理 方法 装置 计算机 设备 介质 | ||
本申请涉及计算机领域,具体涉及一种数据库变更数据的处理方法、装置、计算机设备和存储介质。所述方法包括:实时拉取指定数据库生成的数据变更日志,将拉取到数据变更日志解析为变更数据,再按照预设关键字对变更数据进行过滤,在从变更数据中过滤得到用于变更数据的操作语句时,从变更数据中解析出与过滤得到的操作语句中的各条操作语句对应的变更信息,以及各条变更信息对应的存储位置信息,最后将各条变更信息处理为符合历史数据库的数据结构要求的变更记录,并存储至历史数据库中的与其存储位置信息对应的数据表中。本发明实施例能够在不影响数据库自身业务的情况下,便捷地取得变更数据。
技术领域
本申请涉及计算机领域,特别是涉及一种数据库变更数据的处理方法、装置、计算机设备和存储介质。
背景技术
以下陈述仅提供与本发明有关的背景信息,而不必然地构成现有技术。
通常数据库只存储最新的数据,然而为了审计数据,还需要对历史的变更数据进行分析。现有的用于管理变更数据的方案有,对数据库接收到的SQL(Structured QueryLanguage,结构化查询语言)进行拦截和分析,当分析出该SQL会变更数据时,进而提取出该SQL所要操作的数据表的信息、所要操作的数据的信息,然后记录到历史表中,其中的拦截SQL的方式会导致数据库对该SQL的响应速度变慢。
发明内容
本发明针对上述不足或缺点,提供了一种数据库变更数据的处理方法、装置、计算机设备和存储介质,本发明实施例能够在不影响数据库自身业务的情况下,便捷地取得变更数据。
本发明根据第一方面提供了一种数据库变更数据的处理方法,在一个实施例中,该方法包括:
实时拉取指定数据库生成的数据变更日志,将拉取到数据变更日志解析为变更数据;
按照预设关键字对变更数据进行过滤,在从变更数据中过滤得到用于变更数据的操作语句时,从变更数据中解析出与过滤得到的操作语句中的各条操作语句对应的变更信息,以及各条变更信息对应的存储位置信息;
将各条变更信息处理为符合历史数据库的数据结构要求的变更记录,并存储至历史数据库中的与其存储位置信息对应的数据表中。
在一个实施例中,从变更数据中解析出各条变更信息对应的存储位置信息的步骤,包括:
从变更数据中解析出各条操作语句对应的数据库实例名、数据库名和数据表名;
通过各条操作语句对应的数据库实例名、数据库名和数据表名映射得到各条操作语句对应的历史数据表名,将各条操作语句对应的历史数据表名作为该各条操作语句对应的变更信息的存储位置信息。
在一个实施例中,该方法还包括:
定时查询指定数据库的索引,以及历史数据库的索引;
将指定数据库的索引和历史数据库的索引进行比较,并根据比较得到的结果对指定数据库和历史数据库的索引进行同步。
在一个实施例中,将指定数据库的索引和历史数据库的索引进行比较,并根据比较得到的结果对指定数据库和历史数据库的索引进行同步的步骤,包括:
将指定数据库的索引和历史数据库的索引进行比较,确定出指定数据库的索引和历史数据库的索引之间的交集;
删除历史数据库的索引中的不属于交集的索引;
将指定数据库的索引中的不属于交集的索引,新增至历史数据库中。
在一个实施例中,该方法还包括:
接收来自用户端的携带有查询条件的查询请求;
根据历史数据库的索引从历史数据库中查询与查询条件符合的变更信息;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海数禾信息科技有限公司,未经上海数禾信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110601826.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种配电网故障重构辅助设备
- 下一篇:一种压缩垃圾车
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置