[发明专利]用于多数据库分离的智能分析业务方法、系统及介质

说明书

本发明公开了一种用于多数据库分离的智能分析业务方法，包括：对前端业务的访问请求进行语义分析，根据语句类型对访问请求进行分类；对访问对象情况进行分析，得到对象分析结果；根据所述对象分析结果进行分析生成访问策略；根据语句类型执行相对应的访问策略，对语句访问对象信息进行记录，生成访问频率表；定期智能分析访问频率表中的对象的访问频率，根据访问频率设置的百分比阈值生成相应的迁移策略和确定迁移的对象。本发明的有益效果：对业务访问的数据进行分类和智能分析，能自动分析和探测业务处理数据库对象的访问频率及访问内容，生成数据迁移策略，实现多数据库的数据物理分离、读写分离。

技术领域

本发明涉及数据处理技术领域，具体涉及一种用于多数据库分离的智能分析业务方法、系统及介质。

背景技术

目前大型企业的核心信息化交易系统主要以关系型数据库为主，通过关系型数据库对业务数据进行增删改查操作来实现复杂的业务逻辑，信息化系统的数据库容量基本超过TB级，甚至达PB级。核心数据库中单表数据高达到100G以上，有的甚至达TB级以上，大表查询往往影响数据库的查询效率，影响业务处理流程，系统性能大大降低。

系统设计初期，数据库存储容量规划缺乏有效的数据依据，信息系统设计人员对业务的后期数据增长量评估不准确，导致数据库的存储容量无法承载业务数据。前期规划中存储硬件比较旧，存储硬件支持的容量存在局限性，数据库无法扩容存储，因而需要人工对生产数据库进行人工转储或清理，需要耗费大量的人力及时间成本。同时还需要承担人为误操作而带来的损失；数据迁移之后，前台业务需要通过DBLINK跨数据库的方式对数据进行访问，不但加大了数据库管理员的维护难度，而且严重影响业务系统的性能。

人工对数据库表数据进行数据转储，需要业务人员对预转储的表进行评估，根据业务的访问频率及前台业务需要查询周期来评判该表是否满足转储条件，而核心数据库中表的数量多达上百张，无法对所有表进行评估，因而只有少量的表可进行转储。

发明内容

针对现有技术中的缺陷，本发明实施例提供一种用于多数据库分离的智能分析业务方法、系统及介质，对业务访问的数据进行分类和智能分析，能自动分析和探测业务处理数据库对象的访问频率及访问内容，实现多数据库的数据物理分离、读写分离。

第一方面，本发明实施例提供的一种用于多数据库分离的智能分析业务方法，包括：

对前端业务的访问请求进行语义分析，根据语句类型对访问请求进行分类；

对访问对象情况进行分析，得到对象分析结果；

根据所述对象分析结果进行分析生成访问策略；

根据语句类型执行相对应的访问策略，对语句访问对象信息进行记录，生成访问频率表；

定期智能分析访问频率表中的对象的访问频率，根据访问频率设置的百分比阈值生成相应的迁移策略和确定迁移的对象。

可选地，语句类型包括查询语句和更新语句。

可选地，方法还包括：根据访问策略确定访问的目标数据库。

可选地，所述根据语句的类型执行相对应的访问策略的具体方法包括：

若语句类型为查询语句，则判断查询语句所需的访问数据是否存储在数据缓存区，若是，则直接返回用户访问的数据；若否，则从目标数据库中将访问的数据加载到数据缓存区，再向用户返回访问的数据；

若语句类型为更新语句，则判断更新语句所需的数据块是否存储在数据缓存区，若是，则在数据缓存区更新数据；若否，则将更新的数据写入目标数据库。

第二方面，本发明实施例提供的一种用于多数据库分离的智能分析业务系统，包括语义分析模块、对象分析模块、访问策略生成模块、访问频率表生成模块和迁移策略生成模块，