[发明专利]一种云原生数据库统计信息智能优化系统

说明书

本发明提供一种云原生数据库统计信息智能优化系统，属于计算机软件数据库自治优化技术领域，本发明主要分为三个部分，包括控制台应用模块、采集加载模块以及数据库服务模块。其中控制台应用模块的主要功能是对云原生数据库统计信息进行分析，同时也对云原生数据库资源进行纳管以及对接采集加载模块进行控制调度；采集加载模块的主要功能是完成云原生数据库落盘数据文件的解析，并加载至数据库服务模块；数据库服务模块的主要功能是为控制台应用模块提供、存储数据信息。提高了统计信息的准确性，提高了云原生数据库查询效率。

技术领域

本发明涉及计算机软件数据库自治优化技术领域，尤其涉及一种云原生数据库统计信息智能优化系统。

背景技术

云原生数据库：云原生数据库以PaaS(平台即服务)的形式进行分发，也经常被称作DBaaS(数据库即服务)。通过资源解耦、资源池化等技术，云原生数据库具备了高扩展性、高可用性、易用性、迭代快速、成本降低等特点，能够支撑不同业务领域的应用对数据管理高性能、高并发和按需使用的需求。

统计信息：统计信息是指数据库描述表或者索引数据特征的信息，常见的有表记录条数、页面数等描述表规模的信息，以及描述数据分布特征的MCV(高频非NULL值)、HISTOGRAM(直方图)、CORRELATION等信息。

Kafka：一种分布式的高吞吐量的基于发布订阅的消息系统。以时间复杂度为O(1)的方式提供消息持久化能力，即使对TB级以上数据也能保证常数时间复杂度的访问性能。常用作多种类型的数据管道和消息系统使用。

数仓：按照一些结构、规则来组织、存放数据的数据集合，用于支持管理决策。

统计信息收集是云原生数据库自治概念中一个非常重要的功能。统计信息作用十分关键，查询优化器生成最优的执行计划时需要依据统计信息，确保统计信息的强时效性、准确性，可以使优化器就能较精确地估计出满足条件的元组数目，进而正确选择出执行效率高的查询计划，提高优化器选择的查询计划的质量，并且能够提高查询执行的效率。因此，对统计信息的收集进行优化，提高统计信息的准确性是十分必要的。

发明内容

为了解决以上技术问题，本发明提供了一种云原生数据库统计信息智能优化系统。提高了统计信息的准确性，使云原生数据库优化器能较精确地估计出满足条件的元组数目，正确选择出执行效率高的查询计划，提高了云原生数据库查询效率。同时方便云原生数据库使用者有目的性的对云原生数据库应用负载进行维护和优化。

本发明的技术方案是：

一种云原生数据库统计信息智能优化系统，分为三个部分，包括数据库服务模块、采集加载模块以及控制台应用模块；

其中

控制台应用模块，对云原生数据库统计信息进行分析，同时也对云原生数据库资源进行纳管以及对接采集加载模块进行控制调度；

采集加载模块，完成云原生数据库落盘数据文件的解析，并加载至数据库服务模块；

数据库服务模块，为控制台应用模块提供、存储数据信息。

进一步的，

所述数据库服务模块所提供的数据信息以平台化形式存储。

数据库服务模块的Nginx代理服务以及数据库服务以容器形式通过Docker部署；数仓内建有cluster表、app表、statement表、physical_plan表以及stats_profile表，提供控制台应用模块所需数据。

控制台应用模块根据数据库服务模块提供的数据信息，完成对云原生数据库统计信息的优化分析工作。

所述采集加载模块由采集工具extract模块、消息队列以及插入加载工具load模块构成。