[发明专利]SQL日志收集分析方法及装置有效
| 申请号： | 201510982442.5 | 申请日： | 2015-12-23 |
| 公开（公告）号： | CN105653607B | 公开（公告）日： | 2019-05-07 |
| 发明（设计）人： | 刘臻;杨挺 | 申请（专利权）人： | 北京奇虎科技有限公司;奇智软件（北京）有限公司 |
| 主分类号： | G06F16/242 | 分类号： | G06F16/242;G06F11/34 |
| 代理公司： | 北京智汇东方知识产权代理事务所(普通合伙) 11391 | 代理人： | 康正德;孙晓芳 |
| 地址： | 100088 北京市西城区新*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | sql 日志 收集 分析 方法 装置 | ||
1.一种SQL日志收集分析方法，包括：
获取MySQL服务器集群的SQL全量日志，所述SQL全量日志中包括MySQL服务器集群执行过的所有SQL语句；
根据预定策略对所述SQL全量日志中的SQL语句的执行情况进行分析，得到相应的分析结果；
根据所述分析结果，给出SQL语句执行优化建议和/或数据库表结构优化建议；
其中，所述根据预定策略对所述SQL全量日志中的SQL语句的执行情况进行分析，得到相应的分析结果具体包括：
统计每种类型的SQL语句的条目个数，及每种类型的SQL语句的条目个数在所述SQL全量日志包括的所有SQL语句的条目总数中所占的百分比；
分析每个SQL语句的执行时长、返回响应的数据行数，根据每个SQL语句的执行时长及其对应的数据行数对所有的SQL语句进行排行，统计出执行时长大于第一阈值的SQL语句；
其中，所述根据所述分析结果，给出SQL语句执行优化建议和/或数据库表结构优化建议具体包括：
获取在所述所有SQL语句的条目总数中所占百分比低于第二阈值的SQL语句类型，获取与所述SQL语句类型对应的索引，给出删除所述索引以优化数据库表结构的建议和/或删除所述索引；和/或
分析造成所述执行时长大于第一预定阈值的SQL语句的执行时长大于所述第一阈值的原因，当所述原因为缺少特定索引时，给出在数据库表结构中添加所述特定索引以优化SQL语句执行的建议和/或在数据库表结构中添加所述特定索引。
2.根据权利要求1所述的方法，其中，所述获取MySQL服务器集群的SQL全量日志具体包括：
在所述MySQL服务器集群中的每个MySQL服务器上收集SQL日志并实时上传至各个所述MySQL服务器对应的中心服务器；
对各个MySQL服务器上传至所述中心服务器的SQL日志进行汇总；
定时将各个中心服务器中汇总的SQL日志上传至分布式文件系统，获取所述SQL全量日志。
3.根据权利要求1所述的方法，其中，所述获取MySQL服务器集群的SQL全量日志具体包括：
在所述MySQL服务器集群中的每个MySQL服务器上收集SQL日志并实时上传至各个所述MySQL服务器对应的中心服务器；
对各个MySQL服务器上传至所述中心服务器的SQL日志进行汇总；
当所述中心服务器中汇总后的所述SQL日志的大小达到预定阈值时，将所述SQL日志上传至分布式文件系统，获取所述SQL全量日志。
4.根据权利要求1-3任一项所述的方法，其中，所述根据预定策略对所述SQL全量日志中的SQL语句的执行情况进行分析还包括：
将所述SQL全量日志对应的结构化的数据文件映射为一张数据库表；
基于用户输入的SQL查询语句，进行SQL查询。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司;奇智软件（北京）有限公司，未经北京奇虎科技有限公司;奇智软件（北京）有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201510982442.5/1.html，转载请声明来源钻瓜专利网。
- 上一篇：分布式数据库的数据迁移方法与装置
- 下一篇：一种数据采集方法及装置
