[发明专利]数据分析方法、装置、服务器和可读存储介质在审
申请号: | 202110098658.0 | 申请日: | 2021-01-25 |
公开(公告)号: | CN112966808A | 公开(公告)日: | 2021-06-15 |
发明(设计)人: | 唐玏 | 申请(专利权)人: | 咪咕音乐有限公司;咪咕文化科技有限公司;中国移动通信集团有限公司 |
主分类号: | G06N3/04 | 分类号: | G06N3/04;G06N3/08;G06F16/28 |
代理公司: | 上海晨皓知识产权代理事务所(普通合伙) 31260 | 代理人: | 成丽杰 |
地址: | 610000 四川省成都市高新区交子大道57*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 分析 方法 装置 服务器 可读 存储 介质 | ||
本发明实施例涉及数据分析领域,公开了一种数据分析方法、装置、服务器和可读存储介质。本发明中,获取数据表调用流程序列;根据所述数据表调用流程序列,生成序列长度一致的调用新序列;将所述调用新序列输入预先设置的神经网络进行训练,获得关系矩阵;对所述关系矩阵进行处理,获取数据表之间的关系值;根据所述数据表之间的关系值,构成冷热关系热力图,以对数据进行分析。更加准确的确定数据表之间的调用关系,提高分析结论的准确性。
技术领域
本发明实施例涉及数据分析领域,特别涉及数据分析方法、装置、服务器和可读存储介质。
背景技术
在数据仓库中,一般是从各业务系统的数据库中同步原始数据,作为数据仓库的贴源层数据表,是后续数据仓库上层数据模型建设的基础。为了更好的做数据资产管理,需要判断各个贴源层数据表的冷热度,对于热度高(即重要性高)的数据表做重点监控。
相关技术一般是通过数据表在数据处理过程中被调用的频次来判断数据表的冷热度,但仅统计调用的频次的方法比较单一,不足以准确反映数据表的冷热度,对数据表的重要性判断可能产生误差。
发明内容
本发明实施方式的目的在于提供一种数据分析方法、装置、服务器和可读存储介质,更加准确的确定数据表之间的调用关系,提高分析结论的准确性。
为解决上述技术问题,本发明的实施方式提供了一种数据分析方法,包括以下步骤:
获取数据表调用流程序列;
根据所述数据表调用流程序列,生成序列长度一致的调用新序列;
将所述调用新序列输入预先设置的神经网络进行训练,获得关系矩阵;
对所述关系矩阵进行处理,获取数据表之间的关系值;
根据所述数据表之间的关系值,构成冷热关系热力图,以对数据进行分析。
本发明的实施方式还提供了一种数据分析装置,包括:
获取模块,用于获取数据表调用流程序列;
序列处理模块,用于根据所述数据表调用流程序列,生成序列长度一致的调用新序列;
网络训练模块,用于将所述调用新序列输入预先设置的神经网络进行训练,获得关系矩阵;
关系计算模块,用于对所述关系矩阵进行处理,获取数据表之间的关系值;
分析模块,用于根据所述数据表之间的关系值,构成冷热关系热力图,以对数据进行分析。
本发明的实施方式还提供了一种服务器,包括:至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行任一所述的数据分析方法。
本发明的实施方式还提供了一种计算机可读存储介质,所述计算机程序被处理器执行时实现任一项所述的数据分析方法。
本发明实施方式相对于相关技术而言,不单纯的采用调用次数来作为数据表之间的关系的评判依据,通过预先设置的神经网络得到数据表之间的关系,比传统的紧密度判断方法更加的精准,避免了一些数据表尽管调用次数较多但并不紧要的情况发生。并通过数据表之间的关系值构成热力图,通过热力图可以看出数据表时间的紧密关系,使对数据的分析更清晰更直观。采用数学方法将各个数据表之间的调用关系紧密度信息量化,并通过运算得到各个数据表之间的关系值。这个关系值不光包含了数据表的调用频次,更重要的还包含了各个数据表之间的紧密共现,通过热力表可以更准确地反映数据表的热力程度,为后续重点监控保障提供依据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于咪咕音乐有限公司;咪咕文化科技有限公司;中国移动通信集团有限公司,未经咪咕音乐有限公司;咪咕文化科技有限公司;中国移动通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110098658.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种产后下奶的中药组合物及其制备方法
- 下一篇:一种妇科检查床
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置