[发明专利]报表数据处理的方法、装置、设备及可读存储介质在审
| 申请号: | 202010876752.X | 申请日: | 2020-08-27 |
| 公开(公告)号: | CN112015623A | 公开(公告)日: | 2020-12-01 |
| 发明(设计)人: | 巴铁凯 | 申请(专利权)人: | 百度时代网络技术(北京)有限公司 |
| 主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F11/34;G06F9/48 |
| 代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 朱颖;刘芳 |
| 地址: | 100085 北京市海淀区东*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 报表 数据处理 方法 装置 设备 可读 存储 介质 | ||
本申请公开了一种报表数据处理的方法、装置、设备及可读存储介质,涉及大数据、数据分析领域,具体应用于用户行为分析、用户画像、浏览器应用场景的数据分析。具体实现方案为:通过根据各报表的访问数据,确定待下线的目标表,自动识别和发现待下线的报表;通过根据所述目标表的依赖链路信息,确定所述目标表所依赖的计算任务,自动识别出待下线的报表所依赖的计算任务;通过对所述目标表及其所依赖的计算任务进行下线处理,在下线报表时自动进行下线报表所依赖的计算任务的下线,能够节省大量的存储资源和计算资源,提高资源利用率。
技术领域
本申请涉及数据处理中的大数据、数据分析领域,尤其涉及一种报表数据处理的方法、装置、设备及可读存储介质。
背景技术
在各种业务系统中,很多场景需要有专门的报表结果产出,比如活跃作者监控、竞对指标监控等,报表分析承担着非常重要的内容运营决策任务。报表的产出通常依赖于许多大数据分析的计算任务,会占用一定的存储和计算资源。
随着时间的推移与业务的调整,有很多报表不再被需要,这些报表依赖的计算任务仍然在生产环境定时运行着,对存储和计算资源都会是一种浪费。目前通过人工确定下线报表,只能人工分析代码确定报表依赖的计算任务,费时费力,并且会有遗漏,仍然存在存储和计算资源的浪费。
发明内容
本申请提供了一种报表数据处理的方法、装置、设备及可读存储介质。
根据本申请的一方面,提供了一种报表数据处理的方法,包括:
根据各报表的访问数据,确定待下线的目标表;
根据所述目标表的依赖链路信息,确定所述目标表所依赖的计算任务;
对所述目标表及其所依赖的计算任务进行下线处理。
根据本申请的另一方面,提供了一种报表数据处理的装置,包括:
下线分析模块,用于根据各报表的访问数据,确定待下线的目标表;
所述下线分析模块还用于根据所述目标表的依赖链路信息,确定所述目标表所依赖的计算任务;
下线处理模块,用于对所述目标表及其所依赖的计算任务进行下线处理。
根据本申请的另一方面,提供了一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述所述的方法。
根据本申请的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行上述所述的方法。
根据本申请的另一方面,提供了一种报表数据处理的方法,包括:
根据各报表的访问数据,确定待下线的目标报表;
确定所述目标报表所依赖的计算任务;
下线所述目标报表及所依赖的计算任务。
根据本申请的技术节省了存储资源和计算资源,提高了资源利用率。
应当理解,本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征,也不用于限制本申请的范围。本申请的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本申请的限定。其中:
图1是本申请实施例提供的报表访问的人工评估与下线流程的示意图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度时代网络技术(北京)有限公司,未经百度时代网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010876752.X/2.html,转载请声明来源钻瓜专利网。





