[发明专利]一种数据加工方法、装置、存储介质及电子设备在审
申请号: | 202110282084.2 | 申请日: | 2021-03-16 |
公开(公告)号: | CN113010519A | 公开(公告)日: | 2021-06-22 |
发明(设计)人: | 张胜言;陆祺;赖婉英;黎洪达;覃鹏 | 申请(专利权)人: | 建信金融科技有限责任公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 200120 上海市浦东新区中国(*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 加工 方法 装置 存储 介质 电子设备 | ||
本申请实施例公开了一种数据加工方法、装置、存储介质及电子设备。该方法包括:获取基础指标库中的基础数据;根据所述基础数据和预设聚合指标配置参数,得到目标动态表;对所述目标动态表中的数据进行加工,得到聚合数据,并将所述聚合数据存储到目标聚合表。本技术方案,可以通过预设聚合指标配置参数发起数据加工,加工后得到一个可直接使用的聚合数据,加工效率高。且使用HBASE数据库可以存储海量数据。
技术领域
本申请实施例涉及大数据处理技术领域,尤其涉及一种数据加工方法、装置、存储介质及电子设备。
背景技术
随着互联网的快速发展,大数据在人们生活的各个方面都产生了深远的影响。大数据具有海量行、多样性、数据类型繁多以及时效性要求高等特点。
图表所展示的数据就是聚合数据,需要获取基础数据加工为可用的聚合数据。目前,对大数据的存储使用Oracle数据库存储,对大数据加工需要从Oracle数据库中获取每个机构、渠道的数据单独进行加工得到聚合数据。
每个机构、渠道的数据都要加工一次,效率低。
发明内容
本申请实施例提供一种数据加工方法、装置、存储介质及电子设备,通过预设聚合指标配置参数发起数据加工,加工后得到一个可直接使用的聚合数据,加工效率高。
第一方面,本申请实施例提供了一种数据加工方法,该方法包括:
获取基础指标库中的基础数据;
根据所述基础数据和预设聚合指标配置参数,得到目标动态表;
对所述目标动态表中的数据进行加工,得到聚合数据,并将所述聚合数据存储到目标聚合表。
第二方面,本申请实施例提供了一种数据加工装置,该装置包括:
基础数据获取模块,用于获取基础指标库中的基础数据;
目标动态表得到模块,用于根据所述基础数据和预设聚合指标配置参数,得到目标动态表;
聚合数据得到模块,用于对所述目标动态表中的数据进行加工,得到聚合数据,并将所述聚合数据存储到目标聚合表。
第三方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本申请实施例所述的数据加工方法。
第四方面,本申请实施例提供了一种电子设备,包括存储器,处理器及存储在存储器上并可在处理器运行的计算机程序,所述处理器执行所述计算机程序时实现如本申请实施例所述的数据加工方法。
本申请实施例所提供的技术方案,获取基础指标库中的基础数据;根据基础数据和预设聚合指标配置参数,得到目标动态表;对目标动态表中的数据进行加工,得到聚合数据,并将聚合数据存储到目标聚合表。本技术方案,可以通过预设聚合指标配置参数发起数据加工,加工后得到一个可直接使用的聚合数据,加工效率高。
附图说明
图1是本申请实施例一提供的数据加工方法的流程图;
图2是本申请实施例二提供的数据加工过程的示意图;
图3是本申请实施例三提供的数据加工装置的结构示意图;
图4是本申请实施例五提供的一种电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部结构。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于建信金融科技有限责任公司,未经建信金融科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110282084.2/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置