[发明专利]大数据聚合分析方法及装置有效
申请号: | 201711319640.9 | 申请日: | 2017-12-12 |
公开(公告)号: | CN108073699B | 公开(公告)日: | 2020-06-16 |
发明(设计)人: | 姚韬;范勇杰;蒋小燕 | 申请(专利权)人: | 中国联合网络通信集团有限公司;中网威信电子安全服务有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/2455;G06F16/2457 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张子青;刘芳 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 聚合 分析 方法 装置 | ||
本发明提供一种大数据聚合分析方法及装置,本发明实施例通过将聚合分析模型分为基础模型和聚合模型两个层次,聚合分析中心接收到的订单信息至少包括目标模型的标识和目标模型对应的至少一个数据机构标识,将订单信息发送给各数据机构标识对应的数据机构,由各数据机构根据原始数据和基础模型生成中间数据,聚合分析中心汇总各数据机构的中间数据,通过目标模型的聚合模型对各中间数据进行聚合分析得到聚合分析结果,聚合分析中心无需从各数据机构批量购买或者交换原始数据,即可与各数据机构合作完成聚合分析处理过程,得到聚合分析结果,提高了各数据机构合作的积极性,简化了大数据聚合分析的流程,大大提高了聚合分析结果的时效性。
技术领域
本发明涉及大数据技术领域,尤其涉及一种大数据聚合分析方法及装置。
背景技术
随着大数据及大数据技术的发展,拥有大数据的数据机构层出不穷,大数据作为商品成为各用户交易的对象。为避免将原始数据进行分享后可能损坏自身的竞争优势,目前各数据机构大多基于自有数据采用自产自销的模式出售大数据商品。
数据机构自建聚合分析中心,聚合分析中心根据用户需求,自行开发数据分析模型,基于自有的原始数据采用自建的数据分析模型进行大数据分析,从而得到大数据分析结果,将大数据分析结果作为商品出售给用户。如果自有的原始数据无法满足用户需求,则需通过购买或交换的方式,从其他数据机构批量获得所需的原始数据。聚合分析中心人工确认接收到全部原始数据后,清洗数据汇总,运用分析模型得出结果,交付用户。
但是,聚合分析中心从其他数据机构批量购买原始数据的代价很大,与其他数据机构交换原始数据可能会因独有数据的分享而丧失自身的竞争优势,并且与其他数据机构协商合作等流程复杂,耗时较长,无法保证分析结果的时效性。
发明内容
本发明提供一种大数据聚合分析方法及装置,用以解决现有技术中聚合分析中心从其他数据机构批量购买原始数据的代价很大,与其他数据机构交换原始数据可能会因独有数据的分享而丧失自身的竞争优势,并且与其他数据机构协商合作等流程复杂,耗时较长,无法保证分析结果的时效性的问题。
本发明的一个方面是提供一种大数据聚合分析方法,包括:
聚合分析中心接收用户提交的订单信息,所述订单信息至少包括目标模型的标识和所述目标模型对应的至少一个数据机构标识,所述目标模型为任一已发布的聚合分析模型,所述目标模型包括聚合模型和至少一个基础模型,每个所述基础模型对应于唯一的一个所述数据机构;
所述聚合分析中心将所述订单信息发送给各所述数据机构标识对应的数据机构,以使各所述数据机构根据所述订单信息中的目标模型的标识以及存储的所述目标模型,确定与自身对应的属于所述目标模型的基础模型,并根据所述与自身对应的属于所述目标模型的基础模型生成中间数据,并将所述中间数据发送给所述聚合分析中心;
所述聚合分析中心接收各所述数据机构发送的所述中间数据;
所述聚合分析中心通过所述目标模型的聚合模型,对各所述中间数据进行聚合分析,得到聚合分析结果。
本发明的另一个方面是提供一种大数据聚合分析方法,包括:
数据机构接收聚合分析中心发送的订单信息,所述订单信息至少包括目标模型的标识和所述目标模型对应的至少一个数据机构标识,所述目标模型为任一已发布的聚合分析模型,所述目标模型包括聚合模型和至少一个基础模型,每个所述基础模型对应于唯一的一个所述数据机构;
所述数据机构根据所述订单信息中的目标模型的标识、以及自身存储的各所述聚合分析模型,确定与自身对应的属于所述目标模型的基础模型;
所述数据机构根据所述与自身对应的属于所述目标模型的基础模型,生成中间数据;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国联合网络通信集团有限公司;中网威信电子安全服务有限公司,未经中国联合网络通信集团有限公司;中网威信电子安全服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711319640.9/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置