[发明专利]离线数据与流式数据实时融合计算的方法在审
| 申请号: | 201910380072.6 | 申请日: | 2019-05-08 |
| 公开(公告)号: | CN110309848A | 公开(公告)日: | 2019-10-08 |
| 发明(设计)人: | 张翼飞;陈政 | 申请(专利权)人: | 重庆天蓬网络有限公司 |
| 主分类号: | G06K9/62 | 分类号: | G06K9/62 |
| 代理公司: | 北京酷爱智慧知识产权代理有限公司 11514 | 代理人: | 梁爱荣 |
| 地址: | 401135 重*** | 国省代码: | 重庆;50 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明提供了一种离线数据与流式数据实时融合计算的方法,属于计算机大数据处理技术领域,其首先确认结果数据的计算逻辑,整理需要的输入数据,根据计算结果过程中所有输入的数据的属性、特性的计算逻辑按实时性进行分类,分为两类。一类数据是代表历史的统计结果的离线型数据,另一类是实时性高的实时输入数据。这两部分输入数据经过聚合、计算、统计的才得出最后的实时统计结果。本发明在数据处理过程中,通过对数据进行分类,用适当的计算模式进行计算,兼顾数据的实时性以及数据的计算效率,使得结果数据可以更高效迅速的展现出来。 | ||
| 搜索关键词: | 实时性 计算逻辑 离线数据 流式数据 实时融合 实时输入数据 数据处理过程 数据处理技术 计算模式 计算效率 结果数据 确认结果 实时统计 统计结果 线型数据 分类 聚合 计算机 统计 | ||
【主权项】:
1.一种离线数据与流式数据实时融合计算的方法,其特征在于,包括:S1、首先确认结果数据的计算逻辑,整理需要的输入数据;S2、本发明根据计算结果过程中所有输入的数据的属性、特性、计算逻辑按实时性进行分类;S3、根据S2中的数据分类,进行处理;S4,当遇到离线型数据与实时输入数据需要关联时,采用流式处理的方式,在流式过程处理中去关联离线处理完成的离线型数据的计算结果,用此方法得到一个新的实时输入数据,所述新的实时输入数据是实时输入数据与离线型结果关联的结果数据;S5、用S3,S4步骤中的方式处理完计算过程中所有的输入,即得到最终的计算结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆天蓬网络有限公司,未经重庆天蓬网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910380072.6/,转载请声明来源钻瓜专利网。
- 上一篇:一种模型压缩方法及装置
- 下一篇:血管图像处理方法、装置、设备及存储介质





