[发明专利]一种流式数据分析的动态建模

摘要

本发明提供一种流式数据分析的动态建模，属于大数据处理技术领域，本发明是在流式数据分析的过程动态构建计算模型。流式数据分析是指在进行多种数据来源的数据分析过程中，由数据产生驱动或者有秒级的定时调度驱动的数据分析过程，在这个过程中，由来源数据到分析结果之间的数据计算逻辑和数据转化关系在系统运行中可以进行变更，这种变更可以实时生效，在变更生效的这一刻起，流式数据分析已经按照新的数据计算逻辑和数据转化关系进行计算。

主权项

一种流式数据分析的动态建模，其特征在于，主要包含三个组件：流数据接入组件、模型动态构建组件、数据输出组件，其中：流数据接入组件：实现从多数据源导入数据到结构化的内存表中；模型动态构建组件：实现模型描述文件的动态变更和读取，根据模型描述文件动态构建计算模型，并对结构化的内存表进行数据加工，加工后的数据调用数据输出组件输出；数据输出组件：数据输出组件负责数据的输出，有三种方式：输出到内存、输出到数据库、输出到内存并定时持久化到数据库。