[发明专利]处理大规模数据流的设备

说明书

本发明涉及一种处理大规模数据流的设备，包括：知识库；构成前端通信设备的一组硬件和软件，允许捕获来自外部环境的流并且在需要的情况下向该外部环境发送数据，该前端通信设备把流传送到平台以便在该平台处经受不同处理，在执行处理操作的过程中轨迹被收集并存储在记忆存储架构中，该平台产生供应给判决器设备的数据，判决器设备包括定义判决准则的一组硬件和软件，所述判决准则允许启动活动或者发起向所述处理设备的前端通信设备或者向知识库的反馈。

技术领域

本发明涉及数据处理领域并且更具体地涉及用于处理大数据量的设备。

背景技术

数据到处构成我们世界的基本方面，目前明确是数字数据。信息爆炸产生了新的机遇，例如商业机遇。这些大量数据重新定义了产生科学知识并还向企业提供新的增长动力的方式。

数据流交叉，今后冲击大量领域，尤其是经济领域，应该允许存取在单独获得的每个数据流中不可访问的系统性质的信息。语义网络提供了实施该交叉的环境。

语义网络的标准开始普及并稳定(用于表示数据和元数据的RDF(资源描述框架)、OWL(网络本体语言)，以及用于交换的协议，主要是HTTP)。已建立这些标准来便于数据的互操作性和交换。网络事实上变成优先的数据源和最活跃的交换场所。开放或半开放公布数据的交付与推广、这些数据与工业数据的结合、利用它们的工具逐渐地催生了使例如经济领域更有活力的更多重要手段。

数据的收集、集成、分析使用、可视化工作在大量参与者中系统化。现在该工作主要地涉及“冷”数据或随时间几乎不变的数据。然而新的兴趣表现到“热”数据并因此接近实时的数据，这提出新的问题并要求新的解决办法。

已存在用于处理数据流的某些组件或工具，开源的或商业性的。这是例如SPARQL(请求语言)的请求执行引擎和triplestore(存储RDF的一种资料库架构)的情况。

然而，对于数据流的当前量、数量或多样性，当前的技术和工具不能符合用户的需求。

发明内容

本发明的目的是克服现有技术中的涉及大数据流的管理和处理的某些缺点。

该目的是如下实现的：一种处理大规模数据流的处理设备，大规模数据流即大数据，该处理设备包括：知识库；构成前端通信设备的一组硬件和软件，允许捕获来自外部环境的流并且在需要的情况下向该外部环境发送数据，该前端通信设备把流传送到平台以便在该平台处经受不同处理，在执行处理操作的过程中轨迹被收集并存储在记忆存储架构中；该平台产生供应给判决器设备的数据，判决器设备包括定义判决准则的一组硬件和软件，所述判决准则允许启动活动或者发起向前端通信设备或者向知识库的反馈。

根据其它特征，所述不同处理包括：流的语义化，或者概述的创建，或者至少两个流的交叉，或者多个流之间的互连。

根据其它特征，该平台包括多个作为流处理过程的“smart’op”，这些流处理过程例如是经由编写装置编写的，用于产生供应给判决器设备的数据。

根据其它特征，活动轨迹在存储架构中的记忆允许平台通过存取这些轨迹来在不同时间执行处理的重复或可能有的动作的重复。

根据其它特征，流的语义化是按照流的描述的本体进行的。

根据其它特征，流的互连能够包括语义推理。

根据其它特征，流所经受的所有操作促进数据的产生。

根据其它特征，所述数据能够是从对流执行的推理得出的警报或特殊之处。

根据其它特征，知识库包括表示外部环境的知识的信息并且包括对传感器和传感器所支持的架构的描述。

根据其它特征，构成知识的这些信息能够被由判决准则启动的反馈修改，所述判决准则位于“判决器”中。

附图说明