[发明专利]分析平台的摄取管理器

说明书

一个实施例中的装置包括摄取管理器、与摄取管理器相关联的多个摄取引擎、以及被配置为在摄取管理器的控制下从摄取引擎接收数据的分析平台。所述摄取管理器被配置为结合向所述分析平台的多个分析工作空间中的给定分析工作空间提供数据来与所述摄取引擎中的一个或多个交互。例如分析平台的分析工作空间示意性地被配置为在摄取管理器的控制下从摄取引擎的相应潜在不相交的子集接收数据。附加地或替代地，摄取管理器可以被配置为实现分析平台的分析工作空间中的一个或多个的数据即服务功能。

技术领域

该领域通常涉及信息处理系统，更具体地涉及信息处理系统中的数据摄取。

背景技术

许多不同类型的信息处理系统被配置为合并数据分析功能。例如被配置为执行“大数据”分析的许多系统在本领域中是已知的。然而，在与来自多个不同数据源的数据的摄取有关的这些系统中的一些中可能出现问题。

附图说明

图1是在本发明的示意性实施例中的包括控制用于分析平台的多个不同的摄取引擎的摄取管理器的信息处理系统的框图。

图2是用于在示意性实施例中管理从多个不同的摄取引擎到分析平台的摄取的示例处理的流程图。

图3示出了示意性实施例中的分析平台的摄取管理器的更详细视图。

图4和5示出了在示意性实施例中可用于实现信息处理系统的至少一部分的处理平台的示例。

具体实施方式

本文将参考示例性信息处理系统和相关计算机、服务器、存储设备和其他处理设备来描述本发明的示意性实施例。然而，应了解，本发明的实施例不限于与所示的特定示意性系统和装置配置一起使用。因此，本文使用的术语“信息处理系统”旨在被广泛地解释，以便涵盖例如包括云计算和存储系统的处理系统，以及包括物理和虚拟处理资源的各种组合的其他类型的处理系统。因此，信息处理系统可以包括例如至少一个数据中心或其他类型的基于云的系统，其包括托管访问云资源的租户的一个或多个云。

还应注意，本发明的示意性实施例可包括但不限于包括处理器可读存储介质的装置、系统、方法和计算机程序产品。

图1示出了根据本发明的示意性实施例配置的信息处理系统100。假设信息处理系统100构建在至少一个处理平台上，并且为至少一个分析平台提供数据摄取管理的功能。在该实施例中，系统100更具体地包括摄取管理器102、耦合到摄取管理器102或以其他方式与摄取管理器102相关联的多个摄取引擎104-1,104-2…104-N、以及分析平台105，其被配置为在摄取管理器102的控制下从摄取引擎104接收数据。分析平台105包括多个分析工作空间106-1，106-2，…106-M。摄取管理器102示意性地被配置为选择摄取引擎104中的一个或多个，以用于向分析平台105的分析工作空间106中的给定分析工作空间106提供数据。

作为示例，在一些实现中，分析平台105的分析工作空间106中的两个或更多个被配置为在摄取管理器102的控制下从摄取引擎104的各个潜在不相交的子集接收数据。尽管可以使用其他类型的数据传递模型，但是这样的功能使用数据即服务模型被示意性地提供。

摄取管理器102示意性地被配置为至少部分地基于诸如数据类型，数据量、数据延迟、预期用途、和服务级别协议(SLA)要求的因素来选择摄取引擎104中的一个或多个以向分析平台105的分析工作空间106中的给定分析工作空间106提供数据。

摄取管理器102还被配置为维护与分析平台105的分析工作空间106中的一个或多个分析工作空间106的数据使用有关的历史信息，并至少部分地基于历史信息来调整摄取引擎104中的一个或多个的选择以向这些分析工作空间106提供数据。

在示意性实施例中，摄取管理器102可以提供许多其他类型的附加或替代数据摄取管理功能。