[发明专利]大数据平台

说明书

本发明公开了一种大数据平台，包括第一和第二通信端口、第一和第二数据矩阵标识器，对第一和第二数据源的每组数据进行分类及添加标识；数据整合单元，将第一和第二数据源的数据进行汇总；数据拆分单元，利用第一和第二数据矩阵标识器所添加的对应专属标识，将数据整合单元中的汇总数据拆分，还原为第一及第二数据源中的数据；以及数据索引单元。本发明通过对不同数据源的数据添加矩阵标识，能够实现数据的优化整合，无需在数据整合之前设置专门的存储单元，降低了系统的成本，可以针对各种类型的数据进行整合，由于有数据源矩阵标识的存在，能够从整合后的数据中实现数据的还原。如此极大地方便了数据的分析，利于大数据的生成和分析综合。

技术领域

本发明涉及数据处理领域。

背景技术

当今时代是一个大数据时代，不同的移动电子设备、应用程序等都会产生不同类型的数据。出现了越来越多的共享平台，需要将来自不同地方的数据都综合起来。

但是，我们发现的是，现有的数据综合平台对数据的处理非常简单化，常规的做法是，将来自不同电子设备等的数据存储在存储单元中，然后数据简单的汇合在一起。这种方式存在很多缺陷：一方面，需要前端的存储单元来单独存放数据，增加了系统的成本，需要配置专门的存储单元；另一方面，仅是数据的简单汇总，有时我们需要从汇总的数据中还原出最初来自不同地方的数据，也即找到数据的源头，知道最初的原始数据情况，但是使用以上这种常规的方式无法实现数据的还原，其无法从汇总的数据中拆分出原始的数据；再一方面，现有的这种汇总方法仅能针对相同类型的数据进行汇总，无法针对不同类型的数据进行汇总，通用性不强。可见，现有的数据汇总方法对于数据分析来说是非常不方便的。

因此，本领域迫切需要一种大数据平台，能够实现数据的优化整合，降低系统的成本以及能够实现数据的还原，提供一种通用性强的能够进行数据整合的大数据平台。

发明内容

本发明的目的在于提供大数据平台，以解决上述背景技术中提出的实现数据的优化整合，降低系统的成本以及实现数据还原的问题，提供一种通用性强的能够进行数据整合的大数据平台。

为解决上述技术问题，本发明提供如下技术方案：一种大数据平台，包括：第一通信端口，用于与第一电子设备连接，接收来自所述第一电子设备的第一数据源；第二通信端口，用于与第二电子设备连接，接收来自所述第二电子设备的第二数据源；第一数据矩阵标识器，与所述第一通信端口连接，用于对所述第一数据源的每组数据进行分类及添加第一数据源专属标识，所述第一数据源专属标识包括与数据属性对应的N个标签、为N个标签中的每个标签添加的第一数据源标签标识以及为每个数据添加的第一数据源报头标识，N大于等于1；第二数据矩阵标识器，与所述第二通信端口连接，用于对所述第二数据源的每组数据进行分类及添加第二数据源专属标识，所述第二数据源专属标识包括与数据属性对应的M个标签、为M个标签中的每个标签添加的第二数据源标签标识以及为每个数据添加的第二数据源报头标识，M大于等于1，第二数据源标签标识不同于第一数据源标签标识，第二数据源报头标识不同于第一数据源报头标识；数据整合单元，用于根据所述第一数据矩阵标识器和所述第二数据矩阵标识器对数据所做的分类及添加的标签，将所述第一数据源和所述第二数据源的数据进行汇总，汇总后每组数据具有N+M-K个标签，其中K为N个标签和M个标签中的相同的标签的数量；数据拆分单元，用于利用第一和第二数据矩阵标识器所添加的对应专属标识，将所述数据整合单元中的汇总数据拆分，还原为第一数据源中的数据以及第二数据源中的数据；以及数据索引单元，其与所述数据整合单元连接，用于根据用户的需求将符合条件的数据进行输出。