[发明专利]基于教育大数据的多源异构数据采集系统及处理方法

说明书

本发明涉及一种基于教育大数据的多源异构数据采集系统及处理方法，属于数据处理技术领域。多源异构数据采集系统，包括：至少一套采集设备、存储器、处理器以及数据汇总模块。每套采集设备应用于一校园中，用于采集教学过程中学生和/或教师的行为数据。数据汇总模块存储在存储器中并包括一个或多个由处理器执行的软件功能模块，数据汇总模块用于对所述至少一套采集设备采集的数据进行收集、清洗以及分类。数据汇总模块在对每套采集设备采集的数据进行清洗以及分类的过程中，将结构多样、内容杂乱的数据按照一定的格式整理成统一的数据，并滤除其中的冗余信息，从源头上保证了数据的质量，提高了后续分析的效率和可靠性。

技术领域

本发明属于数据处理技术领域，具体涉及一种基于教育大数据的多源异构数据采集系统及处理方法。

背景技术

随着科技的发展，物联网技术逐渐成为当前热门话题之一，众多国际知名企业纷纷投入到物联网技术的研究中。与此同时，数字校园建设作为教育信息化建设的基础，信息化建设的需求推动了相关技术的发展和更新，其中，大数据是目前最为热门的一种技术和能力，它是从海量的多维度的寻常数据中寻找有意义的关联、挖掘事物变化规律，准确预测事物发展趋势的能力。教育大数据则是直接产生于各种教育活动，如何获取这些数据和处理挖掘其间的关系是最重要的基础。伴随着电子技术与无线通信技术的快速发展，“智慧教室”、“智慧城市”等概念也分别涌现，这也成为了科技发展的趋势。在目前的“智慧教室”中教室作为教育的重要场所，是每个学生和老师最为关心的地方，也是数据采集过程中的最为重要的场所之一。常见的教育数据采集主要源于这四大类技术，即物联网感知类技术，视频录制类技术，图像识别类技术，平台采集类技术。该四大类技术的一个实例即如“智慧教室”。但当前针对“智慧教室”的解决方案还存在较多的缺点，主要表现为获取到的数据不够全面，以致于无法准确的涵盖教学中的方方面面，此外，采集设备在获得数据后，便直接将数据传输给后续的设备进行简单分析，以便基于数据间的基本关联等特性将其以图表和/或文字的形式展示出来，功能相对单一。

发明内容

鉴于此，本发明的目的在于提供一种基于教育大数据的多源异构数据采集系统及处理方法，以有效地改善上述问题。

本发明的实施例是这样实现的：

第一方面，本发明实施例提供了一种基于教育大数据的多源异构数据采集系统，包括：至少一套采集设备、存储器、处理器以及数据汇总模块。每套所述采集设备应用于一教室中，用于采集教学过程中学生和/或教师的行为数据；所述数据汇总模块存储在所述存储器中并包括一个或多个由所述处理器执行的软件功能模块，所述数据汇总模块用于对所述至少一套采集设备采集的数据进行收集、清洗以及分类。

在本发明较佳的实施例中，每套所述采集设备包括：应用于教室中的摄像头、触摸屏、电子白板、麦克风阵列和移动终端中的至少一种。

在本发明较佳的实施例中，所述至少一套采集设备所采集的数据为：音频数据、图像数据和文本数据中的至少一种。

在本发明较佳的实施例中，所述数据汇总模块包括：收集子模块，用于收集经所述至少一套采集设备采集的数据以及人工导入的数据；清洗子模块，用于按照预设标准格式对获取到的数据进行清洗，过滤掉冗余信息；分类子模块，用于对清洗后的数据进行分类，得到分类数据；保存子模块，用于将所述分类数据存储到所述存储器中的与所述分类数据相对应的数据库。

在本发明较佳的实施例中，所述分类子模块包括：识别单元，用于对清洗后的数据的类型进行识别；分类单元，用于将识别出的类型打上分类标签，得到分类数据。

在本发明较佳的实施例中，所述数据汇总模块还包括：判断子模块，用于判断清洗后的数据的格式是否与所述预设标准格式一致。

在本发明较佳的实施例中，存储于所述存储器中的数据库包括：Hadoop数据库、Mysql数据库和Nosql数据库。