[发明专利]一种大数据提取方法和系统

说明书

本发明公开了一种大数据提取方法和系统，包括以下步骤：创建任务模板、创建用户界面以及通过所述用户界面调用所述任务模板；所述创建用户界面步骤包括以下具体步骤：f1.设置权限输入框；f2.设置查询输入框与匹配的所述任务模板中的查询输入接口链接；f3.设置预览区域；f4.设置输出转换接口与相应的转换程序链接；通过采用用户界面调用相应任务模板的方式提取数据，方便数据分析人员的操作，避免了每一次对在线游戏数据提出需求时就需要重新编写相应程序的麻烦；同时，也节约了分析人员与技术人员的沟通成本，提升了工作效率；采用该方法的大数据提取系统也同样具有上述优点。

技术领域

本发明涉及大数据处理领域，尤其涉及大数据平台中在线游戏数据提取的一种大数据提取方法和系统。

背景技术

现有关于大数据的各种应用，大都基于对大数据的分析。而从海量的数据中提取符合分析需求的数据，则是保证分析结果是否准确的基础。目前对于大数据的提取，主要是通过数据库语句或者编写程序来实现，使得对数据库和编程操作都需要较高的技术要求。对于分析人员（一般为产品经理或者运营人员）而言，很少能够具备上述提取技术，都需要借助相关的技术人员的帮助来实现对大数据的提取。

因此，如附图5所示，现有的大数据提取方法一般具有如下流程：分析人员向技术人员提出分析的需求(比如：所要提取的数据类型、数据源属性、关键字特征等等信息)，技术人员对按需求编写数据库语句或者相关程序对数据库进行访问和数据提取，技术人员将提取到的数据形成结果文档，发送给相应的分析人员。

其中，对大数据中平台中在线游戏的数据进行分析，是运营商对该游戏运营情况的了解和对游戏进行改进的基础。但是，分析人员一般不具备从大数据平台提取和处理相应游戏数据的能力，必须通过提出需求的形式让技术人员来完成。因此，技术人员的不仅涉及对多种不同的数据需求进行不同的程序编程，还要对所有需求必须进行相应的分类和排期，导致大数据提取流程周期长、操作灵活性低，极大的影响了对大数据进行分析的工作效率。可见，现有的大数据提取方法存在不足。

发明内容

本发明的目的在于提供一种提供友好用户使用界面的大数据提取的方法和系统。

为了解决上述技术问题，本发明所采用的技术方案为：一种大数据提取方法，包括以下步骤：创建任务模板、创建用户界面以及通过所述用户界面调用所述任务模板进行数据提取；所述创建用户界面步骤包括以下具体步骤：

f1.设置权限输入框，用以根据输入的权限显示可以匹配的所述任务模板；

f2.设置查询输入框与匹配的所述任务模板中的查询输入接口链接，用以输入查询条件；

f3.设置预览区域，用以显示执行所述预处理函数后的查询结果。

f4.设置输出转换接口与相应的转换程序链接，用以将所述预览区域中符合查询条件的数据转换为相应格式后输出。

进一步的，所述创建任务模板的步骤包括以下具体步骤：

m1.根据需求定义预处理函数；

m2.调用相应的所述预处理函数，编写查询语句；

m3.为所述查询语句预留输入第一查询条件和第二查询条件的查询输入接口；

m4.为所述任务模板设定操作权限。

再进一步的，所述步骤m3后还包括以下步骤：

m31.所述第一查询条件设置为数据的列表属性；

m32.所述第二查询条件设置为数据的行范围；

m33.为所述列表属性设置选择标记，以被标记后的所述列表属性为有效列表属性。

又一步的，所述创建任务模板步骤前还包括以下步骤：