[发明专利]基于云计算的网格化大数据挖掘系统

说明书

技术领域

本发明涉及大数据处理领域，尤其涉及一种基于云计算的网格化大数据挖掘系统。

背景技术

云计算是基于互联网的相关服务的增加、使用和交付模式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源，云是网络、互联网的一种比喻说法，过去在图中往往用云来表示电信网，后来也用来表示互联网和底层基础设施的抽象，因此，云计算甚至可以让你体验每秒10万亿次的运算能力，拥有这么强大的计算能力可以模拟核爆炸、预测气候变化和市场发展趋势。用户通过电脑、笔记本、手机等方式接入数据中心，按自己的需求进行运算。

对云计算的定义有多种说法，对于到底什么是云计算，至少可以找到100种解释，现阶段广为接受的是美国国家标准与技术研究院（NIST）定义：云计算是一种按使用量付费的模式，这种模式提供可用的、便捷的、按需的网络访问， 进入可配置的计算资源共享池（资源包括网络，服务器，存储，应用软件，服务），这些资源能够被快速提供，只需投入很少的管理工作，或与服务供应商进行很少的交互。

对于“大数据”（Big data）研究机构Gartner给出了这样的定义，“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产，大数据是指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。

大数据技术的战略意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理，换言之，如果把大数据比作一种产业，那么这种产业实现盈利的关键，在于提高对数据的“加工能力”，通过“加工”实现数据的“增值”。

从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘，但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。

随着云时代的来临，大数据（Big data）也吸引了越来越多的关注，《著云台》的分析师团队认为，大数据（Big data）通常用来形容一个公司创造的大量非结构化数据和半结构化数据，这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱，大数据分析常和云计算联系到一起，因为实时的大型数据集分析需要像MapReduce一样的框架来向数十、数百或甚至数千的电脑分配工作。

大数据需要特殊的技术，以有效地处理大量的容忍经过时间内的数据，适用于大数据的技术，包括大规模并行处理（MPP）数据库、数据挖掘电网、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。

在现有技术中，现有的网络化大数据中存在较多的数据，而用户在挖掘自己需要的数据时，通常采用人工进行，由于数据较多，工作量较大，导致挖掘效率和准确率较低。

综上所述，本申请发明人在实现本申请实施例中发明技术方案的过程中，发现上述技术至少存在如下技术问题：

在现有技术中，现有的网络化大数据挖掘存在效率和准确率较低的技术问题。

发明内容

本发明提供了一种基于云计算的网格化大数据挖掘系统，解决了现有的网络化大数据挖掘存在效率和准确率较低的技术问题，实现了数据挖掘效率和准确率较高的技术效果。

为解决上述技术问题，本申请实施例提供了基于云计算的网格化大数据挖掘系统，所述系统包括：

网络层模块，所述网络层模块用于提供网络通信接口，方便各模块层通信使用；

云存储模块，所述云存储模块用于数据、资料信息分布式存储；

网格计算模块，所述网格计算模块用于高效分布式计算数据，将云存储架构基于网格化的设计，模块化组件，将功能细分化；

智能挖掘模块，所述智能挖掘模块用于基于用户的要求从大数据中挖掘出相关信息。

其中，所述云存储模块具体为基于云技术的云存储模块。

其中，所述网格计算模块分为访问层、应用接口层、基础管理层、存储层。

其中，所述智能挖掘模块提供常用的基础控件，如：按钮、标签、列表框、输入框、窗体。

本申请实施例中提供的一个或多个技术方案，至少具有如下技术效果或优点：