[发明专利]一种基于区块链的数据处理方法

说明书

本发明公开一种基于区块链的数据处理方法，处理方法包括数据采集模块、数据预处理模块、数据分析模块和数据综合处理模块，所述数据采集模块，指利用多个数据库来接收发自客户端(Web、App或者传感器形式等)的数据，本发明采用基于区块链的处理方式，利用一串使用密码学方法相关联产生的数据块，每一个数据块中包含了一批次比特币网络交易的信息，用于验证其信息的有效性(防伪)和生成下一个区块具有“不可伪造”“全程留痕”“可以追溯”“公开透明”“集体维护”等特征，基于这些特征，区块链技术奠定了坚实的“信任”基础，创造了可靠的“合作”机制，使得数据处理更加快速，安全性更高。

技术领域

本发明属于区块链的数据处理相关技术领域，具体涉及一种基于区块链的数据处理方法。

背景技术

数据是对事实、概念或指令的一种表达形式，可由人工或自动化装置进行处理。数据经过解释并赋予一定的意义之后，便成为信息。数据处理是对数据的采集、存储、检索、加工、变换和传输。数据处理的基本目的是从大量的、可能是杂乱无章的、难以理解的数据中抽取并推导出对于某些特定的人们来说是有价值、有意义的数据。数据处理是系统工程和自动控制的基本环节。数据处理贯穿于社会生产和社会生活的各个领域。数据处理技术的发展及其应用的广度和深度，极大地影响了人类社会发展的进程。数据处理的时候可以基于各种处理方法。

区块链是一个信息技术领域的术语，从本质上讲，它是一个共享数据库，存储于其中的数据或信息，具有“不可伪造”“全程留痕”“可以追溯”“公开透明”“集体维护”等特征，基于这些特征，区块链技术奠定了坚实的“信任”基础，创造了可靠的“合作”机制，具有广阔的运用前景。块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链，是比特币的一个重要概念，它本质上是一个去中心化的数据库，同时作为比特币的底层技术，是一串使用密码学方法相关联产生的数据块，每一个数据块中包含了一批次比特币网络交易的信息，用于验证其信息的有效性(防伪)和生成下一个区块。

现有的数据处理方法技术存在以下问题：现有的数据处理方法，效率较低，只能满足传统的简单数据处理，面对较为复杂的多种数据的集中处理速度较慢，安全性低。

发明内容

本发明的目的在于提供一种基于区块链的数据处理方法，以解决上述背景技术中提出的现有的数据处理方法，效率较低，只能满足传统的简单数据处理，面对较为复杂的多种数据的集中处理速度较慢，安全性低的问题。

为实现上述目的，本发明提供如下技术方案：

一种基于区块链的数据处理方法，处理方法包括数据采集模块、数据预处理模块、数据分析模块和数据综合处理模块，所述数据采集模块，指利用多个数据库来接收发自客户端(Web、App或者传感器形式等)的数据，并且用户可以通过这些数据库来进行简单的查询和处理工作；

优选的，所述数据预处理模块，指将上述来自前端的采集的数据导入到一个集中的大型分布式数据库，并且可以在导入基础上做一些简单的清洗和预处理工作；

优选的，所述数据分析模块，指利用分布式数据库，来对存储于其内的海量数据进行普通的分析和分类汇总等；

优选的，所述数据综合处理模块，指在现有数据上面进行基于区块链的计算，从而起到预测的效果，从而实现一些高级别数据分析的需求。

优选的，所述数据采集模块，使用传统的关系型数据库MySQL和Oracle等来存储每一笔事务数据，采集过程中，其主要特点和挑战是并发数高，因为同时有可能会有成千上万的用户来进行访问和操作，比如火车票售票网站和淘宝，它们并发的访问量在峰值时达到上百万，所以需要在采集端部署大量数据库才能支撑，并且如何在这些数据库之间进行负载均衡和分片的确是需要深入的思考和设计。

优选的，所述数据预处理模块，导入与预处理过程的特点和挑战主要是导入的数据量大，每秒钟的导入量经常会达到百兆，甚至千兆级别。