[发明专利]去中心化的数据处理方法、电子装置和存储介质

说明书

本申请涉及一种去中心化的数据处理方法、电子装置和存储介质。其中，该方法包括：第一节点接收第二节点发送的数据请求消息，其中，数据请求消息包括：数据处理标识和所请求数据的描述信息，数据处理标识用于指示第一节点对第二节点所请求的数据的处理方式；第一节点按照预设规则对数据请求消息中的数据处理标识进行修改，将修改后的数据请求消息发送给第三节点，并接收第三节点响应于数据请求消息而返回的第一数据；第一节点根据描述信息确定数据请求消息所请求的第二数据；第一节点根据与数据处理标识对应的处理方式处理第二数据，得到第三数据，并将第三数据和第一数据发送给第二节点处理。通过本申请，降低了大数据集群运算负荷。

技术领域

本申请涉及数据处理领域，特别是涉及一种去中心化的数据处理方法、电子装置和存储介质。

背景技术

机器在进行数据分析过程中，如果将数据分析结果临时存储，则会增加因临时存储导致的额外I/O开销；如果不对数据分析结果进行临时存储，则在该机器偶然宕机时会丢失之前所作的数据分析结果。

这样的问题在大数据处理中尤为突出：目前的大数据分析方法多数是将各个设备的各类数据集中汇集到大数据集群进行统一存储、查询和数据分析，在这种情况下，数据的收集不仅会占用大量的带宽。并且，大数据集群中的机器同样面临I/O开销大的问题，或者因大数据集中在大数据集群的机器中处理，导致机器宕机后大量数据分析结果丢失的问题。

针对相关技术中由大数据集群集对大数据进行分析处理，从而导致大数据集群运算负荷大的问题，目前尚未提出有效的解决方案。

发明内容

本申请实施例提供了一种去中心化的数据处理方法、电子装置和存储介质，以至少解决相关技术中由大数据集群集对大数据进行分析处理，从而导致大数据集群运算负荷大的问题。

第一方面，本申请实施例提供了一种去中心化的数据处理方法，应用于具有多个节点的网络，包括：第一节点接收第二节点发送的数据请求消息，其中，所述数据请求消息包括：数据处理标识和所请求数据的描述信息，所述数据处理标识用于指示所述第一节点对所述第二节点所请求的数据的处理方式，所述处理方式包括以下至少之一：对所述第二节点所请求的数据进行分析后发送给所述第二节点，直接将所述第二节点所请求的数据发送给所述第二节点；所述第一节点按照预设规则对所述数据请求消息中的所述数据处理标识进行修改，将修改后的所述数据请求消息发送给第三节点，并接收所述第三节点响应于所述数据请求消息而返回的第一数据；所述第一节点根据所述描述信息确定所述数据请求消息所请求的第二数据；所述第一节点根据与所述数据处理标识对应的处理方式处理所述第二数据，得到第三数据，并将所述第三数据和所述第一数据发送给所述第二节点。

在其中一些实施例中，所述第一节点包括与所述第二节点邻近的一个或者多个节点；所述第三节点包括与所述第一节点邻近的一个或者多个节点。

在其中一些实施例中，第一节点获取所述网络的拓扑结构；第一节点确定在所述拓扑结构中与所述第一节点直接连接的一个或者多个节点为所述第三节点。

在其中一些实施例中，第一节点获取所述网络中所有节点的IP地址特征值；第一节点根据IP地址特征值，确定与所述第一节点的IP地址特征值的相似度大于预设阈值的一个或多个节点为所述第三节点。

在其中一些实施例中，第一节点获取所述网络中所有节点的IP地址特征值；第一节点根据IP地址特征值，确定与所述第一节点的IP地址特征值的相似度大于预设阈值的一个或多个节点为所述第三节点。

在其中一些实施例中，数据处理标识包括以下至少之一：第一数据处理标识和第二数据处理标识；其中，所述第一处理标识对应的处理方式包括：获取所述第一节点中存储的与所述数据对应的原始数据，将所述原始数据作为所述第三数据；所述第二处理标识对应的处理方式包括：获取所述第一节点中存储的与所述数据对应的原始数据，对所述原始数据进行数据分析，将进行数据分析后得到的数据作为所述第三数据。