[发明专利]一种数据处理方法及电子设备

说明书

本发明公开了一种数据处理方法，应用于电子设备中，所述电子设备分别与一个以上第一节点、一个以上第二节点进行通讯，所述方法包括：接收所述一个以上第一节点发送的一组以上节点参数；所述第一节点存储文件的子数据；根据所述一组以上节点参数，计算文件布局信息；接收到所述第一节点或第二节点发送的第一指令时，根据所述第一指令查询与所述第一指令对应的文件布局信息，并将所查询到的文件布局信息发送至所述第一节点或第二节点。本发明还公开了一种电子设备。采用本发明的技术方案，无需将文件布局信息写入磁盘中，并且，无需做大量的计算以获取文件布局信息，避免了大量的节点参数的同步所占用的网络资源。

技术领域

本发明涉及数据处理技术，尤其涉及一种数据处理方法及电子设备。

背景技术

在分布式文件系统中，一个文件被分成多个数据块，每个数据块写入不同的节点中，文件布局（Layout）记录了文件与数据块之间的关联信息。目前，文件布局信息的记录及获取可以通过以下两种方式实现：第一种方式是将文件布局信息记录到磁盘中，当读取文件时，可从磁盘中获取所需的文件布局信息，进而根据文件布局信息访问节点中的数据块；然而，当文件的数目增多时，文件布局信息的数量相应的也会增多，这就需要较多的磁盘来存储大量的文件布局信息，并且，当节点发生故障或更新时，需要更新磁盘中大量的文件布局信息，更新时间过长，更新占用的I/O资源过多。第二种方式是通过同步方式获取节点的参数，根据节点的参数计算所需的文件布局信息，进而根据文件布局信息访问节点中的数据块；然而，随着节点数目的增多，节点的参数的数量也相应的增多，通过同步方式获取节点的参数将会占用大量的网络资源，并且，需要根据节点的参数进行大量的计算，才能够得到文本布局信息。

发明内容

有鉴于此，本发明的主要目的在于提供一种数据处理方法及电子设备，无需将文件布局信息写入磁盘中，并且，无需做大量的计算以获取文件布局信息，避免了大量的节点参数的同步所占用的网络资源。

为达到上述目的，本发明的技术方案是这样实现的：

一种数据处理方法，应用于电子设备中，所述电子设备分别与一个以上第一节点、一个以上第二节点进行通讯，所述方法包括：接收所述一个以上第一节点发送的一组以上节点参数；所述第一节点存储文件的子数据；根据所述一组以上节点参数，计算文件布局信息；接收到所述第一节点或第二节点发送的第一指令时，根据所述第一指令查询与所述第一指令对应的文件布局信息，并将所查询到的文件布局信息发送至所述第一节点或第二节点。

一种电子设备，所述电子设备分别与一个以上第一节点、一个以上第二节点进行通讯，所述电子设备包括：接收单元、处理单元、查询单元以及发送单元；其中，

所述接收单元，用于接收一个以上第一节点发送的一组以上节点参数；所述第一节点存储文件的子数据；

所述处理单元，用于根据所述一组以上节点参数，计算文件布局信息；

所述查询单元，用于接收到所述第一节点或第二节点发送的第一指令时，根据所述第一指令查询与所述第一指令对应的文件布局信息；

所述发送单元，用于将所查询到的文件布局信息发送至所述第一节点或第二节点。

本发明实施例提供的数据处理方法及电子设备，接收一个以上第一节点发送的一组以上节点参数；所述第一节点存储文件的子数据；根据所述一组以上节点参数，计算文件布局信息；接收到所述第一节点或第二节点发送的第一指令时，根据所述第一指令查询与所述第一指令对应的文件布局信息，并将所查询到的文件布局信息发送至所述第一节点或第二节点。如此，无需将文件布局信息写入磁盘中，并且，无需做大量的计算以获取文件布局信息，避免了大量的节点参数的同步所占用的网络资源。

附图说明

图1为本发明实施例一的数据处理方法的流程示意图；

图2为本发明实施例二的数据处理方法的流程示意图；