[发明专利]大数据平台的处理终端、读数据和写数据的方法

说明书

本发明提供了大数据平台的处理终端、读数据和写数据的方法，该处理终端，包括：内存、Bcache、硬盘和数据处理模块；数据处理模块，用于执行：当接收到写操作的命令时，判断待写入的数据是否属于热数据，如果是，则按照内存、Bcache、硬盘的顺序，执行写操作的命令；当接收到读操作的命令时，判断待读取的数据是否属于热数据，如果是，则按照内存、Bcache、硬盘的顺序，执行读操作的命令。本发明提供了大数据平台的处理终端、读数据和写数据的方法，能够提高大数据平台处理数据的速度。

技术领域

本发明涉及大数据技术领域，特别涉及大数据平台的处理终端、读数据和写数据的方法。

背景技术

随着大数据技术的快速发展，用户对大数据平台处理数据的速度的要求越来越高。

在现有数据中，大数据平台在处理数据时，按照先内存后硬盘的顺序。但是，由于内存的容量较小，大量的数据仍然需要在硬盘中读写。而在硬盘中读写数据的速度较慢。

发明内容

本发明实施例提供了大数据平台的处理终端、读数据和写数据的方法，能够提高大数据平台处理数据的速度。

第一方面，本发明实施例提供了一种大数据平台的处理终端，包括：

内存、Bcache、硬盘和数据处理模块；

所述数据处理模块，用于执行：

当接收到写操作的命令时，判断待写入的数据是否属于热数据，如果是，则执行A1；

A1：判断所述内存中是否具有存储所述待写入的数据的空间，如果是，则执行A2；否则，执行A3；

A2：将所述待写入的数据写入到所述内存中；

A3：判断所述Bcache中是否具有存储所述待写入的数据的空间，如果是，则执行A4，否则，执行A5；

A4：将所述待写入的数据写入到所述Bcache中；

A5：将所述待写入的数据写入到所述硬盘中；

所述数据处理模块，用于执行：

当接收到读操作的命令时，判断待读取的数据是否属于热数据，如果是，则执行B1；

B1：判断所述内存中是否存在所述待读取的数据，如果是，则执行B2，否则，执行B3；

B2：从所述内存中读取所述待读取的数据；

B3：判断所述Bcache中是否存在所述待读取的数据，如果是，则执行B4，否则，执行B5；

B4：从所述Bcache中读取所述待读取的数据；

B5：从所述硬盘中读取所述待读取的数据。

优选地，

所述数据处理模块，进一步用于执行：

在判断出所述待写入的数据不属于热数据的情况下，执行C1；

C1：判断所述内存中是否具有存储所述待写入的数据的空间，如果是，则执行C2，否则，执行C3；

C2：将所述待写入的数据写入到所述内存中；

C3：将所述待写入的数据写入到所述硬盘中。

优选地，

所述数据处理模块，进一步用于执行：

在判断出所述待读取的数据不属于热数据的情况下，执行：

D1：判断所述内存中是否存在所述待读取的数据，如果是，则执行D2，否则，执行D3；