[发明专利]一种数据装载方法、装置、服务器及存储介质

说明书

本发明公开了一种数据装载方法、装置、服务器及存储介质。该方法包括：接收至少一个客户端的待装载数据并将所述待装载数据发送至目标装载表的页缓存结点；通过所述目标装载表对应的页插入线程将所述页缓存结点中的待装载数据装载至预设数据结构。上述技术方案通过将至少一个客户端的数据缓存至页缓存结点，由对应的页插入线程装载页缓存结点中的待装载数据，实现对一个或多个客户端的数据进行装载，并且以页为单位进行装载，提高数据装载效率。

技术领域

本发明实施例涉及数据处理领域，尤其涉及一种数据装载方法、装置、服务器及存储介质。

背景技术

当数据库业务发生变更或者更换数据库系统时，往往需要将大量的数据迁移至更新后的数据存储结构中，例如，B+树是数据库中一种常用的数据存储结构。向B+树装载数据的过程需要针对每一条记录，先定位到B+树的数据页，再插入记录，记录的插入操作会影响到后续记录的定位操作，即，上一个记录插入完毕后才能进行下一个记录的定位。这种对每一条记录依次进行定位和插入的串行装载方式，不适用于大量的数据、多个装载实例、多个客户端的情况，数据装载效率低下。

发明内容

本发明提供了一种数据装载方法、装置、服务器及存储介质，以提高数据装载的效率。

第一方面，本发明实施例提供了一种数据装载方法，包括：

接收至少一个客户端的待装载数据并将所述待装载数据发送至目标装载表的页缓存结点；

通过所述目标装载表对应的页插入线程将所述页缓存结点中的待装载数据装载至预设数据结构。

进一步的，在所述接收至少一个客户端的待装载数据之前，还包括：

接收到首个客户端的数据装载请求，则初始化数据装载环境。

进一步的，所述初始化数据装载环境包括：

确定目标装载表并创建所述目标装载表对应的页插入线程；

为所述目标装载表分配一批页缓存结点；

针对所述目标装载表生成虚会话，所述虚会话用于处理所述至少一个客户端的数据装载请求；

为所述目标装载表上全局锁；

将所述目标装载表的客户端引用计数置为1。

进一步的，还包括：

每接收到一个客户端的数据装载请求，所述客户端引用计数加1；

每装载完一个客户端的待装载数据，所述客户端引用计数减1。

进一步的，还包括：

若所述客户端引用计数为0，则释放所述目标装载表的全局锁。

进一步的，所述通过所述页插入线程将所述页缓存结点中的待装载数据装载至预设数据结构，包括：

通过所述页插入线程提取页缓存结点作为待插入页，并生成所述待插入页对应的键值；

若所述预设数据结构叶子层的最右端为非根页，则将所述待插入页作为所述非根页的右兄弟，并为所述非根页添加第一虚记录，所述第一虚记录指向所述待插入页。

进一步的，所述通过所述页插入线程将所述页缓存结点中的待装载数据装载至预设数据结构，包括：

若所述预设数据结构的叶子层的最右端为根页，则将所述根页中的数据转移至新页，并为所述根页添加第二虚记录，所述第二虚记录指向所述新页；

将所述待插入页作为所述新页的右兄弟，为所述新页添加第三虚记录，所述第三虚记录指向所述待插入页。

第二方面，本发明实施例提供了一种数据装载装置，包括：