[发明专利]一种基于消息中间件的数据迁移方法及系统

说明书

本发明提供一种基于消息中间件的数据迁移方法及系统，所述方法包括：当源存储单元满足预设的数据迁移条件时，根据源存储单元发送的迁移请求读取源数据；将源数据存入预设的数据队列中；根据目标存储单元发送的接收请求确定数据队列中与其匹配的源数据和合适的目标存储单元；将匹配的源数据传输至合适的目标存储单元。本发明的基于消息中间件的数据迁移方法及系统，通过消息中间件实现了数据的中转，自动选择合适且理想的存储设备作为迁移目标，提升了系统的运行效率，降低了人工成本和后期维护成本。

技术领域

本发明涉及数据处理技术领域，特别涉及一种基于消息中间件的数据迁移方法及系统。

背景技术

当数据存储设备存储过载时，就要将其中的一部分数据迁移至其它存储设备，传统技术的做法是将过载存储设备中的部分数据直接迁移至任一空闲存储设备，想要选择合适且理想的空闲存储设备作为迁移目标时，还需要相关技术人员对其进行手动配置，效率低，人工和后期维护成本高。

发明内容

本发明目的之一在于提供了一种基于消息中间件的数据迁移方法及系统，通过消息中间件实现了数据的中转，自动选择合适且理想的存储设备作为迁移目标，提升了系统的运行效率，降低了人工成本和后期维护成本。

本发明实施例提供的一种基于消息中间件的数据迁移方法，包括：

当源存储单元满足预设的数据迁移条件时，根据所述源存储单元发送的迁移请求读取源数据；

将所述源数据存入预设的数据队列中；

根据目标存储单元发送的接收请求确定所述数据队列中与其匹配的源数据和合适的目标存储单元；

将匹配的源数据传输至合适的目标存储单元。

优选地，所述当源存储单元满足预设的数据迁移条件时，根据所述源存储单元发送的迁移请求读取源数据，包括：

所述数据迁移条件包括：

所述源存储单元中的数据数目大于预设的数目阈值，

和/或，

接收到用户输入的数据迁移指令，

和/或，

所述源存储单元中预设的数据暂存服务结束时；

所述迁移请求包括：访问权限、访问许可时间和第一存储路径；

根据所述访问权限与所述源存储单元建立连接；

通过所述第一存储路径读取所述源数据；

与所述源存储单元建立连接时，预设的计时器开始计时，当所述计时器计时达到所述访问许可时间时，断开与所述源存储单元的连接。

优选地，所述将所述源数据存入预设的数据队列中，包括：

获取预设的数据队列；

根据预设的判定规则确定所述数据队列中的空闲队列；

将所述空闲队列的最前端作为目标位置；

将所述源数据传输至所述目标位置；

当所述源数据传输至所述目标位置时，将所述目标位置标记为活跃状态，直至所述源数据传输完毕，取消该标记。

优选地，所述根据目标存储单元发送的接收请求确定所述数据队列中与其匹配的源数据和合适的目标存储单元，包括：

所述接收请求包括：多个用户级请求和系统级请求；

解析所述用户级请求获得第一特征标识和第二存储路径；

根据所述第一特征标识确定所述数据队列中与其匹配的源数据；