[发明专利]分布式系统的数据处理方法、系统、节点和存储介质在审
| 申请号: | 202111531957.5 | 申请日: | 2021-12-14 |
| 公开(公告)号: | CN116301561A | 公开(公告)日: | 2023-06-23 |
| 发明(设计)人: | 王志超;屠要峰;徐进 | 申请(专利权)人: | 中兴通讯股份有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F9/455;H04L67/1097 |
| 代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 涂超群 |
| 地址: | 518057 广东省深圳市*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 分布式 系统 数据处理 方法 节点 存储 介质 | ||
1.一种分布式系统的数据处理方法,其特征在于,所述分布式系统部署在云化平台中,所述方法应用于管理节点,包括:
接收所述分布式系统中的目标客户端发送的数据读写的操作指令;其中,所述分布式系统包括多个宿主机,每个所述宿主机中部署有客户端和存储节点;
确定所述目标客户端的宿主机;
查询所述目标客户端的宿主机上存在的第一目标存储节点;
将所述第一目标存储节点的信息返回至所述目标客户端,以供所述目标客户端在所述第一目标存储节点进行数据读写。
2.根据权利要求1所述的分布式系统的数据处理方法,其特征在于,每个所述宿主机作为一个机架,所述查询所述目标客户端的宿主机上存在的第一目标存储节点,包括:
获取机架信息;其中,所述机架信息包括:每个所述宿主机中部署的存储节点的信息;
根据所述机架信息,查询所述目标客户端的宿主机上存在的第一目标存储节点。
3.根据权利要求2所述的分布式系统的数据处理方法,其特征在于,所述获取机架信息包括:
获取所述分布式系统中的各存储节点上报的归属关系;其中,所述归属关系为所述各存储节点与所述各存储节点的宿主机的归属关系;
根据所述归属关系,构建存储节点的网络拓扑;
根据所述网络拓扑,获取机架信息。
4.根据权利要求3所述的分布式系统的数据处理方法,其特征在于,在所述根据所述网络拓扑,获取机架信息之后,还包括:
通过预设接口获取所述各存储节点启动的监听器监听到的信息;其中,所述各存储节点在启动时,在所述各存储节点对应的进程内启动监听器;
在根据所述监听到的信息确定所述机架信息更新的情况下,更新所述机架信息。
5.根据权利要求2所述的分布式系统的数据处理方法,其特征在于,所述确定所述目标客户端的宿主机,包括:
获取所述目标客户端的通用唯一识别码UUID;其中,所述UUID中添加有所述目标客户端的宿主机的IP;
解析所述目标客户端的UUID,确定所述目标客户端的宿主机。
6.根据权利要求1所述的分布式系统的数据处理方法,其特征在于,所述存储节点对应有机架名称,所述机架名称为所述存储节点的Pod所在的宿主机的IP;
所述查询所述目标客户端的宿主机上存在的第一目标存储节点,包括:
获取所述分布式系统中的各存储节点对应的机架名称;
根据所述各存储节点对应的机架名称和所述目标客户端的宿主机的IP,查询所述目标客户端的宿主机上存在的第一目标存储节点。
7.根据权利要求1所述的分布式系统的数据处理方法,其特征在于,在所述接收所述分布式系统中的目标客户端发送的数据读写的操作指令之后,所述方法还包括:
确定所述目标客户端与所述分布式系统中各存储节点之间的距离;
根据所述距离,从小到大对所述各存储节点进行排序,得到排序列表;其中,所述排序列表中排在首位的为所述第一目标存储节点;
所述将所述第一目标存储节点的信息返回至所述目标客户端,以供所述目标客户端在所述第一目标存储节点进行数据读写,包括:
将所述排序列表返回至所述目标客户端,以供所述目标客户端按照所述排序列表在所述各存储节点进行数据读写。
8.根据权利要求1所述的分布式系统的数据处理方法,其特征在于,每个所述宿主机中还部署有计算节点,所述方法还包括:
接收所述目标客户端的计算指令;
查询存储有执行所述计算指令所需的数据的第二目标存储节点;
确定所述第二目标存储节点的宿主机;
查询所述第二目标存储节点的宿主机上存在的目标计算节点;
将所述目标计算节点的信息返回至所述目标客户端,以供所述目标客户端在所述目标计算节点进行数据计算。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中兴通讯股份有限公司,未经中兴通讯股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111531957.5/1.html,转载请声明来源钻瓜专利网。





