[发明专利]GPU集群共享显存系统、方法、装置及设备有效
申请号: | 202110852907.0 | 申请日: | 2021-07-27 |
公开(公告)号: | CN113674133B | 公开(公告)日: | 2023-09-05 |
发明(设计)人: | 安仲奇 | 申请(专利权)人: | 阿里巴巴新加坡控股有限公司 |
主分类号: | G06T1/20 | 分类号: | G06T1/20;G06F9/50;G06F8/65 |
代理公司: | 北京君以信知识产权代理有限公司 11789 | 代理人: | 吴文心 |
地址: | 新加坡珊顿道*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | gpu 集群 共享 显存 系统 方法 装置 设备 | ||
1.一种GPU集群共享显存系统,其特征在于,包括:
应用开发装置,用于以GPU集群全局虚拟显存地址空间为编程视图,确定目标应用使用GPU集群全局虚拟显存资源的程序代码,所述程序代码不包括在不同计算节点间传输显存数据的代码;
应用运行装置,部署在第一计算节点上,用于根据为目标应用分配的全局虚拟显存地址空间,确定目标应用的GPU集群全局显存地址映射信息;在目标应用访问GPU显存发生缺页异常时,根据所述全局显存地址映射信息,确定目标页面数据所在的第二计算节点;将第二计算节点中的目标页面数据调入至第一计算节点的GPU显存,目标应用从第一计算节点的GPU显存中读取目标页面数据。
2.一种软件编辑器,其特征在于,用于以GPU集群全局虚拟显存地址空间为编程视图,确定目标应用使用GPU集群全局虚拟显存资源的程序代码,所述程序代码不包括在不同计算节点间传输显存数据的代码;
其中,所述目标应用部署至第一计算节点运行,第一计算节点根据目标应用的全局虚拟显存地址空间,确定目标应用的GPU集群全局显存地址映射信息;在目标应用访问GPU显存发生缺页异常时,根据所述全局显存地址映射信息,确定目标页面数据所在的第二计算节点;将第二计算节点中的目标页面数据调入至第一计算节点的GPU显存,目标应用从第一计算节点的GPU显存中读取目标页面数据。
3.一种GPU集群共享显存装置,其特征在于,包括:
物理显存分配单元,用于根据运行在第一计算节点上的目标应用的GPU集群全局虚拟显存地址空间,确定目标应用的GPU集群全局显存地址映射信息;
物理显存节点确定单元,用于在目标应用访问GPU显存发生缺页异常时,根据所述全局显存地址映射信息,确定目标页面数据所在的第二计算节点;
跨节点页面置换单元,用于将第二计算节点中的目标页面数据调入至第一计算节点的GPU显存,目标应用从第一计算节点的GPU显存中读取目标页面数据。
4.根据权利要求3的装置,其特征在于,
所述跨节点页面置换单元,具体用于通过远程直接内存访问RDMA网络,将第二计算节点中的目标页面数据调入至第一计算节点的GPU显存。
5.根据权利要求3的装置,其特征在于,
所述跨节点页面置换单元,具体用于向第二计算节点发送页面请求;将第二计算节点回送的目标页面数据调入第一计算节点的GPU显存。
6.根据权利要求3的装置,其特征在于,还包括:
映射信息更新单元,用于更新所述全局显存地址映射信息。
7.一种GPU集群共享显存方法,其特征在于,
以GPU集群全局虚拟显存地址空间为编程视图,确定目标应用使用GPU集群全局虚拟显存资源的程序代码,所述程序代码不包括在不同计算节点间传输显存数据的代码;
其中,所述目标应用部署至第一计算节点运行,第一计算节点根据目标应用的全局虚拟显存地址空间,确定目标应用的GPU集群全局显存地址映射信息;在目标应用访问GPU显存发生缺页异常时,根据目标应用的全局显存地址映射信息,确定目标页面数据所在的第二计算节点;将第二计算节点中的目标页面数据调入至第一计算节点的GPU显存,目标应用从第一计算节点的GPU显存中读取目标页面数据。
8.一种GPU集群共享显存方法,其特征在于,包括:
根据运行在第一计算节点上的目标应用的GPU集群全局虚拟显存地址空间,确定目标应用的GPU集群全局显存地址映射信息;
在目标应用访问GPU显存发生缺页异常时,根据目标应用的全局显存地址映射信息,确定目标页面数据所在的第二计算节点;
将第二计算节点中的目标页面数据调入至第一计算节点的GPU显存,目标应用从第一计算节点的GPU显存中读取目标页面数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴新加坡控股有限公司,未经阿里巴巴新加坡控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110852907.0/1.html,转载请声明来源钻瓜专利网。