[发明专利]一种数据处理方法、装置、电子设备以及存储介质在审
申请号: | 202111149589.8 | 申请日: | 2021-09-29 |
公开(公告)号: | CN113806097A | 公开(公告)日: | 2021-12-17 |
发明(设计)人: | 王永亮;朱一飞;刘源;裴中率 | 申请(专利权)人: | 杭州网易云音乐科技有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F9/54 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 雷航 |
地址: | 310052 浙江省杭州市萧山区钱江世*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 电子设备 以及 存储 介质 | ||
本申请涉及计算机技术领域,公开了一种数据处理方法、装置、电子设备以及存储介质,该方法包括:接收目标数据服务API的数据请求;根据建立的数据服务API以及资源组之间的第一对应关系,确定所述目标数据服务API对应的目标资源组;根据资源组与集群之间的第二对应关系,确定所述目标资源组对应的目标集群;通过所述目标集群,对所述数据请求进行数据处理。上述方法通过资源组实现了数据服务API与集群之间的关联,资源组所对应的数据服务API,均部署到同一个集群下,由于集群之间是相互独立的,因此实现了不同资源组对应的数据之间的隔离,从而避免了数据污染的问题。
技术领域
本申请涉及计算机技术领域,特别涉及一种数据处理方法、装置、电子设备以及存储介质。
背景技术
数据服务作为统一数据中台建设的最上层,能够将数据仓库数据以服务化、接口化的方式提供给数据使用方,屏蔽底层数据存储、计算的诸多细节,简化和加强数据的使用;同时避免烟囱式建设、加强数据API的开发和交付效率,提升数据利用率。
现有技术中,采用Kubernets(一种开源式容器编排系统)+docker(一种开源式应用容器引擎)的技术,基于云主机搭建宿主机进行容器化部署,为用户提供数据服务。
然而,上述方案容器化后整个容器是一体的,容器内没有进行数据隔离,存在数据污染的问题。
发明内容
本申请提供了一种数据处理方法、装置、电子设备以及存储介质,用以避免数据污染的问题。
第一方面,本申请实施例提供一种数据处理方法,所述方法包括:
接收目标数据服务应用程序编程接口(Application Programming Interface,API)的数据请求;
根据建立的数据服务API以及资源组之间的第一对应关系,确定所述目标数据服务API对应的目标资源组;
根据资源组与集群之间的第二对应关系,确定所述目标资源组对应的目标集群;
通过所述目标集群,对所述数据请求进行数据处理。
在一些可选的实施方式中,相同场景的集群放置在同一环境池中。
在一些可选的实施方式中,接收目标数据服务API的数据请求之前,还包括:
响应于所述目标数据服务API创建指令,建立所创建的目标数据服务API与所述目标资源组之间的第一对应关系。
在一些可选的实施方式中,若所述目标资源组不是已有的资源组,则在建立所创建的目标数据服务API与所述目标资源组之间的第一对应关系之前,还包括:
创建所述目标资源组。
在一些可选的实施方式中,创建所述目标资源组之后,还包括:
确定所述目标集群对应的初始数量的服务器;
根据所述初始数量的服务器,构建所述目标集群;
建立所创建的目标资源组与所述目标集群之间的第二对应关系。
在一些可选的实施方式中,根据所述初始数量的服务器,构建所述目标集群,包括:
若所述目标集群对应的资源池中有所述初始数量的未被占用的服务器,则从对应的资源池中镜像所述初始数量的服务器,并将镜像的服务器部署到所述目标集群中;
若所述目标集群对应的资源池没有所述初始数量的未被占用的服务器,则在对应的资源池中生成所述初始数量的服务器,从对应的资源池中镜像生成的所述服务器,并将镜像的服务器部署到所述目标集群中。
在一些可选的实施方式中,通过所述目标集群,对所述数据请求进行数据处理之后,还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州网易云音乐科技有限公司,未经杭州网易云音乐科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111149589.8/2.html,转载请声明来源钻瓜专利网。