[发明专利]数据处理系统、资源调度方法及装置在审
申请号: | 202110377602.9 | 申请日: | 2021-04-08 |
公开(公告)号: | CN115203813A | 公开(公告)日: | 2022-10-18 |
发明(设计)人: | 严超华;鞠林;粘为博;王兵;卿泉;王刚 | 申请(专利权)人: | 淘宝(中国)软件有限公司 |
主分类号: | G06F30/15 | 分类号: | G06F30/15;G06F30/27;G06Q10/04;G06Q10/06;G06Q50/30;G06K9/62 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 李晓庆 |
地址: | 311121 浙江省杭州市余杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理系统 资源 调度 方法 装置 | ||
本说明书实施例提供数据处理系统、资源调度方法及装置,其中,数据处理系统包括数据采集模块,被配置为接收包含目标对象的初始图像,并基于所述初始图像构建模型训练集以及模型测试集;模型处理模块,被配置为基于所述模型训练集对目标模型进行训练,基于所述模型测试集对所述目标模型进行测试,并基于测试结果对所述目标模型进行更新;数据处理模块,被配置为基于更新后的目标模型对所述初始图像进行分析获得候选图像,并通过预设规则获取包含目标对象的目标图像,将所述候选图像以及所述目标图像作为所述初始图像输入所述数据采集模块。
技术领域
本说明书实施例涉及计算机技术领域,特别涉及一种数据处理系统。本说明书一个或者多个实施例同时涉及一种资源调度方法,一种资源调度装置,一种计算设备,以及一种计算机可读存储介质。
背景技术
在车辆自动驾驶逐渐成熟,寻求落地,走向量产的大背景下,会存在适用在车辆自动驾驶的算法,而单一套通用的算法模型很难覆盖复杂多样的交通环境,因此会有多套算法模型对车辆自动驾驶技术进行支持,而多套算法模型无疑会极大的增加算法模型的生产成本以及生产效率。
因此急需提供一种可以节省算法模型生产成本的数据处理系统。
发明内容
有鉴于此,本说明书施例提供了一种数据处理系统。本说明书一个或者多个实施例同时涉及一种资源调度方法,一种资源调度装置,一种计算设备,以及一种计算机可读存储介质,以解决现有技术中存在的技术缺陷。
根据本说明书实施例的第一方面,提供了一种数据处理系统,包括:
数据采集模块,被配置为接收包含目标对象的初始图像,并基于所述初始图像构建模型训练集以及模型测试集;
模型处理模块,被配置为基于所述模型训练集对目标模型进行训练,基于所述模型测试集对所述目标模型进行测试,并基于测试结果对所述目标模型进行更新;
数据处理模块,被配置为基于更新后的目标模型对所述初始图像进行分析获得候选图像,并通过预设规则获取包含目标对象的目标图像,将所述候选图像以及所述目标图像作为所述初始图像输入所述数据采集模块。
根据本说明书实施例的第二方面,提供了一种资源调度方法,包括:
接收用户的模型训练请求,其中,所述模型训练请求中携带有所述用户的用户标识;
基于所述用户标识确定所述用户对应的资源分组,并从所述资源分组对应的资源池中为所述用户分配对应的计算资源;
基于所述计算资源通过所述数据处理系统执行所述用户的模型训练请求,其中,所述数据处理系统包括上述数据处理系统。
根据本说明书实施例的第三方面,提供了一种资源调度装置,包括:
请求接收模块,被配置为接收用户的模型训练请求,其中,所述模型训练请求中携带有所述用户的用户标识;
资源分配模块,被配置为基于所述用户标识确定所述用户对应的资源分组,并从所述资源分组对应的资源池中为所述用户分配对应的计算资源;
执行模块,被配置为基于所述计算资源通过所述数据处理系统执行所述用户的模型训练请求,其中,所述数据处理系统包括上述数据处理系统。
根据本说明书实施例的第四方面,提供了一种计算设备,包括:
存储器和处理器;
所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令,该计算机可执行指令被处理器执行时实现所述资源调度方法的步骤。
根据本说明书实施例的第五方面,提供了一种计算机可读存储介质,其存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现所述资源调度方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于淘宝(中国)软件有限公司,未经淘宝(中国)软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110377602.9/2.html,转载请声明来源钻瓜专利网。