[发明专利]一种用于处理网络应用中的数据集的方法与设备有效
申请号: | 201410193604.2 | 申请日: | 2014-05-08 |
公开(公告)号: | CN104008140B | 公开(公告)日: | 2018-11-23 |
发明(设计)人: | 郑锦锋;郑然;吴波 | 申请(专利权)人: | 百度在线网络技术(北京)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F9/50 |
代理公司: | 北京汉昊知识产权代理事务所(普通合伙) 11370 | 代理人: | 罗朋;周建华 |
地址: | 100085 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明的目的是提供一种用于处理网络应用中的数据集的方法与设备。具体地,确定网络应用中的目标数据集所对应的相互独立的多个数据子集的数据集状态信息;确定具有相同所述数据集状态信息的数据子集的第一优先级信息;根据第一优先级信息,执行具有相同所述数据集状态信息的数据子集,以执行多个数据子集。与现有技术相比,本发明通过将目标数据集划分为多个相互独立的数据子集,确定具有相同数据集状态信息的数据子集的第一优先级信息,以根据该第一优先级信息,执行具有相同所述数据集状态信息的数据子集,从而执行多个数据子集,使得各数据子集并行处理,从而提高数据处理的整体效率、机群资源利用率、避免大数据处理经常出现的长尾问题。 | ||
搜索关键词: | 一种 用于 处理 网络 应用 中的 数据 方法 设备 | ||
【主权项】:
1.一种用于处理网络应用中的数据集的方法,其中,该方法包括:确定所述网络应用中的目标数据集所对应的相互独立的多个数据子集的数据集状态信息,其中,所述数据集状态信息表示数据子集所处的处理阶段;确定具有相同所述数据集状态信息的数据子集的第一优先级信息;根据所述第一优先级信息,执行具有相同所述数据集状态信息的数据子集,以执行所述多个数据子集。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410193604.2/,转载请声明来源钻瓜专利网。