[发明专利]一种分布式系统中内容资源的处理方法及系统

摘要

本申请实施例提供了分布式系统中内容资源的处理方法及系统，方法部分包括：将抓取的内容资源存储至分布式系统中的资源池，并按既定的任务类型进行划分；提取写入任务对应的任务类型，分别从所述资源池中提取所述任务类型对应的目标资源；将所述目标资源按优先级分别写入任务资源表中，并分别对所述目标资源按各自对应的优先级进行排序；前端服务器向所述任务资源表发起提取请求，提取至所述前端服务器。本申请通过任务资源表适合海量数据查询的这一性能优于关系型数据库的特点，对表中的内容资源进行优先级控制，使优先级越高的内容资源更快的进行响应，前端服务器则可按批次对高优先级的资源数据进行优先标注，提高了数据加工的实时性。

主权项

1.一种分布式系统中内容资源的处理方法，其特征在于，所述方法包括：/n将抓取的内容资源存储至分布式系统中的资源池，并在所述资源池中将所述内容资源按既定的任务类型进行划分；/n提取写入任务对应的任务类型，分别从所述资源池中提取所述任务类型对应的目标资源；/n将所述目标资源按所述任务类型对应的优先级分别写入任务资源表中，并在所述任务资源表中分别对所述目标资源按各自对应的优先级进行排序；所述任务资源表用于缓存从所述资源池中提取的目标资源，各目标资源按对应任务类型的优先级分别进行索引后存储；/n前端服务器向所述任务资源表发起提取请求，按优先级在任务资源表中进行检索，形成目标记录集后提取至所述前端服务器，供所述前端服务器对所述记录集中的内容资源进行标注。/n