[发明专利]一种基于单双日期的数据处理方法及系统在审
申请号: | 201810237134.3 | 申请日: | 2018-03-21 |
公开(公告)号: | CN108519910A | 公开(公告)日: | 2018-09-11 |
发明(设计)人: | 魏晓林 | 申请(专利权)人: | 四川斐讯信息技术有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/50 |
代理公司: | 上海硕力知识产权代理事务所(普通合伙) 31251 | 代理人: | 郭桂峰 |
地址: | 610100 四川省成*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 服务器集群 集群 数据处理系统 整体服务器 服务资源 辅服务器 负载过重 计算资源 控制中心 任务分配 任务类型 数据分析 数据上传 主服务器 单入口 两套 分配 优化 | ||
1.一种基于单双日期的数据处理方法,其特征在于,包括:
S100获取当前日期;
S200根据所述当前日期所属的单双日类别,选取所述当前日期的主服务器集群及辅服务器集群;
S300获取待分配的数据处理任务的类型;
S400根据所述数据处理任务类型,将所述数据处理任务分配给相应的服务器集群进行处理。
2.根据权利要求1所述的一种基于单双日期的数据处理方法,其特征在于,所述步骤S200包括:
S210判断所述当前日期是否是单日,若是,进入步骤S220,否则进入步骤S230;
S220选取所述单日服务器集群作为主服务器集群,且选取所述双日服务器集群作为辅服务器集群;
S230选取所述双日服务器集群作为主服务器集群,且选取所述单日服务器集群作为辅服务器集群。
3.根据权利要求1所述的一种基于单双日期的数据处理方法,其特征在于,所述步骤S400包括:
S410当所述待分配的数据处理任务为实时性数据处理任务时,将所述实时性数据处理任务分配给所述主服务器集群进行处理;
或
S420当所述待分配的数据处理任务为实时性数据处理任务时,判断所述实时性数据处理任务的数据量是否比预设的第一参考数据量大,若是,进入步骤S422,否则,进入步骤S421;
S421将所述实时性数据处理任务分配给所述主服务器集群进行处理;
S422将超出所述第一参考数据量的数据分配给所述辅服务器集群进行实时处理,其余的实时性数据通过所述主服务器集群进行处理,进入步骤S423;
S423当所述辅服务集群上的实时性数据处理完毕后,将所述辅服务器集群处理后的实时性数据迁移至所述主服务器集群。
4.根据权利要求1-3任一项所述的一种基于单双日期的数据处理方法,其特征在于,所述步骤S400还包括:
S430当所述待分配的数据处理任务为非实时性数据处理任务时,根据预设的非实时性数据分配策略,将所述数据处理任务分配给相应的服务器集群进行分析处理。
5.根据权利要求4所述的一种基于单双日期的数据处理方法,其特征在于,所述步骤S430包括:
S431判断所述非实时性数据处理任务的数据处理量是否比预设的第二参考数据量大,若是,进入步骤S432,否则进入步骤S433;
S432将所述非实时性数据处理任务分配给所述辅服务器集群进行处理;
S433分别获取所述主服务器集群、辅服务器集群的计算资源占用情况;
S434根据所述主服务器集群、辅服务器集群的计算资源占用情况,将所述非实时性数据处理任务分配给计算资源占用较少的服务器集群。
6.一种基于单双日期的数据处理系统,其特征在于,包括:控制中心、由单日服务器集群和双日服务器集群组成的两套服务器集群;其中:
所述控制中心包括:
日期获取模块,用于获取当前日期;
选取模块,用于根据所述日期获取模块获取的当前日期所属的单双日类别,从所述两套服务器集群中选取一套服务器集群作为所述当前日期的主服务器集群,另一套服务器集群则作为辅服务器集群;
类型获取模块,用于获取待分配的数据处理任务的类型;
任务分配模块,用于根据所述类型获取模块获取的所述数据处理任务的类型,将所述数据分析处理任务分配给相应的服务器集群。
7.根据权利要求6所述的一种基于单双日期的数据处理系统,其特征在于,所述选取模块包括:
单双日判断子模块,用于判断所述日期获取模块获取的当前日期所属的单双日类别;
选取子模块,用于当所述单双日判断子模块判断所述当前日期属于单日时,选取所述单日服务器集群作为主服务器集群,且选取所述双日服务器集群作为辅服务器集群;当所述单双日判断子模块判断所述当前日期属于双日时,选取所述双日服务器集群作为主服务器集群,且选取所述单日服务器集群作为辅服务器集群。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川斐讯信息技术有限公司,未经四川斐讯信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810237134.3/1.html,转载请声明来源钻瓜专利网。