[发明专利]一种数据的处理方法及系统有效
申请号: | 201410143672.8 | 申请日: | 2014-04-10 |
公开(公告)号: | CN104376029B | 公开(公告)日: | 2017-12-19 |
发明(设计)人: | 刘坤朋;章韩毅;伍顶方 | 申请(专利权)人: | 北京亚信时代融创咨询有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;H04L29/06 |
代理公司: | 北京中博世达专利商标代理有限公司11274 | 代理人: | 申健 |
地址: | 100193 北京市海淀区西*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 处理 方法 系统 | ||
1.一种数据的处理方法,其特征在于,包括:
通信模块接收业务处理模块发送的访问请求包;
所述通信模块调用拆分合并Mapreduce插件按照拆分规则对所述访问请求包进行拆分处理,得到至少一个访问请求以及每个访问请求对应的路由信息,所述拆分规则对应于总内存数据库MDB拆分为子MDB时采用的拆分方式,所述子MDB为将总MDB经过水平拆分之后的MDB;
所述通信模块通过每个访问请求对应的路由信息将每个访问请求并行的发送给每个访问请求对应的子内存数据库MDB中;
所述通信模块接收各个子MDB发送的应答结果,并调用所述Mapreduce插件将各个应答结果进行合并处理,将合并之后的应答结果包发送给所述业务处理模块。
2.根据权利要求1所述的数据的处理方法,其特征在于,所述通信模块调用Mapreduce插件对所述访问请求包进行拆分处理,得到至少一个访问请求以及每个访问请求对应的路由信息,包括:
所述通信模块向所述Mapreduce插件发送拆分调用指令,所述拆分调用指令用于指示所述Mapreduce插件对所述访问请求包进行所述拆分处理;
所述Mapreduce插件采用拆分规则对所述访问请求包进行拆分,得到所述至少一个访问请求;
所述Mapreduce插件查询路由策略,获得每个访问请求对应的路由信息;
所述Mapreduce插件将所述至少一个访问请求和每个访问请求对应的路由信息提供给所述通信模块。
3.根据权利要求2所述的数据的处理方法,其特征在于,在所述通信模块接收各个子MDB发送的应答结果之前,所述方法还包括:
所述各个子MDB接收所述通信模块发送的访问请求,通过接收的所述访问请求查找所述访问请求需要的数据信息;
所述各个子MDB并行的向所述通信模块发送所述各个子MDB对应的应答结果,所述各个子MDB对应的应答结果中包括所述访问请求需要的数据信息。
4.根据权利要求1-3中任一项所述的数据的处理方法,其特征在于,在所述通信模块接收各个子MDB发送的应答结果之后,所述方法还包括:
所述通信模块检测所述各个子MDB发送的应答结果的数据信息是否完整;
当所述各个子MDB发送的应答结果的数据信息完整时,调用所述Mapreduce插件将各个应答结果进行合并处理,将合并之后的应答结果包发送给所述业务处理模块;
当所述各个子MDB发送的应答结果的数据信息不完整时,向所述业务处理模块发送出错应答结果。
5.一种数据的处理系统,其特征在于,包括:
通信模块,用于接收业务处理模块发送的访问请求包;调用拆分合并Mapreduce插件按照拆分规则对所述访问请求包进行拆分处理,得到至少一个访问请求以及每个访问请求对应的路由信息,所述拆分规则对应于总MDB拆分为子MDB时采用的拆分方式,所述子MDB为将总MDB经过水平拆分之后的MDB;通过每个访问请求对应的路由信息将每个访问请求并行的发送给每个访问请求对应的子内存数据库MDB中;接收各个子MDB发送的应答结果,并调用所述Mapreduce插件将各个应答结果进行合并处理,将合并之后的应答结果包发送给所述业务处理模块;
所述业务处理模块,用于向所述通信模块发送所述访问请求包;接收所述通信模块发送的合并之后的所述应答结果包。
6.根据权利要求5所述的数据的处理系统,其特征在于,所述系统还包括:所述Mapreduce插件;
所述通信模块,还用于向所述Mapreduce插件发送拆分调用指令和所述访问请求包,所述拆分调用指令用于指示所述Mapreduce插件对所述访问请求包进行所述拆分处理;向所述Mapreduce插件发送合并调用指令和各个应答结果,所述合并调用指令用于指示所述Mapreduce插件对所述访问请求包进行所述合并处理;
所述Mapreduce插件,用于在接收到所述拆分调用指令之后,采用拆分规则对所述访问请求包进行拆分,得到所述至少一个访问请求;查询路由策略,获得每个访问请求对应的路由信息;将所述至少一个访问请求和每个访问请求对应的路由信息提供给所述通信模块;在接收到所述合并调用指令之后,对所述各个应答结果进行合并,得到合并之后的所述应答结果包,将所述应答结果包提供给所述通信模块。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京亚信时代融创咨询有限公司,未经北京亚信时代融创咨询有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410143672.8/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置