[发明专利]异步任务数据处理方法、装置及计算机可读存储介质在审
| 申请号: | 201910970982.X | 申请日: | 2019-10-12 |
| 公开(公告)号: | CN110851248A | 公开(公告)日: | 2020-02-28 |
| 发明(设计)人: | 武建强 | 申请(专利权)人: | 中国平安财产保险股份有限公司 |
| 主分类号: | G06F9/48 | 分类号: | G06F9/48 |
| 代理公司: | 深圳市沃德知识产权代理事务所(普通合伙) 44347 | 代理人: | 高杰;于志光 |
| 地址: | 518000 广东省深圳市福田区益田路*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 异步 任务 数据处理 方法 装置 计算机 可读 存储 介质 | ||
1.一种异步任务数据处理方法,其特征在于,所述方法包括:
获取客户端待处理的异步任务数据,将所述异步任务数据输入至预先构建的异步消息服务器中,其中,所述异步消息服务器包括生产者、管理者以及消费者,所述生产者和所述消费者分别与所述管理者连接;
通过所述生产者对所述异步任务数据进行解析处理,得到所述异步任务数据的消息集;
通过所述管理者对所述异步任务数据的消息集进行汇总处理,得到源消息集;
通过所述消费者对所述源消息集进行消费订阅,得到目标消息集;
将所述目标消息集传输到后台数据库中,得到所述目标消息集的查询结果,并通过所述异步消息服务器将所述查询结果返回给所述客户端。
2.如权利要求1所述的异步任务数据处理方法,其特征在于,所述预先构建的异步消息服务器包括RocketMQ消息中间件;
所述生产者和所述消费者分别与所述管理者连接,包括:
在所述生产者与所述管理者之间开启一个第一信道,通过所述第一信道声明一个第一交换器,在所述生产者和所述管理者之间声明一个第一消息队列,利用路由键绑定所述第一交换器和所述第一队列,实现所述生产者和所述管理者的连接建立;
在所述消费者与所述管理者之间开启一个第二信道,通过所述第二信道声明一个第二交换器,在所述消费者和所述管理者之间声明一个第二消息队列,利用路由键绑定所述第二交换器和所述第二队列,实现所述消费者和所述管理者的连接建立。
3.如权利要求1所述的异步任务数据处理方法,其特征在于,所述解析处理包括:
对所述异步任务数据进行过滤,根据用户的需求通过运维指令对过滤后的所述异步任务数据进行增加、删除、改变以及查看操作,完成所述解析处理。
4.如权利要求1至3中任意一项所述的异步任务数据处理方法,其特征在于,所述管理者包括Broker模块和Name Server模块;
所述通过所述管理者对所述异步任务数据的消息集进行汇总处理,得到源消息集,包括:
将所述异步任务数据的消息集传输到所述Broker模块中,并定期从所述Name Server模块中获取所述异步任务数据的消息集主题路由信息;
通过所述Name Server模块中的Namesrv Startup类对所述消息集主题路由信息进行解析,得到所述异步任务数据的消息集中各个节点的信息;
利用所述Broker模块中Default Request Processor类定义所述消息集中各个节点之间的通讯协议,根据所述通讯协议调用所述异步任务数据的消息集中各自的处理信息,完成所述异步任务数据的消息集进行汇总处理,得到所述源消息集。
5.如权利要求4所述的异步任务数据处理方法,其特征在于,所述通过所述消费者对所述源消息集进行消费订阅,包括:
预设所述管理者中Name Server模块的源数据集节点地址,并进行遍历所述源数据集的主题和标签,得到所述源数据集的标准数据集;
通过预设的分配策略对所述标准数据集分配消费队列;
通过所述消费者定期向所述管理者发送消费请求,根据所述消费请求向所述消费队列进行数据查找,完成所述消费订阅。
6.一种异步任务数据处理装置,其特征在于,所述装置包括存储器和处理器,所述存储器上存储有可在所述处理器上运行的异步任务数据处理程序,所述异步任务数据处理程序被所述处理器执行时实现如下步骤:
获取客户端待处理的异步任务数据,将所述异步任务数据输入至预先构建的异步消息服务器中,其中,所述异步消息服务器包括生产者、管理者以及消费者,所述生产者和所述消费者分别与所述管理者连接;
通过所述生产者对所述异步任务数据进行解析处理,得到所述异步任务数据的消息集;
通过所述管理者对所述异步任务数据的消息集进行汇总处理,得到源消息集;
通过所述消费者对所述源消息集进行消费订阅,得到目标消息集;
将所述目标消息集传输到后台数据库中,得到所述目标消息集的查询结果,并通过所述异步消息服务器将所述查询结果返回给所述客户端。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安财产保险股份有限公司,未经中国平安财产保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910970982.X/1.html,转载请声明来源钻瓜专利网。





