[发明专利]一种数据文件处理方法、装置、设备及储存介质在审
申请号: | 201910854279.2 | 申请日: | 2019-09-10 |
公开(公告)号: | CN110569673A | 公开(公告)日: | 2019-12-13 |
发明(设计)人: | 伍深 | 申请(专利权)人: | 深圳乐信软件技术有限公司 |
主分类号: | G06F21/64 | 分类号: | G06F21/64 |
代理公司: | 11332 北京品源专利代理有限公司 | 代理人: | 孟金喆 |
地址: | 518000 广东省深圳市南山区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据信息 预设 数据文件处理 数据文件 中间件 业务逻辑处理 消息中间件 存储介质 订阅消息 获取消息 任务解析 消息主题 | ||
1.一种数据文件处理方法,其特征在于,包括:
通过生产者任务解析预设数据文件,得到所述预设数据文件中的数据信息;
通过所述生产者任务将所述数据信息发送到消息中间件;
通过至少两个消费者任务订阅所述消息中间件的消息主题,获取所述消息中间件中的所述数据信息;
通过至少两个所述消费者任务对所述数据信息进行预设业务逻辑处理。
2.根据权利要求1所述的数据文件处理方法,其特征在于,在所述通过至少两个所述消费者任务对所述数据信息进行预设业务逻辑处理之后,还包括:
当通过所述消费者任务进行的所述预设业务逻辑处理失败,通过所述消费者任务重复从所述消息中间件中获取处理失败的所述数据信息。
3.根据权利要求2所述的数据文件处理方法,其特征在于,所述通过所述消费者任务重复从所述消息中间件中获取处理失败的所述数据信息,包括:
按照预设时间间隔,通过所述消费者任务重复从所述消息中间件中获取处理失败的所述数据信息,直至所述预设业务逻辑处理成功或重复获取所述数据信息的次数达到预设上限次数。
4.根据权利要求1所述的数据文件处理方法,其特征在于,所述通过至少两个消费者任务订阅所述消息中间件的消息主题,获取所述消息中间件中的所述数据信息,包括:
当所述消费者任务获取到所述消息中间件中的所述数据信息,通过所述消费者任务判断所述数据信息是否被处理过;
当所述数据信息未被处理过,向所述消息中间件反馈数据信息获取信息;
通过所述消息中间件接收所述数据信息获取信息,为对应的所述数据信息进行已获取标记。
5.根据权利要求4所述的数据文件处理方法,其特征在于,在所述通过所述消费者任务判断所述数据信息是否被处理过之后,还包括:
当所述数据信息被处理过,跳过本条所述数据信息,获取下一条所述数据信息。
6.一种数据文件处理装置,其特征在于,包括:
预设数据文件解析模块:用于通过生产者任务解析预设数据文件,得到所述预设数据文件中的数据信息;
数据信息发送模块:用于通过所述生产者任务将所述数据信息发送到消息中间件;
数据信息获取模块:用于通过至少两个消费者任务订阅所述消息中间件的消息主题,获取所述消息中间件中的所述数据信息;
预设业务逻辑处理模块:用于通过至少两个所述消费者任务对所述数据信息进行预设业务逻辑处理。
7.根据权利要求6所述的数据文件处理装置,其特征在于,所述数据文件处理装置还包括:
数据信息重复获取模块,用于在所述通过至少两个所述消费者任务对所述数据信息进行预设业务逻辑处理之后,当通过所述消费者任务进行的所述预设业务逻辑处理失败,通过所述消费者任务重复从所述消息中间件中获取处理失败的所述数据信息。
8.根据权利要求7所述的数据文件处理装置,其特征在于,所述数据信息重复获取模块具体用于:按照预设时间间隔,通过所述消费者任务重复从所述消息中间件中获取处理失败的所述数据信息,直至所述预设业务逻辑处理成功或重复获取所述数据信息的次数达到预设上限次数。
9.一种设备,其特征在于,所述设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-5中任一所述的数据文件处理方法。
10.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-5中任一所述的数据文件处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳乐信软件技术有限公司,未经深圳乐信软件技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910854279.2/1.html,转载请声明来源钻瓜专利网。