[发明专利]对账方法、设备、系统及计算机可读存储介质

说明书

本发明公开了一种对账方法，该方法包括：实时读取交易系统产生的交易流水数据；从所述交易流水数据中提取待对账的交易数据；从提取到的所述待对账的交易数据中获取交易标识信息，根据所述交易标识信息对提取到的所述待对账的交易数据进行分组，所述交易标识信息用于唯一标识一笔交易；对各分组中的所述待对账的交易数据进行对账处理。本发明还公开了一种对账设备、系统和一种计算机可读存储介质。本发明提高了交易对账的实时性。

技术领域

本发明涉及大数据处理技术领域，尤其涉及对账方法、设备、系统及计算机可读存储介质。

背景技术

随着大数据时代的到来，大数据相关应用呈现出爆发式增长，尤其对于大型交易系统，每天都要处理海量的交易数据，在此情况下，如何对交易系统产生的交易数据进行分析处理，从而满足交易对账需求是目前亟待解决的问题。

现有的金融网络中，交易系统对账方案主要是对离线交易数据进行批处理对账，比如“T+1”日模式，通过头天采集交易数据，次日才能够对交易数据进行对账，这种对账方式的缺陷在于，对账的时效性不高，若有金融交易出现问题，要等到对账时才发现，容易导致损失。

发明内容

本发明的主要目的在于提出一种对账方法、设备、系统及计算机可读存储介质，旨在提高交易对账的实时性。

为实现上述目的，本发明提供一种对账方法，所述对账方法包括如下步骤：

实时读取交易系统产生的交易流水数据；

从所述交易流水数据中提取待对账的交易数据；

从提取到的所述待对账的交易数据中获取交易标识信息，根据所述交易标识信息对提取到的所述待对账的交易数据进行分组，所述交易标识信息用于唯一标识一笔交易；

对各分组中的所述待对账的交易数据进行对账处理。

优选地，所述实时读取交易系统产生的交易流水数据的步骤包括：

从预设的消息采集节点实时读取交易系统产生的交易流水数据，其中消息采集节点用于实时采集交易系统产生的交易流水数据；

或者，从分布式消息队列中实时读取交易系统产生的交易流水数据，其中分布式消息队列用于缓存所述消息采集节点发送的交易流水数据。

优选地，所述交易流水数据由消息采集节点从交易系统对应的数据中心节点的从节点中同步交易日志文件，并对交易日志文件进行解析和标准化处理得到。

优选地，所述从分布式消息队列中实时读取交易系统产生的交易流水数据的步骤包括：

创建一个滑动窗口，并设置所述滑动窗口的滑动步长；

基于所述滑动窗口和所述滑动步长从分布式消息队列中读取交易系统产生的交易流水数据，其中每个滑动窗口用于采集预设时长内交易系统产生的交易流水数据。

优选地，所述基于所述滑动窗口和所述滑动步长从分布式消息队列中读取交易系统产生的交易流水数据的步骤之后，还包括：

在所述滑动窗口滑动过程中，通过预设的检查点记录所述交易流水数据的数据潜伏期和数据等待次数；

当所述数据潜伏期达到预设的最大潜伏期时，执行步骤：从所述交易流水数据中提取待对账的交易数据；

当所述数据等待次数达到预设的最大潜伏期时，删除所述检查点；

其中，所述数据潜伏期和所述最大潜伏期以计数的方式进行表示。

优选地，所述从所述交易流水数据中提取待对账的交易数据的步骤包括：

将所述交易流水数据转换为分布式数据集；