[发明专利]一种数据处理方法、装置及存储介质

权利要求书

1.一种数据处理方法，其特征在于，该方法包括：

大数据平台模块增量抽取每个业务系统的业务主表和相关联的业务子表，并推送到计费数据库形成对应的计费主表和计费子表；

监控模块监控计费数据库中计费主表对应的插入类型的二进制日志，将所监控的二进制日志通过消息队列发送给转单模块；

转单模块根据消息队列中的计费主表获取到业务主表ID，根据业务主表ID从计费数据库查找到与所述计费主表相关联的计费子表；将计费主表和相关联的计费子表的数据组成报文，发送含有数据报文内容的报文消息队列给自身；根据报文消息队列的内容将报文数据转为计费标准单。

2.如权利要求1所述的方法，其特征在于，所述计费数据库的计费主表和计费子表还包括，用于记录数据表被推送插入到计费数据库时间的推送时间字段；用于记录数据表插入时，以及被处理完成时的计费系统时间戳字段；包括初始和已处理两种状态的计费系统处理状态字段；

在查找到与所述计费主表相关联的计费子表之后，该方法还包括：

将计费主表和相关联的计费子表的ID构成的ID集合通过状态变更消息队列给自身；根据状态变更消息队列的内容更新计费数据库计费主表和计费子表中的计费系统时间戳字段和计费系统处理状态字段。

3.如权利要求1所述的方法，其特征在于，该方法进一步包括：将计费标准单发送给标准单数据库进行保存。

4.如权利要求1所述的方法，其特征在于，所述业务系统的业务主表包括业务主表ID，该业务主表ID对应的数据在业务系统创建时间，该业务主表ID对应的数据在业务系统更新时间，该业务主表ID对应的业务单号，客户编码，计费字段；所述业务系统的业务子表包括与每个业务主表ID相关联的多个业务子表ID，每个业务子表ID对应的数据在业务系统创建时间，每个业务子表ID对应的数据在业务系统更新时间，每个业务子表ID对应的数据的计费状态。

5.如权利要求4所述的方法，其特征在于，所述推送到计费数据库形成对应的计费子表包括：

根据业务子表ID对应的每条数据的计费状态确定是否将该条数据推送到计费数据库的计费子表；

在推送到计费数据库的计费子表时，将该条数据对应一个计费子表ID，该计费子表ID与业务子表ID一一对应，并关联业务主表ID。

6.如权利要求1所述的方法，其特征在于，所述监控计费数据库中计费主表对应的插入类型的二进制日志包括：

配置要监控的计费数据库名称，以及计费主表名，并配置只监控插入类型的二进制日志；

根据配置监控计费数据库计费主表名对应的插入类型的二进制日志。

7.如权利要求5所述的方法，其特征在于，根据报文消息队列的内容将报文数据转为计费标准单包括：

根据计费主表名确定计费标准单上的业务系统来源，单据类型，以及交易类型，并写入计费标准单；

将报文消息队列中的业务单号、客户编码、计费状态、计费日期、计费字段写入计费标准单。

8.如权利要求1所述的方法，其特征在于，转单模块在外部接口调不通，或在查找计费数据库失败时，将从监控模块接收的消息队列通过重试通道发送给自身，以在网络恢复时进行重新转单。

9.如权利要求1所述的方法，其特征在于，转单模块在接收到监控模块发送的消息队列时，或者在自身收到含有数据报文内容的报文消息队列时，根据计费系统业务校验规则，在查找到缺少计费必要的字段时，将含有数据报文内容的报文写入业务异常表。

10.如权利要求1所述的方法，其特征在于，转单模块在收到含有数据报文内容的报文消息队列后，在确定业务单号、业务系统来源，单据类型，以及交易类型与之前的计费标准单内容相同时，进一步根据计费状态确定是否将含有数据报文内容的报文写入重复异常表。