[发明专利]在海量数据下完成账单对账的方法及系统

说明书

技术领域

本发明涉及数据库领域，尤其是一种能够实现在海量数据下完成账单对账的方法及系统。

背景技术

数据库是信息存储和检索系统。很多公司利用数据库来保存其数据，以提高管理的效率。随着存储的数据量的剧增，很多数据库存储的数据量非常大，通常称之为海量数据。

为了提高查询效率和减少存储空间，现有技术中提供了很多海量数据的存储方式和查询方式。比如，在申请号为200510089094.5的中国申请中，公开了一种海量数据紧缩存储方法及查询装置，该方法主要包括，先通过侦测CPU的类型，选择与所述CPU类型相匹配的存储策略进行数据存储；然后，在页面内保存一条具有完整信息的记录，其它记录均参照该记录；随后，采用增量的方式记录各个索引记录之间的差别；随后，区分历史数据和活动数据的步骤，将历史数据中由多版本并发控制协议附加的头部版本控制数据去除，并实现历史数据和活动数据的动态转换；最后，在数据库内根据数据值的频度不同，对数据值进行重新编码，并且在不解码的情况下进行运算。上述方案通过数据存储规模减少，来达到访问同样的数据量需要访问的页面减少的目的。也就是说，上述方案是通过增加处理器的处理量来减少数据存储空间，进而提高查询效率。当有大量用户在访问数据库时，每个用户对数据库系统发出了处理请求：如查询、下载等，数据库就会存在很大的压力。

请参阅图1，其为现有的一种网上交易平台的原理结构示意图。它包括商户1、中间平台2、发卡子系统3和用户4。用户4预购买商户1的商品，先利用中间平台2完成发卡子系统3的网上支付，然后，商户1通过邮寄或其它方式将商品交于用户4。商户1与发卡子系统3定期与中间平台2进行对账划账处理。

当然，发卡子系统3完成的功能也可以集成到中间平台2上。中间平台2以支付宝为例，用户4完全可以在支付宝上开设一账户，并在账户上存储若干金额，这样，用户4预购买商户1的商品时，只需要通过支付宝进行扣款处理即可。这样，只需要商户1定期完成与支付宝的对账划账工作。

通常，中间平台2上设置有一数据库，该数据库实时记录每一笔交易。并且，商户1和发卡子系统3也是通过访问数据库定期来进行业务账单的对账工作。还是以支付宝为例，截止去年年底，支付宝的会员已超过三千万，淘宝网的交易总量多达一百六十多亿，从这些数据可知，用户通过淘宝网来购买商品，并通过支付宝来进行付费处理是非常常见且数量众多，换句话说，支付宝上设置的数据库仅实时记录每一笔交易就已是非常大的处理压力。更有甚者，该数据库还需要定期接收商户和发卡银行的对账处理请求，由此带来更为巨大的处理压力：数据库处理速度下降、响应时间变长。

综上所述，现有数据库在具有处理大量数据而存在压力的情况下，会员还需要定期访问其数据库，查询数据库中的数据进行对账处理，从而造成整个数据库处理能力下降的技术问题。

发明内容

本发明的目的在于提供一种在海量数据下完成账单对账的方法及系统，以解决现有技术中存在数据库处理能力下降的技术问题。

为了达到上述目的，本发明提供了一种在海量数据下完成账单对账的方法，包括：(1)将数据从数据库中下载至数据仓库；(2)从数据仓库中取出数据，生成账单文件，将所述账单文件存储至账单文件存储区；(3)接收外部终端发出的对账请求，从所述账单文件存储区中读出账单文件，进行对账工作。

步骤(2)中生成账单文件为：将该些取出的数据以会员为单位进行分类，每一分好类的数据形成一账单文件，所述账单文件通过会员信息和该些账单共在的交易时间进行标识。

步骤(2)中生成账单文件为：将该些取出的数据以会员为单位进行分类，每一分好类的数据又以更小时间单元为单位进一步划分数据；每一划分好的数据形成一账单文件，所述账单文件通过会员信息和该些账单共在交易时间进行标识。

步骤(2)中将所述账单文件存储至账单文件存储区中进一步为：

账单文件是以会员为单位进行存储，存储每一新的账单文件时，先找到所述账单文件所属会员在账单文件存储区中的存储空间，然后，将该账单文件保存至该存储空间的空闲区域上。

步骤(3)进一步为：

接收到外部终端发出的对账请求后，先获得发出请求的会员信息及账单所在交易时间；

从账单文件存储区中找到所述会员所在存储空间；

将账单所在交易时间对应的账单文件下载至所述外部终端，以便进行对账处理。