[发明专利]一种网页数据的核对方法

说明书

技术领域

本发明涉及数据处理领域，特别是涉及一种网页数据的核对方法。

背景技术

随着互联网技术的不断发展，越来越多的数据通过网页的方式进行呈现。因此在网页中呈现的数据需要人为的完成对其的查找及相应的核对工作。

例如，在电子商务领域中，随着第三方支付平台的日益成熟，各企业越来越倾向于通过第三方支付的方式与顾客进行交易，由于第三方支付平台的交易信息更新及时有效，所以建立起了企业与顾客之间的良好合作。而第三方支付平台往往会将买卖双方的交易信息等内容进行记录后通过网页的形式提供给商家或用户查看。企业通过第三方平台提供的交易信息与自身的交易记录进行核对，以确保账目的准确无误。但是由于数据在网页中显示，并且查看交易信息较为繁琐，如果人为的采用在网页中对逐条交易信息进行查找并且比对的方式，则可能会出现人为的对账失误，进而造成企业的经济损失。另一方面，由于企业每天的交易信息数量过于庞大，并且往往更新速度较快，因此，如果仍采用上述的方法，会大大降低整体的工作效率。

由此可见，提供一种网页数据的核对方法以提高核对数据时的准确性以及核对的执行效率，是本领域技术人员亟待解决的问题。

发明内容

本发明的目的是提供一种网页数据的核对方法及装置，避免人为核对网页数据时效率低以及可能出现核对错误的情况，进而提高准确性以及工作效率。

为解决上述技术问题，本发明提供一种网页数据的核对方法，包括：

获取网页数据，并对网页数据进行提取，以得到目标数据；

将目标数据进行分类，并写入目标数据表中；

获取标准数据表，并根据标准数据表与目标数据表之间相对应的栏位建立标准数据表与目标数据表的连接关系；其中标准数据表中记录有用于核对的标准数据；

根据连接关系核对标准数据表与目标数据表的对应数据，并得到对应数据的差值，将差值作为核对结果。

优选的，获取网页数据具体为：

通过网络爬虫技术获取网页数据。

优选的，在获取网页数据，并对网页数据进行提取，以得到目标数据后，该方法进一步包括：

将目标数据写入目标数据文件。

优选的，在得到对应数据的差值，将差值作为核对结果后，该方法进一步包括：

输出核对结果。

优选的，在输出核对结果之前，该方法进一步包括：

设定误差阈值；

相应的，在得到对应数据的差值后，该方法进一步包括：

判断差值是否在误差阈值的范围内，如果是，则执行输出核对结果的步骤；

否则，进行错误提示。

优选的，在输出核对结果后，该方法进一步包括：

将核对结果存储到本地数据库。

优选的，写入目标数据表的对应栏位中具体为：

写入hive数据库的目标数据表的对应栏位中。

此外，本发明还提供一种网页数据的核对装置，包括：

数据提取模块，用于获取网页数据，并对网页数据进行提取，以得到目标数据；

数据写入模块，用于将目标数据进行分类，并写入目标数据表中；

数据表连接模块，用于获取标准数据表，并根据标准数据表与目标数据表之间相对应的栏位建立标准数据表与目标数据表的连接关系；其中标准数据表中记录有用于核对的标准数据；

数据核对模块，用于根据连接关系核对标准数据表与目标数据表的对应数据，并得到对应数据的差值，将差值作为核对结果。

优选的，该装置进一步包括：

数据写入模块，用于将目标数据写入目标数据文件。

优选的，该装置进一步包括：

输出模块，用于输出核对结果。

本发明所提供的网页数据的核对方法，对网页中所呈现的数据进行了提取操作，进而得到目标数据文件，相当于将网页中零散的数据进行了提取及整合，使每条数据不再零散显示在网页中，方便了后续对数据的进一步操作。此外，将目标数据文件中的数据进行归类写入数据表中的目的是为了进一步与标准数据表建立连接以进行两个表单中对应数据位的核对。可见本发明所提供的方法通过使用数据表之间的连接关系进行数据的核对，避免了人为核对网页数据时效率低以及可能出现核对错误的情况，进而提高了准确性以及工作效率。此外，本发明还提供一种网页数据的核对装置，与上述的方法对应，有益效果如上所述。

附图说明