[发明专利]一种数据同步更新方法及其系统

说明书

本发明涉及一种数据同步更新方法及其系统，该方法包括通过接口获取数据，判断接口是否异常；若接口不异常，以文件的形式保存数据，计算文件MD5校验码；判断MD5校验码是否与最后一次正常解析的MD5校验码一致；若MD5校验码与最后一次正常解析的MD5校验码不一致，则对文件进行解析，并保存到数据库临时表；对比临时表与目标表，更新目标表中的数据。本发明通过在数据同步的过程中引入文件存储，以文件的形式保存接口返回的数据，比较文件的MD5校验码与最后一次正常解析的MD5校验码，判断接口返回的数据是否有更新，若没有更新则无需进行文件解析和规范化处理，若有更新时将更新的数据更新至目标表中，减少了CPU资源和数据库资源的使用，缩短数据同步的时间。

技术领域

本发明涉及通信的技术领域，更具体地说是指一种数据同步更新方法及其系统。

背景技术

随着移动互联网的发展，登录网络线上买票线下消费的线上线下结合的O2O(Online To Offline,在线离线)型电子商务越来越受人们的欢迎，例如，在线购买电影票、体育赛事门票、音乐门票等成为新的移动互联网业务热点，在这些业务中，首先必须由原始的业务公司将门票电子化，然后通常会以某种程序API接口将门票售卖功能开放给下游的代理商。对一个大型的在线票务代理商而言，系统将连接多个原生票务系统的票源，将票源系统中的票务信息同步到本系统中，代理业务系统与原生票务系统之间存在复杂的交互。

原生票务系统与代理业务系统的运作流程，举例来说，在线电影票的购票代理系统，首先必须将原生票务系统的电影院名称、地址、以及电影院的各个影厅信息同步到代理票务系统。然后增加必要的影院简介、影院推荐信息。其次，原生票务系统当前的播放电影的排期、档期等播放信息，需要以较高的频率，例如，每半小时同步到代理票务系统，然后增加对电影的海报、影评等附加信息。在用户登录上系统的时候，浏览正在热映的相关电影海报、影评等，然后选择相应的排期进入购票。

现有的数据同步更新的方法如图1所示，一般是代理票务系统通过接口获取到原生票务系统的数据后，直接进行解析，然后从数据库拿出该部分数据进行对比，发现有变动则更新到数据库中。但是由于各个影院电影的排期信息同步的频率比较高，同时数据量又比较大，如果采用普通的同步流程，数据同步的时间将比较长，有可能前面一次还没同步完，后一次就已经开始，并且数据同步系统将承受越来越大的压力，可能导致CPU资源、数据库连接资源等耗尽，并且，为了使原生票务系统数据变动时代理票务系统能够及时更新数据，在无法改动原生票务系统的前提下，往往会将同步的频率设置得比较高，此时，通过接口获取到的数据将有大概率和上一次获取到的数据相同，按现有的数据同步更新的方法，将会重复解析和更新该部分数据，造成同步数据时间较长和频繁读写数据库，占用大量的CPU资源和数据库资源。

因此，有必要设计一种数据同步更新方法，实现解决多系统之间的数据同步时间较长、数据库资源占用较大的问题。

发明内容

本发明的目的在于克服现有技术的缺陷，提供一种数据同步更新方法及其系统。

为实现上述目的，本发明采用以下技术方案：一种数据同步更新方法，包括以下步骤：

通过接口获取数据，判断接口是否异常；

若接口不异常，则以文件的形式保存数据，计算文件MD5校验码；

判断MD5校验码是否与最后一次正常解析的MD5校验码一致；

若MD5校验码与最后一次正常解析的MD5校验码不一致，则对文件进行解析，并保存到数据库临时表；

对比临时表与目标表，更新目标表中的数据。

其进一步技术方案为：所述若MD5校验码与最后一次正常解析的MD5校验码不一致，则对文件进行解析，并保存到数据库临时表的步骤，包括以下具体步骤：

解析文件，判断解析是否正常；