[发明专利]一种实时数据传输系统及其数据同步方法

权利要求书

1.一种实时数据传输系统，包括第一互联网数据中心和第二互联网数据中心，其特征在于，所述第一互联网数据中心包括数据源和至少一个数据适配器，所述第二互联网数据中心包括至少一个传输代理模块，至少一个数据导入服务器，以及与数据导入服务器连接的在线服务模块；

其中所述数据适配器从所述数据源中读取数据，并将读取的数据通过所述传输代理模块转发至所述数据导入服务器，所述数据导入服务器将接收到的数据导入所述在线服务模块。

2.如权利要求1所述的实时数据传输系统，其特征在于，所述数据适配器还用于在从所述数据源读取到数据后，计算读取到的数据的差错校验码，并将读取到的数据以及所述数据的差错校验码通过所述传输代理模块发送至所述数据导入服务器。

3.如权利要求2所述的实时数据传输系统，其特征在于，所述数据导入服务器还用于在接收到数据以及所述数据的差错校验码时，采用所述数据的差错校验码对接收到的数据进行验证，并将差错校验成功的数据导入所述在线服务模块。

4.如权利要求3所述的实时数据传输系统，其特征在于，所述数据导入服务器还用于采用所述数据的差错校验码对接收到的数据进行验证后，若验证失败，记录校验失败信息，其中所述校验失败信息包括文件级失败信息和/或记录级失败信息。

5.如权利要求4所述的实时数据传输系统，其特征在于，所述数据导入服务器还用于在一个同步任务完成后，根据所述校验失败信息对同步失败的数据进行修复。

6.如权利要求1至5任一权利要求所述的实时数据传输系统，其特征在于，所述数据导入服务器包括：

缓存，用于存储文件的多条记录；

数据传输子模块，用于在所述缓存还未写满时，通过所述传输代理模块从所述数据适配器获取数据，并将获取的数据缓存至所述缓存；

数据导入子模块，用于在所述缓存中存在数据时，将所述缓存中的数据导入所述在线服务模块中。

7.如权利要求6所述的实时数据传输系统，其特征在于，所述数据传输子模块采用并发写入方式将获取的数据缓存至所述缓存，所述数据导入子模块采用并发读取方式将所述缓存中的数据导入所述在线服务模块中。

8.如权利要求1至5任一权利要求所述的实时数据传输系统，其特征在于，所述系统还包括：

校验服务器，用于在接收到数据校验指令时，分别从所述数据源以及所述在线服务模块中获取数据，并将获取到的数据进行对比，以对导入至所述在线服务模块中的数据进行校验。

9.一种实时数据传输系统中的数据同步方法，其特征在于，所述方法包括：

至少一个数据导入服务器在接收到数据同步指令时，通过至少一个传输代理模块向至少一个数据适配器发送数据请求；

至少一个数据适配器从数据源读取数据，并将读取的数据通过至少一个传输代理模块发送至至少一个数据导入服务器；

至少一个数据导入服务器从至少一个传输代理模块接收数据，并将接收的数据导入在线服务模块。

10.如权利要求9所述的数据同步方法，其特征在于，所述数据导入服务器在接收到数据同步指令时，通过传输代理模块向数据适配器发送数据请求包括：

数据导入服务器在接收到数据同步指令时，从预先存储的可用传输代理模块列表中选择一个传输代理模块，从预先存储的可用数据适配器列表中选择一个数据适配器；

数据导入服务器向选择的传输代理模块发送数据请求，所述数据请求中包含选择的数据适配器的IP信息；

传输代理模块根据数据请求中的数据适配器的IP信息将数据请求转发至选择的数据适配器。

11.如权利要求9所述的数据同步方法，其特征在于，在所述数据适配器从数据源读取数据之后，所述方法还包括：

数据适配器计算读取的数据的差错校验码，并将所述数据的差错校验码发送至数据导入服务器。