[发明专利]网络中数据传输的方法和系统

说明书

【技术领域】

本发明涉及通信领域，特别是涉及一种网络中数据传输的方法和系统。

【背景技术】

随着终端上各种应用程序的不断增多，终端与服务器之间数据传输的需求越来越大，由此对数据传输的性能提出了很高的要求。

请参阅图1，图1为现有技术中网络数据传输系统的结构示意图。

其中所述网络数据传输系统包括服务器11以及多个的终端12，终端12与服务器11进行数据传输的过程，一般是服务器11首先分配任务至各个终端12，各终端12将接收到的任务存储至预先建立的任务列表，在后续执行任务的过程中，依次从任务列表中取出任务，并根据任务生成一数据请求发送至服务器11，服务器11根据接收到的数据请求获取相应的数据返回至终端12。

当大量的终端12与服务器11之间建立通信关联，进行数据的传输时，很容易导致所述服务器11的负载过大，造成所述服务器11瘫痪，或者造成传输网络的拥塞，从而影响系统的性能。

而且现有技术在对任务进行处理时，往往是按照存储的先后顺序依次取出任务来执行，有些比较重要或紧急的任务无法得到及时快速的处理，而一旦所述服务器11瘫痪或者出现网络故障，重要的任务没有得到及时处理，则将给用户带来损失。

当然， 在所述终端12和服务器11进行数据传输过程中, 还有其他的应用程序来优化两者之间的数据传输的效率。譬如Unix系统下常用的数据备份镜像工具rsync。数据备份镜像工具rsync通过对终端12与服务器11中的数据分块进行扫描，然后进行32位滚动弱校验和128位md4强校验，检索出校验值相同的数据，所述服务器11在发送传输时，只发送校验值不同的数据，通过这种方式可以有效减少带宽的消耗，提高文件传输的效率。但是对于大规模的网络数据传输，数据备份镜像工具rsync则难以管理，性能也不够好，且其状态也很难跟踪。

综上，需要解决现有技术中在进行大数据量的传输时，导致服务器过载，传输网络出现异常，进而导致一些重要的任务不能得到及时处理的技术问题。

【发明内容】

本发明提供一种网络中数据传输的方法和系统，以解决现有技术中在进行大数据量的传输时，导致服务器过载，传输网络出现异常，进而导致一些重要的任务不能得到及时处理的技术问题。

本发明的一个目的在于提供一种网络中数据传输的方法，包括：

终端接收服务器分配的任务并存储，其中该任务包括有优先级标识；

所述终端在存储的任务中按照任务的优先级标识顺序的获取任务，并为获取的任务生成一数据请求发送至中间节点；

所述中间节点接收所述数据请求，判断该中间节点内是否存储有相应的数据，若存储有相应的数据，则将该数据发送至所述终端，若未存储有相应的数据，则将所述数据请求发送至所述服务器，以获取相应的数据，并将获取的数据转发至所述终端。

在本发明一实施例中：所述终端与所述服务器之间设置有多个中间节点；

其中一中间节点在接收到所述终端发送的数据请求后，判断该中间节点内是否存储有相应的数据，若是，则将该数据返回至所述终端；否则将所述数据请求发送至其它中间节点。

在本发明一实施例中：在其它中间节点或者服务器内存储有相应的数据、并将相应的数据返回至所述终端的过程中，还经由所述中间节点转发；

已转发数据的中间节点在将所述数据转发后，还将所转发的数据备份。

在本发明一实施例中：所述终端在接收到服务器分配的任务后，所述方法还包括以下步骤：

创建任务列表，其中所述任务列表包括多级队列，每级队列对应存储相应优先级标识的任务；

按照任务的优先级标识将接收到的任务存储至相应的队列中；以及

判断已存储的任务在其对应队列的存储时间是否超过预设的等待时间，若是，则将所述任务从当前存储的队列中取出，并添加到较当前存储的队列的级别更高的队列中。

在本发明一实施例中：所述中间节点接收所述数据请求的步骤之前，所述方法还包括以下步骤：

所述中间节点生成该中间节点的状态信息，并发送至其它中间节点或终端；

所述其它中间节点或终端在接收到所述状态信息后，根据所述状态信息生成一路由状态表，用来记录对应中间节点的状态；以及

所述其它中间节点或终端根据所述路由状态表选择相应的中间节点发送数据请求。

在本发明一实施例中：所述中间节点在将数据发送至所述终端的过程中，所述方法还包括以下步骤：