[发明专利]服务器中的数据队列的更新方法及系统有效
| 申请号: | 201310741616.X | 申请日: | 2013-12-27 |
| 公开(公告)号: | CN103731369A | 公开(公告)日: | 2014-04-16 |
| 发明(设计)人: | 于凤东;张磊;马一鸣 | 申请(专利权)人: | 乐视网信息技术(北京)股份有限公司 |
| 主分类号: | H04L12/861 | 分类号: | H04L12/861;H04L29/08 |
| 代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 许志勇 |
| 地址: | 100089 北京市海淀区*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 服务器 中的 数据 队列 更新 方法 系统 | ||
技术领域
本申请涉及数据传输的方法及系统,具体涉及一种服务器中的数据队列的更新方法及系统。
背景技术
随着网络流量的快速成长,许多过去不容易实现的服务也可以被轻易的完成。例如:宽带的上传多媒体文件(multimedia file)。由于海量的传输仍会影响服务器的负荷量。因此在已知的多媒体服务器也会具备带宽管理(Bandwidth Manager)的功能。服务器可以透过带宽分布或缓存等方式减轻同时间的资料传输量。
此外,所述的传输方式更结合了多个实体磁盘,使得数据可以同步的写入所述磁盘中。而现有技术对数据写入磁盘的方式,是将数据同步的由来源端写入服务器中。服务器会暂存这些数据文件。之后,服务器在将这些数据文件分批的写入实体磁盘。
这种写入的方式的实现成本低廉且快速。但是数据写入的过程中若发生错误,则数据只能重新写入。因此数据重新传输的时间就会拉长,而且也会增加网络带宽的负载。此外,同一份数据文件除了要从客户端中重新载入,而且也要在服务器内部重新传输。
而数据文件是以缓存(buffer)的方式写入分散式文件装置中。因此所有的数据文件都会被排入同一个缓存中。这样会造成数据文件取出时的混乱。特别是,不同种类的数据文件若是指针指向错误时会造成两笔数据文件的会毁损。
发明内容
本申请所要解决的技术问题在于提供一种服务器中的数据队列的更新方法,避免数据文件在切分时或写入磁盘阵列时所发生的传输错误。
为了解决上述问题,本申请揭示了一种服务器中的数据队列的更新方法包括:侦测本地目录的数据文件是否有异动;若侦测到本地目录有新增的所述数据文件时,则为所述新增的数据文件创建内部队列,并指派所述内部队列记录所述数据文件的路径资讯;若侦测到本地目录的所述数据文件被修改时,则根据所述数据文件的路径资讯更新内部队列中的路径资讯;若侦测到本地目录的所述数据文件被删除时,删除对应所述数据文件的内部队列。
进一步地,所述侦测本地目录的数据文件是否有异动包括:记录所述内部队列与所述数据文件的创建资讯,所述创建资讯包括所述数据文件的接收时间、数据文件的文件长度;定时扫描所述数据文件与所述创建资讯是否一致;若两者不一致时,确定本地目录的数据文件有异动。
进一步地,所述所述侦测本地目录的数据文件是否有异动包括:若本次读取的所述数据文件且不存在所述数据文件的相关记录时,则确定有新增的所述数据文件的异动;若本次读取的所述数据文件与前次读取的所述数据文件的接收时间和/或数据文件的文件长度不一致时,则确定有修改数据文件的异动;若前次记录的所述数据文件且本次读取时所述数据文件不存在,则确定有删除数据文件的异动。
进一步地,若侦测到本地目录的所述数据文件被修改时,根据被修改的所述数据文件的路径资讯,查找所述数据文件对应的内部队列,并更新查找到的内部队列中的路径资讯;若侦测到本地目录的所述数据文件被删除时,根据被删除的数据文件的路径资讯查找被删除的数据文件对应的内部队列,并删除查找到的内部队列。
为了解决上述问题,本申请另揭示了一种数据切分的传输系统,包括:侦测模块,用于侦测本地目录的数据文件是否有异动;队列管理模块,连接于所述侦测模块,用于若所述侦测模块侦测到本地目录有新增的所述数据文件时,则为所述新增的数据文件创建内部队列,并指派所述内部队列记录所述数据文件的路径资讯;所述队列管理模块,还用于若所述侦测模块侦测到本地目录的所述数据文件被修改时,则根据所述数据文件的路径资讯更新内部队列中的路径资讯;若所述侦测模块侦测到本地目录的所述数据文件被删除时,删除对应所述数据文件的内部队列。
进一步地,所述侦测模块进一步包括:记录单元、扫描单元、确定单元;其中,所述记录单元,用于记录所述内部队列与所述数据文件的创建资讯,所述创建资讯包括所述数据文件的接收时间、数据文件的文件长度;所述扫描单元,用于定时扫描所述数据文件与所述创建资讯是否一致;所述确定单元,用于若两者不一致时,确定本地目录的数据文件有异动。
进一步地,所述确定单元具体用于:所述若本次读取的所述数据文件且不存在所述数据文件的相关记录时,则确定有新增的所述数据文件的异动;若本次读取的所述数据文件与前次读取的所述数据文件的接收时间和/或数据文件的文件长度不一致时,则确定有修改数据文件的异动;若前次记录的所述数据文件且本次读取时所述数据文件不存在,则确定有删除数据文件的异动。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于乐视网信息技术(北京)股份有限公司,未经乐视网信息技术(北京)股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310741616.X/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





