[发明专利]一种数据文件采集分发的方法、系统有效
申请号: | 201710992502.0 | 申请日: | 2017-10-23 |
公开(公告)号: | CN107766508B | 公开(公告)日: | 2021-06-15 |
发明(设计)人: | 胡文彬;刘祥涛;赵彦晖;孙淏添 | 申请(专利权)人: | 深圳市中润四方信息技术有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F16/16;G06F16/17;G06F16/18;G06F9/445 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 王仲凯 |
地址: | 518000 广东省深圳市南*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据文件 采集 分发 方法 系统 | ||
1.一种数据文件采集分发的方法,其特征在于,包括:
依据获取的采集任务的配置信息,从所述采集任务对应的源主机中采集数据文件,并将所述数据文件存储于对应的文件备份目录中;
在各个文件分发目录中建立与所述文件备份目录中所述数据文件的软链接,并将采集日志写入数据库中;
获取分发任务的分发配置信息;
依据建立的所述软链接,从所述分发配置信息中携带的文件分发目录中获取所述数据文件,并将所述数据文件发送给对应的目标主机;
当完成所述数据文件的分发任务后,删除所述软链接,并将分发日志写入所述数据库中;
依据接收到的所述目标主机发送的重发请求,修改所述采集日志的重发标识;
依据所述重发标识对应的重发规则,将所述数据文件重新发送至所述目标主机。
2.根据权利要求1所述的方法,其特征在于,所述依据所述重发标识对应的重发规则,将所述数据文件重新发送至所述目标主机包括:
S201:判断所述重发标识是否属于第一类标识;若是,则执行S202;若否,则执行S204;
S202:依据所述采集任务的配置信息,在目标文件分发目录中建立与所述文件备份目录中所述数据文件的软链接,并更新所述重发标识;其中,所述目标文件分发目录为所述目标主机对应的文件分发目录;
S203:依据建立的所述软链接,从所述目标文件分发目录中获取数据文件,并将所述数据文件重新发送至所述目标主机,当完成所述数据文件的重新发送后,删除所述软链接;
S204:判断所述重发标识是否属于第二类标识;若是,则执行S205;
S205:将所述备份目录中的数据文件删除,并从所述源主机中重新采集对应的数据文件,并将所述数据文件放入所述备份目录中;返回所述S202。
3.根据权利要求2所述的方法,其特征在于,在所述S202之前还包括:
当监测到所述备份目录中的数据文件不存在时,则从所述源主机中重新采集对应的数据文件,并将所述数据文件放入所述备份目录中。
4.根据权利要求1-3任意一项所述的方法,其特征在于,还包括:
定时从数据库中获取采集任务的配置信息;
依据所述配置信息,扫描相应的备份目录中的数据文件,并删除所述备份目录中存储时间超于预设阈值的目标数据文件。
5.一种数据文件采集分发的系统,其特征在于,包括文件采集模块、文件分发模块和数据库模块;
所述文件采集模块,用于依据获取的采集任务的配置信息,从所述采集任务对应的源主机中采集数据文件,并将所述数据文件存储于对应的文件备份目录中;在各个文件分发目录中建立与所述文件备份目录中所述数据文件的软链接,并将采集日志写入所述数据库模块中;
所述文件分发模块,用于获取分发任务的分发配置信息;依据建立的所述软链接,从所述分发配置信息中携带的文件分发目录中获取所述数据文件,并将所述数据文件发送给对应的目标主机;当完成所述数据文件的分发任务后,删除所述软链接,并将分发日志写入所述数据库模块中;
所述文件采集模块还用于依据接收到的所述目标主机发送的重发请求,修改所述采集日志的重发标识;并触发所述文件分发模块,依据所述重发标识对应的重发规则,将所述数据文件重新发送至所述目标主机。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市中润四方信息技术有限公司,未经深圳市中润四方信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710992502.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种通便润肠的复合酵素
- 下一篇:一种养心安神的复合酵素