[发明专利]一种移动通信数据文件多线程实时采集方法

摘要

本发明涉及移动通信网中网管系统，尤其涉及移动通信网中网管系统的数据采集系统，特别涉及一种移动通信数据文件多线程实时采集方法。它包括服务器时间同步方式、服务器文件完整性判定方式、服务器目录递归实时扫描获取尚未采集文件的方法、通过连接池下载尚未采集的文件、服务器连接池维护、服务器连接超时监控器、服务器采集记录器、采集系统运行日志系统。本发明具有完善的运行日志系统，使用方法简单，通过简单配置即可添加采集任务，通过数据库脚本即可查询本发明运行情况以及每个时段各个服务器采集到文件情况、各个文件的生成延迟以及采集延迟，对维护人员的要求低，维护成本低，生产效率高，适用于服务器设备多、数据文件量大、实时性要求高等特点的文件采集要求。

主权项

一种移动通信数据文件多线程实时采集方法，包括以下步骤：A、维护一个服务器配置文件；B、维护一个系统配置文件；C、初始化系统，读取配置信息，将最近两日下载内容关联到系统；D、依据配置连接服务器，每个服务器开启一个扫描线程，每个扫描线程轮询扫描配置的文件目录，并把扫描线程纳入采集线程超时监控器进行监控；E、每次扫描首先同步系统时间；F、每次扫描递归文件目录，获取所有文件的信息；G、依据获取的文件信息判断文件的完整性，完整的进入下一步；H、依据获取的文件信息判断文件是否在下载时间窗内，在下载时间窗内的进入下一步；I、依据获取的文件信息判断文件是否已经下载过，未下载过的进入下一步；J、对于未下载过的文件进行下载；K、记录单文件下载日志；L、扫描完毕后符合下载条件的所有文件下载完毕后记录当次整体下载记录。