[发明专利]一种数据采集系统及其数据采集的方法

权利要求书

1.一种数据采集系统，其特征在于，包括：工作单元(100)；

所述工作单元(100)包括：协议层子单元(103)和命令子单元(104)；

所述协议层子单元(103)包括URL模块(1031)；

所述URL模块(1031)包括接口子模块(10311)；

所述命令子单元(104)包括用于监听管理命令类型的HTTP连接请求的网络端口，所述命令子单元(104)用于将监听到的所述管理命令类型的HTTP连接请求发送给所述协议层子单元(103)；

所述协议层子单元(103)用于接收HTTP连接请求，并根据所述连接请求，通知所述工作单元(100)加载和初始化所述URL模块(1031)以及所述URL模块(1031)的接口子模块(10311)，或者调用所述URL模块(1031)；

所述URL模块(1031)用于对所述连接请求中的数据进行解密和分类，并根据所述数据的类型调用所述接口子模块(10311)；

所述接口子模块(10311)用于将所述数据写入本地文件系统。

2.如权利要求1所述的系统，其特征在于，所述工作单元(100)还包括：接收子单元(101)和传输子单元(102)；

所述接收子单元(101)包括用于监听数据接收类型的HTTP连接请求的网络端口，所述接收子单元(101)用于将监听到的所述数据接收类型的HTTP连接请求发送给所述协议层子单元(103)；

所述传输子单元(102)包括用于监听数据传输类型的HTTP连接请求的网络端口，所述传输子单元(102)用于将监听到的所述数据传输类型的HTTP连接请求发送给所述协议层子单元(103)。

3.如权利要求1所述的系统，其特征在于，所述系统还包括：管理单元(200)；所述管理单元(200)用于向所述工作单元(100)发送数据传输类型和命令管理类型的HTTP连接请求，并且用于接收所述工作单元(100)发送的，数据传输完成消息和数据接收完成消息。

4.一种权利要求1至3之一所述数据采集系统实现数据采集的方法，其特征在于，包括步骤：

C：加载并且初始化URL模块和所述URL模块的接口子模块；

D：接收HTTP连接请求，如果所述连接请求的类型为管理命令类型，执行所述步骤C，如果所述连接请求的类型为数据传输类型，执行步骤E，如果所述连接请求的类型为数据接收类型，执行步骤F；

E：将所述连接请求中的数据写入分布式文件系统，然后向管理单元发送数据传输完成消息，执行所述步骤D；

F：调用所述URL模块对所述连接请求中的数据进行解密和分类；

G：根据所述连接请求中的数据的类型，调用所述接口模块，将所述连接请求中的数据写入本地文件系统，判断所述接口模块的处理周期是否结束，如果结束，向所述管理单元发送数据接收完成消息，然后执行所述步骤D，否则，直接执行所述步骤D。

5.如权利要求4所述的方法，其特征在于，在所述步骤C之前还包括步骤B：创建主进程和多个子进程，所述子进程通过接收子单元的网络端口和命令子单元的网络端口监听HTTP连接请求，所述主进程通过所述接收子单元的网络端口、所述命令子单元的网络端口和传输子单元的网络端口监听HTTP连接请求。

6.如权利要求5所述的方法，其特征在于，在所述步骤B之前还包括步骤A：读取工作单元的系统配置文件。

7.如权利要求5所述的方法，其特征在于，所述步骤D具体包括步骤：

D1：接收HTTP连接请求；

D2：如果所述连接请求通过所述命令子单元的网络端口监听获得，则所述连接请求的类型为管理命令类型，执行步骤C；

D3：如果所述连接请求通过所述传输子单元的网络端口监听获得，则所述连接请求的类型为数据传输类型，执行步骤E；

D4：如果所述连接请求通过所述接收子单元的网络端口监听获得，则所述连接请求的类型为数据接收类型，执行步骤F。