[发明专利]网页资料下载控制系统及方法

权利要求书

1.一种网页资料下载控制系统，包括应用服务器及与该应用服务器相连的数据库，其特征在于，该应用服务器包括：

设置模块，用于设置资料下载控制参数，所述的资料下载控制参数包括需要下载的资料的网站地址及允许下载的时间范围；

解析模块，用于解析设置的网站地址下的一个网页的资料列表；

获取模块，用于获取解析得到的该资料列表的资料信息，所述资料列表的资料信息包括各条资料的发布时间；

计算模块，用于计算所述资料列表中全部资料的条数；

判断模块，用于通过获取的资料信息来判断所述资料列表中的各条资料是否已经被下载在数据库中，及根据各条资料的发布时间判断该资料列表中的各条资料是否在允许下载的时间范围之内；

生成模块，用于生成所述资料列表中还在允许下载的时间范围之内且没有被下载的资料的脚本语言下载命令；

下载模块，用于通过生成的脚本语言下载命令下载对应的资料，并将下载的资料保存至数据库中；

所述计算模块，还用于计算生成的脚本语言下载命令数；

所述判断模块，还用于判断所述资料列表中资料的条数是否等于生成的脚本语言下载命令数；

翻页模块，用于当所述资料列表中资料的条数等于生成的脚本语言下载命令数时，执行网页的翻页动作。

2.如权利要求1所述的网页资料下载控制系统，其特征在于，所述资料下载控制参数还包括保存下载的资料的路径；下载模块在下载资料的过程中，按照所述的路径把资料下载到数据库中。

3.如权利要求1所述的网页资料下载控制系统，其特征在于，所述资 料列表的资料信息包括：各条资料的下载地址及标题；判断模块通过所述的各条资料的下载地址及标题判断所述资料是否在数据库中已经下载。

4.一种网页资料下载控制方法，其特征在于，该方法包括如下步骤：

设置资料下载控制参数，所述的资料下载控制参数包括需要下载的资料的网站地址及允许下载的时间范围；

解析设置的网站地址下的一个网页的资料列表；

获取解析得到的该资料列表的资料信息，所述资料列表的资料信息包括各条资料的发布时间；

计算该资料列表中全部资料的条数；

通过获取的资料信息来判断所述资料列表中的各条资料是否已经被下载在数据库中，及根据各条资料的发布时间判断该资料列表中的各条资料是否在允许下载时间范围之内；

若资料列表中有资料没有被下载，且所述没有被下载的资料的发布时间在允许下载时间范围之内，则生成所述还在允许下载的时间范围之内且没有被下载的资料的脚本语言下载命令；

通过生成的脚本语言下载命令下载对应的资料，并将下载的资料保存至数据库中；

计算生成的脚本语言下载命令数；

判断所述资料列表中全部资料的条数是否等于生成的脚本语言下载命令数；

若所述资料列表中全部资料的条数等于生成的脚本语言下载命令数，则执行翻页动作。

5.如权利要求4所述的网页资料下载控制方法，其特征在于，该方法还包括步骤：

若资料列表中全部资料的条数不等于生成的脚本语言下载命令数，则结束流程。

6.如权利要求4所述的网页资料下载控制方法，其特征在于，所述资料下载控制参数还包括保存下载的资料的路径；在下载资料的过程中，是按照所述的路径把资料下载到数据库中。

7.如权利要求4所述的网页资料下载控制方法，其特征在于，所述资料列表的资料信息还包括：资料列表中各条资料的下载地址及标题；所述的各条资料的下载地址及标题被用于判断各条资料是否已经被下载在数据库中。