[发明专利]网页cookie的获取方法及装置

权利要求书

1.一种网页cookie的获取装置，其特征在于，所述获取装置包括：

获取模块，用于获取访问页面的cookie文件；

检查模块，用于检查所述获取模块获取的所述cookie文件中是否存在与待抓取页面匹配的cookie文件；

保存模块，用于当所述检查模块检查到与待抓取页面匹配的cookie文件时，则保存该匹配的cookie文件。

2.如权利要求1所述的获取装置，其特征在于，所述检查模块，具体用于：将所述获取模块获取的所述cookie文件的域名信息与所述待抓取页面的网址进行比较，判断二者是否匹配；若匹配，则确定获取的所述cookie文件中存在与所述待抓取页面匹配的cookie文件。

3.如权利要求1所述的获取装置，其特征在于，所述获取装置还包括：

判断模块，用于在所述保存模块保存该匹配的cookie文件之后，判断是否遍历完获取的所述cookie文件，若判断结果为否，则返回所述检查模块执行检查获取的所述cookie文件中是否存在与待抓取页面匹配的cookie文件的操作。

4.根据权利要求3所述的获取装置，其特征在于，所述获取装置还包括：

抓取模块，用于在所述判断模块的判断结果为是时，使用所述保存模块保存的所述cookie文件进行内容抓取。

5.根据权利要求3所述的获取装置，其特征在于，所述获取装置还包括：

请求分析模块，用于在所述判断模块的判断结果为是时，请求所述待抓取页面；以及分析所述待抓取页面的响应头，获取所述待抓取页面的cookie文件；

合并模块，用于合并获取的所述待抓取页面的cookie文件与保存的所述cookie文件；

抓取模块，用于使用合并后的所述cookie文件进行内容抓取。

6.一种网页cookie的获取方法，其特征在于，所述获取方法包括如下步骤：

获取访问页面的cookie文件；

检查获取的所述cookie文件中是否存在与待抓取页面匹配的cookie文件；

若存在，则保存该匹配的cookie文件。

7.如权利要求6所述的获取方法，其特征在于，所述检查获取的所述cookie文件中是否存在与待抓取页面匹配的cookie文件，具体包括：

将获取的所述cookie文件的域名信息与所述待抓取页面的网址进行比较，判断二者是否匹配；

若匹配，则确定获取的所述cookie文件中存在与所述待抓取页面匹配的cookie文件。

8.如权利要求6所述的获取方法，其特征在于，获取的所述cookie文件有多个，所述在保存该匹配的cookie文件之后，所述获取方法还包括：

判断是否遍历完获取的所述cookie文件；

若判断结果为否，则返回执行检查获取的所述cookie文件中是否存在与待抓取页面匹配的cookie文件的步骤。

9.如权利要求8所述的获取方法，其特征在于，若判断结果为是，则所述获取方法还包括：

使用保存的所述cookie文件进行内容抓取。

10.如权利要求8所述的获取方法，其特征在于，若判断结果为是，则所述获取方法还包括：

请求所述待抓取页面；

分析所述待抓取页面的响应头，获取所述待抓取页面的cookie文件；

合并获取的所述待抓取页面的cookie文件与保存的所述cookie文件；

使用合并后的所述cookie文件进行内容抓取。