[发明专利]获取网页中动态加载内容的方法及装置

权利要求书

1.一种获取网页中动态加载内容的方法，其特征在于，所述方法包括：

从网页源代码中获取在所述网页的动态内容加载区域加载首页内容的指定类型文件，所述首页内容是所述动态内容加载区域中首次加载的内容；

根据所述指定类型文件获得所述动态内容加载区域中后续加载的动态内容的请求地址；

根据所述请求地址获取所述动态内容加载区域中后续加载的动态内容。

2.根据权利要求1所述的方法，其特征在于，所述根据所述指定类型文件获得所述动态内容加载区域中后续加载的动态内容的请求地址，包括：

获取所述请求地址的地址构造规则，所述地址构造规则是通过解析所述指定类型文件确定的规则；

根据所述指定类型文件和所述地址构造规则构造所述请求地址。

3.根据权利要求2所述的方法，其特征在于，所述根据所述指定类型文件和所述地址构造规则构造所述请求地址，包括：

从所述指定类型文件中获取指定内容对象；

根据所述指定内容对象确定所述动态加载区域中后续加载的内容的标识；

根据所述后续加载的内容的标识以及所述地址构造规则生成所述请求地址。

4.根据权利要求3所述的方法，其特征在于，当所述后续加载的动态内容中包含多条内容时，所述根据所述后续加载的内容的标识以及所述地址构造规则生成所述请求地址，包括：

根据所述后续加载的内容的标识以及所述地址构造规则生成至少一条分页内容请求，每一条所述分页内容请求用于请求获取所述动态加载区域中一个后续加载的分页中的内容。

5.根据权利要求4所述的方法，其特征在于，所述后续加载的内容的标识为所述动态加载区域中后续加载的第一条内容的标识，所述根据所述后续加载的内容的标识以及所述地址构造规则生成至少一条分页内容请求，包括：

获取所述动态加载区域中每个分页中包含的内容的条数；

根据所述动态加载区域中后续加载的第一条内容的标识、所述每个分页中包含的内容的条数以及所述地址构造规则生成所述至少一条分页内容请求。

6.一种获取网页中动态加载内容的装置，其特征在于，所述装置包括：

文件获取模块，用于从网页源代码中获取在所述网页的动态内容加载区域加载首页内容的指定类型文件，所述首页内容是所述动态内容加载区域中首次加载的内容；

地址获得模块，用于根据所述指定类型文件获得所述动态内容加载区域中后续加载的动态内容的请求地址；

内容获取模块，用于根据所述请求地址获取所述动态内容加载区域中后续加载的动态内容。

7.根据权利要求6所述的装置，其特征在于，所述地址获得模块，包括：

规则获取单元，用于获取所述请求地址的地址构造规则，所述地址构造规则是通过解析所述指定类型文件确定的规则；

地址构造单元，用于根据所述指定类型文件和所述地址构造规则构造所述请求地址。

8.根据权利要求7所述的装置，其特征在于，所述地址构造单元，包括：

对象获取子单元，用于从所述指定类型文件中获取指定内容对象；

标识获取子单元，用于根据所述指定内容对象确定所述动态加载区域中后续加载的内容的标识；

地址生成子单元，用于根据所述后续加载的内容的标识以及所述地址构造规则生成所述请求地址。

9.根据权利要求8所述的装置，其特征在于，当所述后续加载的动态内容中包含多条内容时，所述地址生成子单元，用于根据所述后续加载的内容的标识以及所述地址构造规则生成至少一条分页内容请求，每一条所述分页内容请求用于请求获取所述动态加载区域中一个后续加载的分页中的内容。

10.根据权利要求9所述的装置，其特征在于，所述后续加载的内容的标识为所述动态加载区域中后续加载的第一条内容的标识，所述地址生成子单元，用于获取所述动态加载区域中每个分页中包含的内容的条数，根据所述动态加载区域中后续加载的第一条内容的标识、所述每个分页中包含的内容的条数以及所述地址构造规则生成所述至少一条分页内容请求。